Parsimony

Què és Parsimony

Parsimony és un benchmark de codi obert que mesura quanta codi addicional introdueixen els models de codificació d'IA en completar tasques, avaluant la concisió del model.

Funcionalitats principals

• Mesura la quantitat de codi addicional introduït pels models de codificació d'IA en completar tasques
• Utilitza elements sintàctics (com ara sentències, crides, noms i literals) com a unitats d'encodificació per al recompte
• Avaluat en pedaços públics de DeepSWE, SWE-bench Verified i SWE-bench Live
• Càlcul net d'unitats d'encodificació: el codi eliminat es dedueix
• Admet l'enviament d'usuaris de pedaços públics per a nous models

Per a qui és

Adequat per a desenvolupadors de models de codificació d'IA, investigadors i desenvolupadors preocupats per la mantenibilitat del codi a llarg termini.

Com començar

1. Visita https://parsimony.lasu.dev/ per veure els resultats del benchmark
2. Vés a https://github.com/La5u/Parsimony per al codi obert i la metodologia detallada
3. Envia pedaços públics per a nous models per participar en el benchmark

Compilat a partir de descripcions públiques del lloc web oficial / README / pàgina de llançament de l'eina. Els preus i el nombre d'usuaris no s'han verificat; consulta el lloc web oficial. Algunes seccions s'han redactat amb ajuda d'IA. Escrit en xinès i anglès; altres idiomes són traduïts automàticament.