Hjem › Søk og forskning › Parsimony
Benchmark / forskning / guide
Parsimony
Show HN: Parsimony – an open-source benchmark for how much code AI models add
Besøk Parsimonys nettsted / prosjektside →HN-diskusjon
Hva er Parsimony
Parsimony er en åpen kildekode-benchmark som måler hvor mye ekstra kode AI-kodemodeller introduserer når de fullfører oppgaver, og evaluerer modellenes konsishet.
Viktige funksjoner
- Måler mengden ekstra kode som introduseres av AI-kodemodeller når de fullfører oppgaver
- Bruker syntaktiske elementer (som setninger, kall, navn og litteraler) som kodingsenheter for telling
- Evaluert på offentlige patches fra DeepSWE, SWE-bench Verified og SWE-bench Live
- Netto kodingsenhetsberegning: slettet kode trekkes fra
- Støtter brukerinnsending av offentlige patches for nye modeller
Hvem det er for
Passer for utviklere av AI-kodemodeller, forskere og utviklere som er opptatt av langsiktig vedlikehold av kode.
Hvordan komme i gang
- Besøk https://parsimony.lasu.dev/ for å se benchmark-resultater
- Gå til https://github.com/La5u/Parsimony for åpen kildekode og detaljert metodikk
- Send inn offentlige patches for nye modeller for å delta i benchmarken
Sammensatt fra offentlige beskrivelser på verktøyets offisielle nettsted / README / lanseringsside. Priser og brukertall er ikke verifisert; vennligst sjekk det offisielle nettstedet. Noen seksjoner ble utarbeidet med hjelp fra AI. Skrevet på kinesisk og engelsk; andre språk er maskinoversatt.
Lignende alternativer (Søk og forskning)
Få et «Featured on AI Hot List»-merke · Send inn et verktøy
← Tilbake til «Søk og forskning» · Full hot list · Bruksområdelister