Parsimony

Apakah Parsimony

Parsimony ialah penanda aras sumber terbuka yang mengukur berapa banyak kod tambahan yang diperkenalkan oleh model pengekodan AI semasa melengkapkan tugas, menilai kehematan model.

Ciri utama

• Mengukur jumlah kod tambahan yang diperkenalkan oleh model pengekodan AI semasa melengkapkan tugas
• Menggunakan elemen sintaksis (seperti penyataan, panggilan, nama dan literal) sebagai unit pengekodan untuk pengiraan
• Dinilai pada tampalan awam daripada DeepSWE, SWE-bench Verified dan SWE-bench Live
• Pengiraan unit pengekodan bersih: kod yang dipadam ditolak
• Menyokong penyerahan tampalan awam oleh pengguna untuk model baharu

Untuk siapa ia

Sesuai untuk pembangun model pengekodan AI, penyelidik dan pembangun yang prihatin dengan kebolehselenggaraan kod jangka panjang.

Cara memulakan

1. Lawati https://parsimony.lasu.dev/ untuk melihat keputusan penanda aras
2. Pergi ke https://github.com/La5u/Parsimony untuk kod sumber terbuka dan metodologi terperinci
3. Serahkan tampalan awam untuk model baharu bagi menyertai penanda aras

Disusun daripada penerangan awam di laman web rasmi / README / halaman pelancaran alat. Harga dan bilangan pengguna belum disahkan; sila semak laman web rasmi. Beberapa bahagian disediakan dengan bantuan AI. Ditulis dalam Bahasa Cina dan Inggeris; bahasa lain adalah terjemahan mesin.