fde-gym

Apakah fde-gym

fde-gym ialah platform penilaian dalam talian untuk era LLM. Setiap kes penilaian berasal daripada senario penghantaran pelanggan sebenar. Pengguna mesti menggunakan Ejen pengekodan untuk melengkapkan tugas, dengan penghakiman akhir diberikan hanya selepas sistem dilancarkan secara langsung.

Ciri utama

• Setiap kes penilaian berasal daripada senario penghantaran pelanggan sebenar
• Pengguna melengkapkan tugas dengan membimbing Ejen pengekodan
• Menyediakan sistem berjalan, dokumentasi, sejarah dan kakitangan yang boleh dirujuk
• Selepas sistem dilancarkan secara langsung, penghakiman akhir berdasarkan trafik sebenar dan skor 0-100 diberikan
• Satu peluang penyerahan; mata ditolak untuk penggunaan masa kakitangan pelanggan

Untuk siapa ia

Sesuai untuk pembangun, penyelidik dan pasukan yang perlu melatih atau menilai keupayaan Ejen pengekodan LLM. Digunakan untuk mensimulasikan penyelesaian masalah hujung ke hujung dalam senario penghantaran pelanggan sebenar.

Cara memulakan

1. Lawati https://github.com/deeplethe/fde-gym
2. Lawati laman web untuk melihat senarai kes
3. Pilih kes dan baca bahan yang disediakan oleh pelanggan
4. Bimbing Ejen pengekodan untuk membuat perubahan dan serahkan untuk penilaian langsung

Disusun daripada penerangan awam di laman web rasmi / README / halaman pelancaran alat. Harga dan bilangan pengguna belum disahkan; sila semak laman web rasmi. Beberapa bahagian disediakan dengan bantuan AI. Ditulis dalam Bahasa Cina dan Inggeris; bahasa lain adalah terjemahan mesin.