fde-gym

Què és fde-gym

fde-gym és una plataforma d'avaluació en línia per a l'era dels LLM. Cada cas d'avaluació prové d'escenaris reals de lliurament a clients. Els usuaris han d'utilitzar un Agent de codificació per completar la tasca, amb un judici final que es dona només després que el sistema es posi en producció.

Funcionalitats principals

• Cada cas d'avaluació prové d'escenaris reals de lliurament a clients
• Els usuaris completen les tasques guiant un Agent de codificació
• Proporciona un sistema en execució, documentació, historial i personal que es pot consultar
• Després que el sistema es posi en producció, el judici final es basa en trànsit real i es dona una puntuació de 0-100
• Una oportunitat de lliurament; es resten punts per consumir temps del personal del client

Per a qui és

Adequat per a desenvolupadors, investigadors i equips que necessiten entrenar o avaluar les capacitats d'Agent de codificació LLM. S'utilitza per simular la resolució de problemes de punta a punta en escenaris reals de lliurament a clients.

Com començar

1. Visita https://github.com/deeplethe/fde-gym
2. Visita el lloc web per veure la llista de casos
3. Selecciona un cas i llegeix els materials proporcionats pel client
4. Guia l'Agent de codificació per fer canvis i envia per a avaluació en producció

Compilat a partir de descripcions públiques del lloc web oficial / README / pàgina de llançament de l'eina. Els preus i el nombre d'usuaris no s'han verificat; consulta el lloc web oficial. Algunes seccions s'han redactat amb ajuda d'IA. Escrit en xinès i anglès; altres idiomes són traduïts automàticament.