DishwasherBench

Hva er DishwasherBench

DishwasherBench er et språkmodell-benchmark-spill basert på realistisk oppvaskmaskin-fysikksimulering. Det kan spilles direkte i nettleseren under navnet Spotless.

Viktige funksjoner

• Basert på stivlegeme-fysikksimulering av en ekte Bosch SMV4HAX40G oppvaskmaskin, med støtte for nøyaktig 3D-modell-lasting
• Simulerer vaskeprosessen inkludert dyse-vannstråler, dråper, avrenning, flekker og kjemiske reaksjoner med vaskemiddel
• Fysikksimuleringsresultater er fullt deterministiske under samme lastforhold, noe som muliggjør gjentakbar verifisering
• Det samme spillet støtter både menneskelig spilling via nettleser og språkmodell-interaksjon via MCP-grensesnittet
• Tilbyr en Suggest spots-funksjon som anbefaler optimale plasseringsposisjoner for gjenstander

Hvem det er for

Passer for forskere og utviklere som evaluerer språkmodeller på fysiske resonnerings- og romplanleggingsoppgaver, og for vanlige brukere som vil oppleve et oppvaskmaskin-pakkespill i nettleseren.

Hvordan komme i gang

1. Besøk GitHub-repositoriet på https://github.com/composo-ai/DishwasherBench
2. Åpne og spill spillet direkte i nettleseren
3. Kjør den skriptede spilleren ved å følge Quick start-delen i README
4. Koble til en språkmodell for testing ved å følge Run a model-delen i README

Sammensatt fra offentlige beskrivelser på verktøyets offisielle nettsted / README / lanseringsside. Priser og brukertall er ikke verifisert; vennligst sjekk det offisielle nettstedet. Noen seksjoner ble utarbeidet med hjelp fra AI. Skrevet på kinesisk og engelsk; andre språk er maskinoversatt.