Default
Door Remote - 03 Aug 2026
Zoals mede-oprichter Grace Li vertelt, begon haar bedrijf een paar weken voordat ze afstudeerde in 2025, met een handvol studievrienden die probeerden hun AI-game-engine te laten werken. De modellen konden functionele spellen maken, maar geen van de spellen was leuk – wat de interessante vraag opriep: hoe kun je zien of een spel leuk zal zijn?
Er was geen vervanging voor menselijk oordeel, besloten ze, en al snel waren ze aan het brainstormen over manieren om op grote schaal eerlijke menselijke feedback te krijgen. Het resultaat werd Design Arena, een AI-tool die nu door 5,3 miljoen mensen over de hele wereld wordt gebruikt. Het bleek dat er veel AI-bedrijven waren die op zoek waren naar schaalbare gebruikersfeedback – en velen van hen waren bereid ervoor te betalen.
“Het was voor veel van deze modellen het ontbrekende knelpunt om verbeteringen aan te brengen in de ontwerpruimte”, zegt Li. “Ongeveer een week later sloten we onze eerste grote deal met een grenslaboratorium, en de rest is een beetje geschiedenis.”
Maandag kondigde het bedrijf achter Design Arena – genaamd Intelligence – een startronde van $ 7,9 miljoen aan onder leiding van Index Ventures met deelname van Conviction (Sarah Guo en Mike Vernal), A*, Valkyrie en anderen.
Voor niet-zakelijke gebruikers lijkt het gebruik van Design Arena veel op het gebruik van een geavanceerde modelrouter. Er is een venster in ChatGPT-stijl voor aanwijzingen, met aparte vervolgkeuzelijsten voor websites, afbeeldingen en een tiental andere visuele formaten. Nadat u het verzoek, het formaat en de stijl hebt ingevoerd, krijgt u een reeks ‘A versus B’-keuzes te zien totdat u het handjevol resultaten van beste naar slechtste heeft gerangschikt.
Het is een nuttige service, maar de echte waarde van het platform komt van de zakelijke kant, waar deelnemende modellen het kunnen gebruiken als een bron van eindeloze directe feedback voor hun mediagenererende modellen. De gebruikers zijn doorgaans onverschillig ten aanzien van de modellen die ze rangschikken (zoals Li zegt: ze willen gewoon de beste resultaten die ze kunnen krijgen), zodat hun ranglijsten kritische input kunnen geven aan wat gebruikers echt willen.
Voor grenslaboratoria is dat een dienst die de moeite waard is om voor te betalen, zegt Li. Bovendien genereert de site momenteel 60 miljoen dollar aan ARR, waarmee zijn positie als belangrijke bron van door mensen geleide evaluatiegegevens voor de AI-industrie wordt verstevigd.
Cruciaal is dat gebruikers moeten inloggen om hun resultaten te ontvangen, zodat Intelligence ook kan volgen hoe die smaken op verschillende continenten en in de loop van de tijd veranderen. (Li merkt op dat webdashboards in Azië over het algemeen een meer maximalistische ontwerpstijl hebben.) Deze maatregelen zijn een belangrijke aanvulling op geautomatiseerde benchmarks, die op grotere schaal kunnen werken, maar vaak onderworpen zijn aan gamen of anderszins gemanipuleerd zijn, zoals de Hugging Face-inbreuk vorige week op dramatische wijze aantoonde.
Dat wil niet zeggen dat crowdsourced menselijke feedback een automatisch winnende markt zal zijn. Minder dan een jaar na de lancering sloot Yupp eerder dit jaar zijn deuren nadat hij $33 miljoen had opgehaald bij Chris Dixon van a16z crypto. Ook het bedrijf heeft een aantal grensmodellen als klanten gegrepen en had naar eigen zeggen meer dan 1,3 miljoen gebruikers, maar kon nog steeds geen duurzaam langetermijnbedrijf opbouwen.
Toch lijken andere startups, gebaseerd op menselijke evaluatie, florerend te zijn. LM Arena, dat een vergelijkbare aanpak hanteert voor op tekst gebaseerde reacties, haalde in januari $150 miljoen op in een Series A, slechts vier maanden na de formele lancering van zijn betaalde product.
Er was geen vervanging voor menselijk oordeel, besloten ze, en al snel waren ze aan het brainstormen over manieren om op grote schaal eerlijke menselijke feedback te krijgen. Het resultaat werd Design Arena, een AI-tool die nu door 5,3 miljoen mensen over de hele wereld wordt gebruikt. Het bleek dat er veel AI-bedrijven waren die op zoek waren naar schaalbare gebruikersfeedback – en velen van hen waren bereid ervoor te betalen.
“Het was voor veel van deze modellen het ontbrekende knelpunt om verbeteringen aan te brengen in de ontwerpruimte”, zegt Li. “Ongeveer een week later sloten we onze eerste grote deal met een grenslaboratorium, en de rest is een beetje geschiedenis.”
Maandag kondigde het bedrijf achter Design Arena – genaamd Intelligence – een startronde van $ 7,9 miljoen aan onder leiding van Index Ventures met deelname van Conviction (Sarah Guo en Mike Vernal), A*, Valkyrie en anderen.
Voor niet-zakelijke gebruikers lijkt het gebruik van Design Arena veel op het gebruik van een geavanceerde modelrouter. Er is een venster in ChatGPT-stijl voor aanwijzingen, met aparte vervolgkeuzelijsten voor websites, afbeeldingen en een tiental andere visuele formaten. Nadat u het verzoek, het formaat en de stijl hebt ingevoerd, krijgt u een reeks ‘A versus B’-keuzes te zien totdat u het handjevol resultaten van beste naar slechtste heeft gerangschikt.
Het is een nuttige service, maar de echte waarde van het platform komt van de zakelijke kant, waar deelnemende modellen het kunnen gebruiken als een bron van eindeloze directe feedback voor hun mediagenererende modellen. De gebruikers zijn doorgaans onverschillig ten aanzien van de modellen die ze rangschikken (zoals Li zegt: ze willen gewoon de beste resultaten die ze kunnen krijgen), zodat hun ranglijsten kritische input kunnen geven aan wat gebruikers echt willen.
Voor grenslaboratoria is dat een dienst die de moeite waard is om voor te betalen, zegt Li. Bovendien genereert de site momenteel 60 miljoen dollar aan ARR, waarmee zijn positie als belangrijke bron van door mensen geleide evaluatiegegevens voor de AI-industrie wordt verstevigd.
Cruciaal is dat gebruikers moeten inloggen om hun resultaten te ontvangen, zodat Intelligence ook kan volgen hoe die smaken op verschillende continenten en in de loop van de tijd veranderen. (Li merkt op dat webdashboards in Azië over het algemeen een meer maximalistische ontwerpstijl hebben.) Deze maatregelen zijn een belangrijke aanvulling op geautomatiseerde benchmarks, die op grotere schaal kunnen werken, maar vaak onderworpen zijn aan gamen of anderszins gemanipuleerd zijn, zoals de Hugging Face-inbreuk vorige week op dramatische wijze aantoonde.
Dat wil niet zeggen dat crowdsourced menselijke feedback een automatisch winnende markt zal zijn. Minder dan een jaar na de lancering sloot Yupp eerder dit jaar zijn deuren nadat hij $33 miljoen had opgehaald bij Chris Dixon van a16z crypto. Ook het bedrijf heeft een aantal grensmodellen als klanten gegrepen en had naar eigen zeggen meer dan 1,3 miljoen gebruikers, maar kon nog steeds geen duurzaam langetermijnbedrijf opbouwen.
Toch lijken andere startups, gebaseerd op menselijke evaluatie, florerend te zijn. LM Arena, dat een vergelijkbare aanpak hanteert voor op tekst gebaseerde reacties, haalde in januari $150 miljoen op in een Series A, slechts vier maanden na de formele lancering van zijn betaalde product.