Van onderzoek naar praktijk
Een natuurlijk interactief systeem moet begrijpen wat de gebruiker zegt en waarom, beslissen hoe het reageert en die reactie omzetten in samenhangend geluid en beeld. Een toepassing moet daarnaast rekening houden met wachten, onderbrekingen, feedback, apparaten en beschikbare middelen.
Onze projecten verbinden modelonderzoek, praktische toepassingen en evaluatie. Elk project heeft een eigen rol en ontwikkelfase. Samen helpen ze nieuwe mogelijkheden te onderzoeken, ervaringen te testen en resultaten te verbeteren.
| Project | Hoofdrol | Vragen waar het om draait |
|---|---|---|
| OmniSoul | Model voor sociale intelligentie | Context, persoonlijkheid, emotie en interactie over meerdere beurten |
| OmniFlow | Model voor interactieve realtime personages | Doorlopende input, vertolking door personages en consistentie op lange termijn |
| OmniX-1 | Onderzoek naar videogeneratie | Visuele expressie, crossmodale besturing en iteratieve optimalisatie |
| SociaBench | Evaluatie van sociale intelligentie | Beoordelingsmethoden, prestaties per dimensie en bewijs voor reproductie |
| Amicura | App voor AI-companions en realtime interactie | Gesprek, stem, beeld en gebruikerservaring |
OmniSoul: sociale intelligentie
OmniSoul richt zich op sociale intelligentie. Het onderzoekt hoe een systeem de mensen, relaties en intenties in een context begrijpt, hoe het persoonlijkheid en expressie consistent houdt in gesprekken met meerdere beurten, en hoe het passend op emoties reageert.
We onderzoeken nuances in taal en de stabiliteit van gedrag in langere gesprekken. Daarvoor gebruiken we uiteenlopende situaties en analyseren we ook waar het model tekortschiet.
OmniFlow: realtime personages
OmniFlow omvat twee lijnen: realtime video-interactie en hoogwaardige personagegeneratie. Realtime interactie draait om doorlopende input, reacties met lage latentie en bewegingsbesturing tijdens het genereren; personagegeneratie draait om door stem aangestuurde vertolking, lipsynchronisatie, behoud van identiteit en lange, doorlopende beelden.
Deze richting raakt tegelijk aan latentie, temporele consistentie, besturing via instructies en systeemplanning. We willen dat dit onderzoek echte interactie dient en het beeld doorlopend houdt wanneer de gebruiker wil dat het personage iets anders doet, in plaats van telkens opnieuw te moeten beginnen.
OmniX-1: videogeneratie
OmniX-1 richt zich op videogeneratie en iteratieve optimalisatie. Het onderzoekt hoe de identiteit van het onderwerp, het verloop van beweging en de structuur van een scène worden uitgedrukt, en hoe besturing werkt tussen tekst, beeld, video en geluid.
Recursieve zelfverbetering is een onderzoeksonderwerp dat zorgvuldig moet worden gevalideerd. Bij elk proces met automatische evaluatie, het opnieuw genereren van data of zelfoptimalisatie van een model moet je letten op het versterken van fouten, vertekening in de evaluatie en externe controle. Concrete resultaten moeten berusten op formele technische documentatie.
SociaBench: modelevaluatie
SociaBench organiseert de evaluatie van sociale intelligentie van AI rond dimensies als rollenspel, consistentie van persoonlijkheid, emotioneel begrip en sociaal redeneren. Het biedt onderzoekers en toepassingsteams een ingang om te begrijpen waarin modellen verschillen.
Bekijk scores samen met modelversies, testdata, prompts en instellingen van het beoordelingsmodel. De methodologie en reproductieverslagen laten zien wat een ranglijst wel en niet meet.
Amicura: interactie in de praktijk
Amicura verkent productervaringen rond AI-companions en realtime interactie en brengt tekst, stem en visuele expressie samen. Doorlopende gesprekken, onderbrekingen door de gebruiker, verschillende talen en proactieve communicatie geven het onderzoek concretere ervaringsproblemen.
Inzichten uit toepassingsprojecten kunnen helpen modellen, data en systeemontwerp bij te stellen, maar één ervaring vervangt geen systematische evaluatie. Toegangsvoorwaarden, beschikbare functies en de bijbehorende gebruiksregels staan op de eigen pagina’s en in de eigen documenten van Amicura.
Beschikbaarheid
Onderzoeksrichtingen beschrijven de vragen waaraan we werken. Experimentele versies tonen mogelijkheden in ontwikkeling en bèta’s verzamelen praktijkervaring. Productiediensten hebben een afgebakend aanbod en eigen gebruiksvoorwaarden.
De merkbeelden en conceptbeelden op deze website helpen onze richting te begrijpen. Of je een API kunt aanroepen, een model kunt downloaden, een bepaalde functie kunt gebruiken of iets commercieel kunt inzetten, hangt af van de betreffende releasepagina, licentie of een overeenkomst tussen beide partijen.
Begrip, generatie en evaluatie, samen op weg naar natuurlijkere intelligente ervaringen.
Over ons