Reproduction de l’évaluation littéraire CoSER. Les scores varient fortement selon le modèle évaluateur, la longueur du dialogue et l’exécution. Le classement a été retiré. Ce rapport présente les résultats, les écarts de reproduction et les limites.
Évaluation de 77 personnages de fiction chinoise selon 12 critères avec CharacterRM. Le rapport retrace l’implémentation à partir du code et des données des auteurs, décrit les vérifications de déploiement et examine les écarts numériques.
Reproduction du protocole MiniMax et analyse de la cohérence du modèle évaluateur et de la stabilité des classements. Le rapport documente les paramètres vérifiés, les choix d’implémentation, les versions et la portée des tests.
Présentation du protocole CharacterBench, des prompts du tableau 11 à la construction du contexte et à la notation par CharacterJudge. Chaque paramètre est relié à l’article ou au code officiel.
AXES DE RECHERCHE
Nos axes de recherche
Nous étudions les architectures, les données et les systèmes à partir de tâches concrètes.
Intelligence sociale
Nous étudions comment l’identité, les émotions, les croyances et les relations façonnent les échanges. Nos travaux relient l’état social et le contexte des événements à la cohérence des personnages dans les conversations longues.
Nous étudions le contrôle des mouvements, la continuité visuelle et la synchronisation du son dans les échanges en direct, en mesurant la cohérence des personnages, les transitions et la latence.
Nous explorons la génération à partir du texte, de l’image, de la vidéo et du son, notamment la génération causale par blocs et le cinéma 4K professionnel.
Nous mesurons ensemble la qualité, la latence et le coût de calcul. Nos travaux portent sur la distillation, la mise en cache et l’ordonnancement pour la génération en temps réel.
Nous étudions comment les données conversationnelles et audiovisuelles contribuent à l’entraînement, avec des évaluations vérifiables pour guider l’auto-amélioration RSI à grande échelle.
Nous documentons les données, les consignes, les modèles évaluateurs et les paramètres statistiques. Les études de reproductibilité précisent les choix techniques, les écarts et les limites des résultats.
Intelligence sociale
Nous étudions comment l’identité, les émotions, les croyances et les relations façonnent les échanges. Nos travaux relient l’état social et le contexte des événements à la cohérence des personnages dans les conversations longues.
Découvrir OmniSoul