04Évaluation de l’intelligence socialePlateforme d’évaluation publique
SociaBench
Mesurer l’intelligence sociale
Une plateforme d’évaluation avec des protocoles, des méthodes de notation et des rapports de reproductibilité publics. Examinez les performances et les données qui les étayent.
A STUDY OF SOCIAL INTELLIGENCESTUDY / 01
Mémoire et mondeCohérence de la mémoire Cohérence interne Cohérence du monde Logique physique
Connaissances et faitsExactitude factuelle Limites des connaissances Mise en valeur des connaissances Hallucinations factuelles
Persona et comportementCohérence des attributs Cohérence du comportement Discours fidèle au personnage Stabilité morale Robustesse morale
Émotions et relationsAutorégulation émotionnelle Réponse empathique Compétences de communication Limites de l’intimité
Récit et expressionProgression du récit Cohérence thématique Fluidité Variété d’expression Logique du contenu
Humanité et interactionCaractère humain Attrait Préférence des utilisateurs Parler à la place de l’utilisateur Ignorer l’utilisateur
Nous nous attachons à l’alignement des objectifs, à la contrôlabilité et aux risques liés aux capacités de pointe, et faisons progresser la recherche sur l’évaluation de la sécurité et les protections.
02 / TRANSPARENCE
Transparence et responsabilité
Nous instaurons la confiance par des évaluations publiques et des preuves reproductibles, afin que les capacités et les risques des modèles puissent être examinés.
03 / BÉNÉFICE PARTAGÉ
Au service du bien commun
Nous prêtons attention aux besoins réels de publics variés et explorons comment l’IA peut profiter au plus grand nombre dans l’éducation, l’accessibilité et l’action d’intérêt général.