Évaluation équitable des candidats grâce au vote par procuration
Un modèle pour une évaluation équitable des candidats en tenant compte des évaluations incomplètes et des préférences des votants.
― 9 min lire
Table des matières
- Systèmes de vote et d'évaluation
- Méthodes d'agrégation
- Gérer les égalités
- Mécanismes de proxy fantôme
- Le rôle des votes blancs et des abstentions
- Participation et droits des votants
- Anonymat et équité
- Cohérence des résultats
- Classer les candidats
- Directions futures
- Conclusion
- Source originale
- Liens de référence
Dans de nombreuses situations, on doit évaluer un grand nombre de candidats, comme des hôtels, des restos ou des articles. Quand il y a trop de candidats, c’est difficile pour chacun de donner une note à tous. Du coup, les gens évaluent souvent juste ceux qu'ils connaissent. Ça veut dire que certains candidats peuvent ne pas recevoir de notes de certains votants.
Dans cet article, on va voir comment combiner ces notes pour donner un score global équitable à chaque candidat, en tenant compte du fait que tout le monde ne note pas les mêmes candidats. On va aussi discuter de comment gérer les cas où il y a des égalités entre les candidats et comment s'assurer que les votants peuvent s'exprimer de différentes manières.
Systèmes de vote et d'évaluation
Quand on évalue des candidats, on peut le faire sur une échelle. Par exemple, on peut utiliser un système de notation simple, ou les classer en groupes comme Excellent, Bon ou Mauvais. C’est important parce que tous les candidats ne recevront pas une note de tous les votants. Certains votants peuvent ne pas se sentir à l’aise de noter des candidats en dehors de leur expertise ou peuvent vouloir s’abstenir complètement.
Quand il y a beaucoup de candidats, c'est pas réaliste de s'attendre à ce que chaque votant en évalue tous. Donc, on met en place un système où un votant peut choisir de donner une note, soumettre un vote blanc, ou s’abstenir de voter.
Méthodes d'agrégation
On va explorer des méthodes qui permettent aux votants de noter les candidats qu'ils connaissent tout en prenant en compte ceux qui choisissent de ne pas voter. Il est essentiel de créer un mécanisme de notation qui respecte les avis de tous les votants tout en reflétant le consensus global sur chaque candidat.
Préférences à pic unique
On suppose que les votants ont des préférences à pic unique. Ça veut dire que chaque votant a un candidat préféré et leur préférence diminue à mesure qu'ils s'éloignent de ce candidat. Ce concept nous permet de regrouper les votants en fonction de similarités dans leurs notes et de créer des mécanismes qui peuvent agréger ces notes de manière équitable.
Mécanismes à l’épreuve des stratégies
Un mécanisme de notation est considéré comme à l’épreuve des stratégies si un votant ne peut pas tirer d'avantage en déformant ses préférences. En gros, les votants ne devraient pas bénéficier de mentir sur leurs notes. Un bon système de vote s’assurera que l’honnêteté est la meilleure politique pour tous les votants.
Gérer les égalités
Dans les situations où les candidats ont le même score global, il nous faut une méthode pour départager. Une façon de le faire est via des règles de départage, qui peuvent impliquer de regarder des critères secondaires ou d'utiliser des méthodes comme le jugement majoritaire, qui privilégie les notes les plus favorables reçues.
Mécanismes de proxy fantôme
On introduit des mécanismes de proxy fantôme pour traiter les scénarios où tous les votants ne peuvent pas noter chaque candidat. Dans ces mécanismes, si un votant ne note pas un candidat ou choisit un vote blanc, on attribue un vote proxy basé sur les informations disponibles sur ses préférences. Ça aide à s'assurer que tous les candidats reçoivent une représentation équitable, même quand tous les votants ne sont pas prêts ou capables de fournir une note.
Mise en œuvre des mécanismes de proxy fantôme
Pour mettre en œuvre ces mécanismes, on peut suivre les étapes suivantes :
Créer un pool de votes : Chaque candidat a un pool de notes associées, y compris des notes réelles et des votes proxy créés pour les votants absents.
Sélectionner une note : La note finale pour un candidat peut être déterminée en choisissant une note représentative du pool de votes. Cela peut se faire par divers moyens, comme en faisant la moyenne des notes ou en utilisant la médiane.
Départager : Si les candidats ont le même score, on applique des règles de départage pour s'assurer qu'un candidat est favorisé par rapport à l'autre selon des critères prédéfinis.
Le rôle des votes blancs et des abstentions
Les votants peuvent choisir de soumettre des votes blancs pour plusieurs raisons. Par exemple, ils peuvent ne pas avoir assez d'infos sur certains candidats ou vouloir que leur manque de soutien soit noté sans approuver une note spécifique. On traite les votes blancs différemment des abstentions ; un vote blanc signifie un choix délibéré de ne pas participer, tandis que s'abstenir reflète l'incertitude ou un manque d'opinion.
Comptabilisation des votes blancs
Dans notre système, on prend en compte les votes blancs en les retirant du processus d’agrégation des notes. Ça veut dire que quand on calcule le score global d’un candidat, on ne considère que les votes qui reflètent des opinions réelles, qu'elles soient positives ou négatives.
Consentement silencieux
Dans certains cas, on peut supposer que les votants absents qui ne donnent pas de note soutiennent quand même le résultat tel que déterminé par les votants actifs. Cette idée est connue sous le nom de consentement silencieux.
Participation et droits des votants
Pour encourager une large participation au processus de notation, on doit s'assurer que les votants sentent que leur avis compte. On évite les situations où un votant peut bénéficier de son abstention. Au lieu de ça, on veut créer des conditions où tout votant ayant une opinion sur un candidat soit motivé à l'exprimer.
Assurer la participation
Pour garantir la participation, notre système permet aux votants de soumettre facilement leurs notes sans se sentir obligés d’évaluer des candidats sur lesquels ils ne sont pas sûrs. Une approche flexible facilite l'engagement des votants tout en fournissant une représentation équitable pour tous les candidats.
Anonymat et équité
Dans un système de vote idéal, l'identité des votants ne devrait pas influencer le résultat. Ça veut dire que le système doit traiter toutes les notes de la même manière, peu importe qui les a soumises. Cependant, on reconnaît que les votants peuvent avoir différents droits à noter certains candidats, et on doit équilibrer l'équité avec les réalités de l'éligibilité des votants.
Neutralité
La neutralité est un autre aspect crucial de notre système de vote. Elle exige que le mécanisme traite tous les candidats de manière égale, sans biais. Par exemple, si deux candidats sont notés par le même groupe de votants, échanger leurs notes ne devrait pas changer le résultat final.
Cohérence des résultats
On souhaite que notre système de vote soit cohérent. Si des conditions de vote similaires apparaissent, on s'attend à des résultats similaires. Cette cohérence aide à renforcer la confiance dans le mécanisme, rendant les votants confiants que leur participation mènera à des résultats fiables.
Cohérence extérieure et intérieure
On peut différencier entre la cohérence extérieure, où différents groupes de votants sont fusionnés sans changer le résultat, et la cohérence intérieure, où deux profils de vote incomplets s'accordent sur les notes des candidats.
Classer les candidats
Une fois qu'on a mis en place un système de notation équitable, on doit réfléchir à comment classer les candidats en fonction de leurs notes. Beaucoup de candidats peuvent finir par recevoir la même note, rendant nécessaire une approche solide de départage.
Départage itératif
Une règle de départage itératif permet une série de comparaisons pour déterminer quel candidat devrait être préféré en cas d'égalité. Ce procédé continue jusqu'à ce qu’une distinction claire soit faite ou que tous les candidats soient jugés égaux.
Ordre total des candidats
L'objectif ultime de notre système de classement est de créer un ordre total des candidats. Ça veut dire qu'en se basant sur les notes et les règles de départage, chaque candidat peut être classé de manière à refléter ses mérites relatifs.
Directions futures
Bien qu'on ait posé un modèle robuste pour l'évaluation des candidats, il y a encore beaucoup de domaines à explorer. Comment devrait-on déterminer de manière optimale les droits de vote ? Comment peut-on adapter nos mécanismes à des environnements dynamiques avec des pools de candidats en constante évolution ?
Prise en compte du poids des votants
Une autre voie intéressante serait d'explorer comment différents poids peuvent être attribués aux votants selon leur expertise ou la pertinence de leurs notes. Ajuster le poids des votants pourrait mener à des résultats plus représentatifs et mieux informés.
Mises à jour dynamiques des proxy
Dans un environnement de plus en plus numérique, on peut aussi penser à utiliser des algorithmes d'apprentissage automatique pour mettre à jour les votes proxy dynamiquement à mesure qu'on recueille plus d'infos sur les préférences et comportements des votants. Cette approche pourrait rendre nos systèmes de notation encore plus précis avec le temps.
Conclusion
Dans cet article, on a conçu un modèle flexible et équitable pour évaluer les candidats. En introduisant des mécanismes de proxy fantôme, on peut s'assurer que chaque candidat reçoit une représentation équitable basée sur les notes disponibles, même quand certains votants choisissent de ne pas participer pleinement.
En avançant, il y a encore beaucoup de questions et de défis à relever. On vise à créer des systèmes qui non seulement encouragent la participation, mais qui produisent aussi des résultats fiables et représentatifs qui reflètent les opinions collectives des votants.
Titre: Grading and Ranking Large number of candidates
Résumé: It is common that a jury must grade a set of candidates in a cardinal scale such as {1,2,3,4,5} or an ordinal scale such as {Great, Good, Average, Bad }. When the number of candidates is very large such as hotels (BOOKING), restaurants (GOOGLE), apartments (AIRBNB), drivers (UBER), or papers (EC), it is unreasonable to assume that each jury member will provide a separate grade for each candidate. Each jury member is more likely to abstain for some candidates, cast a blank vote, or be associated at random, or as a function of its expertise, with only a small subset of the candidates and is asked to grade each of those. Extending the classical theory, we study aggregation methods in which a voter will not be eligible to grade all the candidates, and the candidates are not eligible for the same sets of voters. Moreover, each candidate on which they are eligible, the voter will have the choice between: a blank vote, grade the candidate, or abstain. Assuming single-peaked preferences over the grades, we axiomatically characterise a broad class of strategy-proof grading mechanisms satisfying axioms such as unanimity, anonymity, neutrality, participation or consistency. Finally, when a strict ranking is necessary (to distinguish let say between two borderline papers in a conference), some tie-breaking rules, extending the leximin and majority judgment, are defined and are shown to be equivalent to some strategy-proof grading functions on a richer space of outcome. Our paper will propose new rules, called phantom-proxy mechanisms, to aggregate the votes in the examples above or others, which differ from the usual average mark, that are easily manipulable. Moreover, the phantom-proxy are able to reduce the injustices caused by some candidates juries too generous or severe.
Auteurs: Rida Laraki, Estelle Varloot
Dernière mise à jour: 2023-02-23 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2302.12207
Source PDF: https://arxiv.org/pdf/2302.12207
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.