Subjective beliefs formation and elicitation rules : experimental evidence

Guillaume Hollard (1, 2) , Sébastien Massoni (1) , Jean-Christophe Vergnaud (1)

1 CES - Centre d'économie de la Sorbonne
2 PSE - Paris School of Economics

Since they have been increasingly used in economics, elicitation rules for subjective beliefs are under scrutiny. In this paper, we propose an experimental design to compare the performance of such rules. Contrary to previous works in which elicited beliefs are compared to an objective benchmark, we consider a pure subjective belief framework (confidence in own performance in a cognitive task and a perceptual task). The performances of elicitation rules are assessed according to the accuracy of stated beliefs in predicting success. For the perceptual task we also compare stated beliefs to Signal Detection Theory predictions. We find consistent evidence in favor of the Lottery Rule which provides more accurate beliefs and is not sensitive to risk aversion. Furthermore the Free Rule, a simple rule with no incentives, elicits relevant beliefs and even outperforms the Quadratic Scoring Rule. Beside this comparison, we propose a belief formation model where we distinguish between two stages in the beliefs : beliefs for decision making and confidence beliefs. Our results give support to this model.

Depuis que leur utilisation s'est répandue en économie, les règles d'élicitation font l'objet d'une attention particulière. Dans ce papier, nous proposons une procédure expérimentale pour comparer les performances de telles règles. Contrairement aux travaux précédents dans lesquels les croyances élicitées sont comparées à des probabilités objectives, nous considérons ici un cadre de croyances purement subjectives (la confiance en sa propre performance dans une tache cognitive et une tache perceptive). Les performances des règles sont jugées en fonction de la capacité des croyances élicitées à prédire la réussite. Pour la tache perceptive, nous comparons aussi les croyances élicitées aux prédictions issues de la détection de signal. Nos résultats sont en faveur de la Lottery Rule qui élicite des croyances plus justes et qui n'est pas dépendante de l'aversion au risque. De plus, la Free Rule, une simple élicitation sans incitation, élicite des croyances pertinentes et offre même de meilleurs résultats que la Quadratic Scoring Rule. Au-delá de cette comparaison, nous proposons un modèle de formation des croyances au sein duquel on distingue deux niveaux de croyances : celle utilisées pour la décision et celles liées à la confiance. Nos résultats supportent ce modèle.

Mots clés: Belief elicitation; confidence; Signal Detection Theory; methodology; incentives; experimental economics.

Mots clés: économie expérimentale.; Elicitation de croyances; confiance; théorie de la détection de signal; méthodologie; incitations

Domaines: Economies et finances

Guillaume Hollard, Sébastien Massoni, Jean-Christophe Vergnaud. Subjective beliefs formation and elicitation rules : experimental evidence. 2010. ⟨halshs-00543828⟩