À qui de droit : différences démographiques dans les lettres de recommandation

Beverly Hirtle et Anna Kovner

Les lettres de recommandation des conseillers pédagogiques jouent un rôle essentiel sur le marché du travail pour les doctorants. économistes. Au mieux, ils peuvent transmettre des informations qualitatives importantes sur un candidat, y compris le potentiel du candidat à générer des recherches percutantes. Mais dans le pire des cas, ces lettres offrent une vision subjective du candidat qui peut être sujette à des préjugés conscients ou inconscients. Il peut également y avoir un biais de similarité ou d’affinité, une question particulièrement difficile pour la profession d’économiste, où la plupart des professeurs sont des hommes blancs. Dans cet article, nous nous appuyons sur notre récent document de travail pour décrire comment les lettres de recommandation diffèrent selon le sexe, la race ou l'origine ethnique du candidat et comment ces différences sont liées aux résultats en début de carrière.

Méthodologie

Nous analysons le texte de 6 365 lettres de recommandation reçues par un grand institut de recherche basé aux États-Unis pour 2 227 nouveaux doctorants. candidats à un emploi au cours de quatre cycles de recrutement annuels récents (2018 à 2021). Nous associons les lettres de recommandation aux informations fournies par les candidats sur leurs domaines d'intérêt de recherche primaires et secondaires, leur doctorat. l'établissement subventionnaire et des informations confidentielles sur leur sexe, leur race et leur origine ethnique auto-identifiés. Des informations sur le sexe et la race/origine ethnique ont été collectées à des fins statistiques sur une base volontaire auprès de tous les candidats à l'emploi de l'organisation, et pas seulement auprès des économistes. Les informations soumises par les candidats n'ont pas été utilisées dans le processus d'embauche et n'ont pas été fournies aux responsables du recrutement ou à ceux qui examinent ou interviewent les candidats.

Nous identifions les caractéristiques clés de chaque lettre pour mesurer la qualité de la recommandation. Ces mesures incluent le nombre global de mots et le nombre de mots associés aux caractéristiques « remarquables » et « meules ». Les caractéristiques remarquables sont liées à la façon dont les candidats peuvent exceller par rapport aux autres et sont capturées par des mots tels que « innovant », « extraordinaire » et « exceptionnel ». Les caractéristiques de Grindstone sont liées à l'effort et sont capturées par des mots tels que « fiable », « travailleur » et « dévoué ». En nous concentrant sur des mots marquants et incontournables, nous reflétons une grande partie de la littérature antérieure, tant en économie que dans d’autres domaines (voir, par exemple, les études impliquant des candidats à des emplois en biochimie, en chirurgie orthopédique et en chirurgie générale). Bien que les mots remarquables soient sans ambiguïté positifs, les mots de référence peuvent avoir une connotation plus mitigée et sont parfois considérés comme « accablants avec de légers éloges ».

Nous développons également une nouvelle mesure de la qualité des lettres basée sur le langage contenu dans de nombreuses lettres qui fournit la recommandation de l'auteur de la lettre quant au calibre de l'institution d'embauche appropriée pour le candidat – en particulier, si l'auteur de la lettre recommande le candidat à un « top » département. Dans l’ensemble, environ 10 % des lettres de notre échantillon contiennent une telle recommandation, ces recommandations sont donc relativement rares.

Différences démographiques dans la qualité des lettres

Une grande partie des recherches antérieures sur les lettres de recommandation se sont concentrées sur les différences dans les caractéristiques des lettres selon le sexe du candidat (voir ici et ici pour deux exemples antérieurs en économie provenant d'universités européennes). Contrairement à certains de ces travaux antérieurs, nous ne trouvons pas de différences statistiquement significatives dans la longueur des lettres ou dans la proportion de mots remarquables dans les lettres des candidates à un emploi. Nous constatons cependant que les lettres destinées aux candidates féminines contiennent une part plus élevée de mots épineux qui, comme indiqué, ont une interprétation potentiellement ambiguë.

Un résultat nouveau est la relation entre les lettres, la race et l’origine ethnique. Les lettres destinées aux candidats qui s'identifient comme asiatiques sont nettement plus courtes et contiennent moins de mots remarquables et plus de mots épineux – des résultats qui demeurent lorsque nous limitons l'échantillon aux candidats des 10 meilleurs programmes américains d'économie et de finance, une façon de remédier aux biais de sélection potentiels dans le vivier de candidats. Nous constatons également certaines différences dans les lettres écrites pour les candidats qui s'identifient comme hispaniques ou noirs ; les lettres de ces candidats contiennent une part moindre de mots remarquables. Bien que le rôle de la race et de l’origine ethnique dans les lettres de recommandation en économie n’ait pas été étudié à notre connaissance, ces résultats sont cohérents avec ceux d’autres domaines (par exemple, des mots remarquables sont plus susceptibles d’être utilisés pour les résidents blancs en chirurgie).

La macroéconomie et la finance sont des critères difficiles

Nous constatons également des différences significatives dans la longueur et le contenu des lettres selon les sous-disciplines de l’économie. Les lettres écrites pour les candidats qui identifient la « finance » ou la « macroéconomie » comme leur principal domaine d’intérêt sont plus courtes et utilisent moins de mots grossiers. Les lettres destinées aux candidats axées sur la macroéconomie utilisent également moins de mots marquants. Les candidats axés sur la finance sont plus susceptibles d'obtenir leur diplôme d'une école de commerce que les candidats dans d'autres domaines. Les différences pourraient donc refléter le type d'école plutôt que le domaine. en soi. Nous exécutons également des spécifications contenant un contrôle pour les écoles de commerce en tant qu'établissement délivrant un doctorat et les résultats différentiels continuent de s'appliquer à ces spécifications.

Les candidats sous-représentés sont moins susceptibles d'être recommandés dans les principaux départements

Nous constatons des différences significatives selon le sexe, la race et l’origine ethnique quant à savoir si une lettre recommande un candidat à un département d’économie « de premier plan ». Les lettres destinées aux candidats féminins, asiatiques, noirs ou hispaniques sont toutes beaucoup moins susceptibles d'inclure une telle recommandation. Ces différences persistent lorsque nous tenons compte des caractéristiques de l’établissement qui décerne le doctorat, lorsque nous tenons compte des caractéristiques de l’auteur de la lettre (les auteurs de lettres féminins et asiatiques sont moins susceptibles de faire de telles recommandations) et lorsque nous limitons notre échantillon destiné aux candidats diplômés des 10 meilleurs départements d’économie et de finance. Ces différences sont à la fois statistiquement et économiquement importantes. Les lettres destinées aux candidates sont 18 % moins susceptibles de contenir une recommandation « meilleure » ​​que les lettres destinées aux candidats masculins, un résultat qui reste valable même lorsque l'auteur de la lettre est une femme. Les lettres destinées aux candidats noirs ou hispaniques sont 30 % moins susceptibles de contenir cette recommandation que les lettres destinées aux candidats blancs, tandis que les lettres destinées aux candidats asiatiques sont 45 % moins susceptibles de contenir une recommandation « supérieure ».

Résultats en début de carrière

Mais ces différences dans la qualité des lettres sont-elles importantes ? Pour répondre à cette question, nous examinons l’impact des caractéristiques des lettres sur les résultats en début de carrière des candidats à l’emploi de notre échantillon. En particulier, nous examinons les placements initiaux (si l'emploi initial d'un candidat est dans l'un des 20 meilleurs départements d'économie ou de finance) et les publications (le nombre de publications dans des revues de premier plan qu'un candidat a publiées dans les deux ans suivant l'obtention de son doctorat).

En prenant en compte les caractéristiques des candidats, leurs domaines d'intérêt, les caractéristiques des établissements qui décernent des doctorats et celles des auteurs de lettres, nous constatons que des lettres plus fortes sont en effet associées à de meilleurs résultats en début de carrière. Des lettres plus longues et une recommandation « meilleure » ​​sont toutes deux positivement associées à la probabilité d'occuper un emploi initial parmi les 20 meilleurs et au nombre de publications dans des revues de premier plan. Une part plus élevée de mots marquants est associée à un plus grand nombre de publications dans des revues de premier plan, tandis qu'une part plus élevée de mots marquants est associée négativement aux publications en début de carrière. Nous trouvons des preuves que les résultats en début de carrière sont meilleurs pour les candidats des 10 meilleurs programmes d'économie et de finance et que certains résultats sont plus faibles pour les candidats féminins, asiatiques et noirs ou hispaniques, même après avoir contrôlé les caractéristiques des lettres.

Résumé

Pris ensemble, nos résultats suggèrent qu'il existe des différences significatives dans le contenu des lettres de recommandation en corrélation avec le sexe, la race et l'origine ethnique du candidat, ainsi qu'avec le domaine d'intérêt du candidat, et que ces différences sont importantes pour prédire les résultats en début de carrière. . Une question clé ouverte de notre travail est de comprendre les raisons de ces résultats. Est-ce le résultat naturel d’une préférence pour la similarité selon laquelle les candidats sous-représentés ressemblent moins à leurs auteurs de lettres ? Cela représente-t-il des différences dans les types de sujets que différents types de candidats choisissent d'étudier ? Qu’est-ce qui conduit aux différences dans les candidats recommandés aux départements « supérieurs » ? Comprendre les associations dans les données n'est que la première étape dans la réflexion sur la manière de peser les informations qualitatives contenues dans les lettres de recommandation.

Beverly Hirtle est conseillère en recherche financière dans le domaine de la recherche sur les politiques d'intermédiation financière au sein du groupe de recherche et de statistiques de la Banque fédérale de réserve de New York.

Anna Kovner est vice-présidente exécutive et directrice de la recherche à la Federal Reserve Bank de Richmond.

Comment citer cet article :
Beverly Hirtle et Anna Kovner, « À qui de droit : différences démographiques dans les lettres de recommandation », Banque de réserve fédérale de New York Économie de Liberty Street15 novembre 2024, https://libertystreetnomics.newyorkfed.org/2024/11/to-whom-it-may-concern-demographic-differences-in-letters-of-recommendation/.