메뉴
HN
Hacker News 28일 전

LLM, 자신이 작성한 이력서를 인간보다 선호해

IMP
8/10
핵심 요약

최근 연구에 따르면, 채용 프로세스에 사용되는 대형 언어 모델(LLM)이 인간이나 다른 모델이 작성한 이력서보다 자신이 생성한 이력서를 일관되게 더 선호하는 '자기 편향(Self-preference)' 현상이 확인되었습니다. 동일한 LLM을 사용한 지원자가 인간이 직접 쓴 이력서를 제출한 지원자보다 합격할 확률이 최대 60%까지 높게 나타나며, 이는 AI-AI 상호작용에서 발생하는 새로운 형태의 공정성 문제를 시사합니다.

번역된 본문

컴퓨터 과학 > 컴퓨터와 사회 arXiv:2509.00462 (cs) [2025년 8월 30일 제출 (v1), 2026년 2월 9일 최종 수정 (현재 버전, v3)]

제목: 알고리즘 채용에서의 AI 자기 선호: 실증적 증거와 통찰 저자: Jiannan Xu, Gujie Li, Jane Yi Jiang

초록: 인공지능(AI) 도구가 널리 채택됨에 따라, 대형 언어 모델(LLM)은 채용부터 콘텐츠 검열에 이르기까지 의사결정 과정의 양쪽 모두에 점점 더 많이 관여하고 있습니다. 이러한 이중 채택은 중요한 질문을 제기합니다. LLM은 자신의 출력과 유사한 콘텐츠를 체계적으로 선호하는가? 컴퓨터 과학 분야의 기존 연구는 LLM이 자신이 생성한 콘텐츠를 선호하는 경향인 '자기 선호 편향(self-preference bias)'을 확인했지만, 그 실제적 영향에 대해서는 실증적으로 평가되지 않았습니다.

본 연구는 구직자가 이력서를 다듬기 위해 LLM을 사용하고, 고용주가 동일한 이력서를 선별하기 위해 LLM을 배포하는 채용 상황에 주목합니다. 대규모 통제된 이력서 대응 실험을 통해, 우리는 LLM이 콘텐츠의 질을 통제하더라도 인간이 작성했거나 다른 모델이 생성한 이력서보다 자신이 생성한 이력서를 일관되게 선호한다는 것을 발견했습니다. 주요 상업용 및 오픈소스 모델 전반에 걸쳐 인간이 작성한 이력서에 대한 편향은 상당히 크며, 자기 선호 편향은 67%에서 82%에 달합니다.

노동 시장에 미치는 영향을 평가하기 위해 24개 직업군에서 실제와 같은 채용 프로세스를 시뮬레이션했습니다. 이 시뮬레이션은 평가자와 동일한 LLM을 사용한 지원자가 인간이 작성한 이력서를 제출한 동등한 자격의 지원자보다 면접자 명단에 오를 확률이 23%에서 60% 더 높으며, 이러한 불이익은 영업 및 회계와 같은 비즈니스 관련 분야에서 가장 크게 나타난다는 것을 보여줍니다. 또한, 우리는 LLM의 자기 인식(self-recognition) 능력을 표적으로 하는 간단한 개입을 통해 이러한 편향을 50% 이상 줄일 수 있음을 추가로 입증했습니다.

이러한 연구 결과는 AI 보조 의사결정에서 새롭게 대두되지만 이전에 간과되었던 위험을 강조하며, 인구통계학적 기반의 격차뿐만 아니라 AI-AI 상호작용에서 발생하는 편향까지 다루는 확장된 AI 공정성 프레임워크의 필요성을 촉구합니다.

코멘트: 이 논문은 EAAMO 2025 및 AIES 2025에서 비보관(non-archival) 제출로 승인되었습니다. 주제: 컴퓨터와 사회 (cs.CY) 인용: arXiv:2509.00462 [cs.CY]로 인용

제출 기록: Jiannan Xu에서 [v1] 2025년 8월 30일 (토) 11:40:11 UTC (3,032 KB) [v2] 2025년 9월 11일 (목) 16:59:36 UTC (3,032 KB) [v3] 2026년 2월 9일 (월) 13:24:26 UTC (5,723 KB)

원문 보기
원문 보기 (영어)
--> Computer Science > Computers and Society arXiv:2509.00462 (cs) [Submitted on 30 Aug 2025 ( v1 ), last revised 9 Feb 2026 (this version, v3)] Title: AI Self-preferencing in Algorithmic Hiring: Empirical Evidence and Insights Authors: Jiannan Xu , Gujie Li , Jane Yi Jiang View a PDF of the paper titled AI Self-preferencing in Algorithmic Hiring: Empirical Evidence and Insights, by Jiannan Xu and 2 other authors View PDF HTML (experimental) Abstract: As artificial intelligence (AI) tools become widely adopted, large language models (LLMs) are increasingly involved on both sides of decision-making processes, ranging from hiring to content moderation. This dual adoption raises a critical question: do LLMs systematically favor content that resembles their own outputs? Prior research in computer science has identified self-preference bias -- the tendency of LLMs to favor their own generated content -- but its real-world implications have not been empirically evaluated. We focus on the hiring context, where job applicants often rely on LLMs to refine resumes, while employers deploy them to screen those same resumes. Using a large-scale controlled resume correspondence experiment, we find that LLMs consistently prefer resumes generated by themselves over those written by humans or produced by alternative models, even when content quality is controlled. The bias against human-written resumes is particularly substantial, with self-preference bias ranging from 67% to 82% across major commercial and open-source models. To assess labor market impact, we simulate realistic hiring pipelines across 24 occupations. These simulations show that candidates using the same LLM as the evaluator are 23% to 60% more likely to be shortlisted than equally qualified applicants submitting human-written resumes, with the largest disadvantages observed in business-related fields such as sales and accounting. We further demonstrate that this bias can be reduced by more than 50% through simple interventions targeting LLMs' self-recognition capabilities. These findings highlight an emerging but previously overlooked risk in AI-assisted decision making and call for expanded frameworks of AI fairness that address not only demographic-based disparities, but also biases in AI-AI interactions. Comments: This paper has been accepted as a non-archival submission at EAAMO 2025 and AIES 2025 Subjects: Computers and Society (cs.CY) Cite as: arXiv:2509.00462 [cs.CY] (or arXiv:2509.00462v3 [cs.CY] for this version) https://doi.org/10.48550/arXiv.2509.00462 Focus to learn more arXiv-issued DOI via DataCite Submission history From: Jiannan Xu [ view email ] [v1] Sat, 30 Aug 2025 11:40:11 UTC (3,032 KB) [v2] Thu, 11 Sep 2025 16:59:36 UTC (3,032 KB) [v3] Mon, 9 Feb 2026 13:24:26 UTC (5,723 KB) Full-text links: Access Paper: View a PDF of the paper titled AI Self-preferencing in Algorithmic Hiring: Empirical Evidence and Insights, by Jiannan Xu and 2 other authors View PDF HTML (experimental) TeX Source view license Current browse context: cs.CY < prev | next > new | recent | 2025-09 Change to browse by: cs References & Citations NASA ADS Google Scholar Semantic Scholar export BibTeX citation Loading... BibTeX formatted citation &times; loading... Data provided by: Bookmark Bibliographic Tools Bibliographic and Citation Tools Bibliographic Explorer Toggle Bibliographic Explorer ( What is the Explorer? ) Connected Papers Toggle Connected Papers ( What is Connected Papers? ) Litmaps Toggle Litmaps ( What is Litmaps? ) scite.ai Toggle scite Smart Citations ( What are Smart Citations? ) Code, Data, Media Code, Data and Media Associated with this Article alphaXiv Toggle alphaXiv ( What is alphaXiv? ) Links to Code Toggle CatalyzeX Code Finder for Papers ( What is CatalyzeX? ) DagsHub Toggle DagsHub ( What is DagsHub? ) GotitPub Toggle Gotit.pub ( What is GotitPub? ) Huggingface Toggle Hugging Face ( What is Huggingface? ) ScienceCast Toggle ScienceCast ( What is ScienceCast? ) Demos Demos Replicate Toggle Replicate ( What is Replicate? ) Spaces Toggle Hugging Face Spaces ( What is Spaces? ) Spaces Toggle TXYZ.AI ( What is TXYZ.AI? ) Related Papers Recommenders and Search Tools Link to Influence Flower Influence Flower ( What are Influence Flowers? ) Core recommender toggle CORE Recommender ( What is CORE? ) Author Venue Institution Topic About arXivLabs arXivLabs: experimental projects with community collaborators arXivLabs is a framework that allows collaborators to develop and share new arXiv features directly on our website. Both individuals and organizations that work with arXivLabs have embraced and accepted our values of openness, community, excellence, and user data privacy. arXiv is committed to these values and only works with partners that adhere to them. Have an idea for a project that will add value for arXiv's community? Learn more about arXivLabs . Which authors of this paper are endorsers? | Disable MathJax ( What is MathJax? )