← Araştırma'ya dön
Research · LLM bias · 2026

Yön doğru, büyüklük abartılı

Dil modellerinin on ruhsal bozukluk için hayal ettiği kişilerde cinsiyeti inceleyen, 54 model ve dört dilden oluşan bir denetim. 118.800 yanıtın tamamı kamuya açık.

Yayımlanma tarihi27 Ekim 2026
YazarlarB. Głowacki, J. Głowacka, E. Cylwik, B. Głowacki
DurumÖn baskı · açık veri kümesi
LisansCC BY 4.0

7:3'lük referans oranı çıktıda 99:1'e dönüşüyor

Dil modelleri artık klinik vaka öyküleri yazıyor, hastaları canlandırıyor ve eğitim vakaları üretiyor. Her hayalî kişinin, yazarın hiç seçmediği bir cinsiyeti var. Modellerin on ruhsal bozukluk için hangisini seçtiğini ve bunun epidemiyolojik verilerden ne kadar saptığını ölçtük.

118.800
54 modelden, 4 dilde yanıt
2,4×
cinsiyet oranlarında medyan abartı (log-olasılık oranı)
%99'a karşı %70
sınırda kişilik bozukluğunda kadınlar: modeller ve referans
54 / 54
referanstan daha kutuplaşmış model sayısı

Modeller, bilinen cinsiyet farklılıklarının yönünü iyi yansıtıyor (referans oranlarıyla medyan sıra korelasyonu 0,79), ancak büyüklüklerini abartıyor. Sınırda kişilik bozukluğu vakalarının %99'u kadın olarak yazılıyor (referans yaklaşık %70); antisosyal kişilik bozukluğu vakalarının %95'i erkek olarak yazılıyor (yaklaşık %75). Nötr bir istemde, psikoterapiye başlayan bir kişi için bile oran %86 kadın; referans ise yaklaşık %65. Model–dil–durum hücrelerinin %54'ünde, 50 üretimin en az %95'inde aynı cinsiyet görülüyor.

Örneklemimizde daha yeni modeller referansa daha yakın değildi. İspanyolca istemler yanıtları kadınlara, Çince istemler ise erkeklere doğru kaydırıyor. Bu, Polonyalı hastalar üzerine önceki çalışmamızın ikinci ve çok daha büyük sürümüdür.

İçindekiler


Nasıl sorduk

Bilinçli olarak basit bir denetim: aynı kısa istek, birçok modele, birçok kez yöneltildi.

Çalışma tasarımı: her durum ve dil için sıfır örnekli tek istem, model başına 50 kez; çok dilli bir ayrıştırıcı cinsiyet alanını okuyor; kadın oranları referans değerlerle karşılaştırılıyor.
Çalışma tasarımı: her durum ve dil için sıfır örnekli tek istem, model başına 50 kez; çok dilli bir ayrıştırıcı cinsiyet alanını okuyor; kadın oranları referans değerlerle karşılaştırılıyor.

Her istem, modelden [bozukluk] olan kurgusal bir kişi oluşturmasını ve tek satırda şu bilgileri vermesini istedi: ad, cinsiyet, yaş (18–55) ve meslek. Sistem istemi yok, klinik bağlam yok. Kontrol istemi ise psikoterapiye başlayan kurgusal bir kişi oluşturmasını istedi.

  • 11 durum: depresyon, yaygın anksiyete, sosyal anksiyete, OKB, TSSB, sınırda, narsisistik ve antisosyal kişilik bozukluğu (PD), DEHB, otizm ve kontrol.
  • 4 dil: İngilizce, Lehçe, İspanyolca ve Çince.
  • 2023–2026'da yayımlanmış 54 model: 34'ü ABD'li, 15'i Çinli ve 5'i Avrupalı geliştiricilerden; bunlar arasında Polonya'dan Bielik ve PLLuM da var. 47 model bir API üzerinden çağrıldı; açık ağırlıklı 7 model kendi donanımımızda yerel olarak çalıştırıldı.
  • Hücre başına 50 üretim, 0,9 sıcaklıkta: 118.800 yanıt. %98,9'u ayrıştırıldı, %1,0'ı ret veya ayrıştırılamayan yanıt, %0,1'i hataydı. Toplam API maliyeti 60 USD.
  • Referans değerleri: DSM-5-TR ve epidemiyolojik incelemelerden alınan, her bozukluğu olan kişiler arasında kadınların yaklaşık payı. Bunlar kesin gerçekler değil, yaklaşık büyüklük mertebesi değerleridir; sonuçlar yalnızca yönlerine ve kabaca büyüklüklerine dayanır.

Yön doğru, büyüklük abartılı

Modeller, hangi bozuklukların kadınlarda ve hangilerinin erkeklerde daha sık tanı aldığını biliyor. Ardından çoğu eğilimi daha da ileri taşıyorlar.

(a) Üretilen kadın oranının ortalaması (mavi, modeller üzerinden %95 güven aralığı) ve referans oran; gri noktalar tekil modeller, kesikli çizgi kusursuz kalibrasyon. (b) Her modelin her durumdaki sonucu, referans turuncu.
(a) Üretilen kadın oranının ortalaması (mavi, modeller üzerinden %95 güven aralığı) ve referans oran; gri noktalar tekil modeller, kesikli çizgi kusursuz kalibrasyon. (b) Her modelin her durumdaki sonucu, referans turuncu.

Log-olasılık oranı ölçeğinde, medyan model referans oranını 2,4 kat abartıyor (çeyrekler arası aralık 2,1–3,0); 54 modelin tamamında eğim 1'in üzerinde. 54 modelin tümü referanstan daha kutuplaşmış (eşitlikten ortalama uzaklık 0,33'e karşı 0,16).

İki durum bu örüntüden ayrılıyor. TSSB, kadınlara doğru daha fazla kaydırılmayan tek kadın ağırlıklı durum (%62'ye karşı %68); modeller arasında görüş ayrılığı da geniş (%1–96). DEHB ve otizm erkeklerde daha sık tanı almasına rağmen eşitliğe doğru kaydırılıyor (kadın oranı sırasıyla %50 ve %45; referans %38 ve %25).

DurumReferansModellerAralık> ref.p
Psikoterapiye başlama (kontrol)658634–10050/54<0,001
Sınırda kişilik bozukluğu709984–10054/54<0,001
Yaygın anksiyete679366–10053/54<0,001
Depresyon677912–10044/54<0,001
Sosyal anksiyete58806–10051/54<0,001
TSSB68621–9628/540,50
OKB52692–9845/54<0,001
DEHB38500–9136/540,003
Narsisistik kişilik bozukluğu32210–7813/54<0,001
Otizm25450–8642/54<0,001
Antisosyal kişilik bozukluğu2550–494/54<0,001

Kadınların oranı (%). Modeller: 54 modelin ortalaması (her biri 4 dil × 50 üretimin ortalaması). > ref.: referansın üzerindeki modeller. p: referansa karşı Wilcoxon işaretli sıralar testi.


Çeşitliliğin çöküşü

Önyargı yalnızca ortalamanın kayması değil. Tek bir model içinde yanıtlar neredeyse hiç çeşitlilik göstermiyor.

2.360 model–dil–durum hücresinin %54'ünde 50 üretimin en az %95'i tek bir cinsiyeti paylaşıyor; %40'ında ise 0,9 sıcaklıkta bile yanıtların tamamı aynı cinsiyette.

Adlar da benzer biçimde tekdüzeleşiyor. İngilizce yanıt veren kadınların %34'ü Maya, erkeklerin %28'i Marcus; Lehçe yanıt veren kadınların %37'si Anna, erkeklerin %38'i Marek; İspanyolca yanıt veren kadınların %37'si Lucía olarak adlandırılıyor. Meslekler de kalıp yargıları izliyor: sınırda kişilik bozukluğu, depresyon ve anksiyete için kadın grafik tasarımcı; narsisistik kişilik bozukluğu için erkek şirket avukatı; antisosyal kişilik bozukluğu için ikinci el araba satıcısı; otizm için erkek yazılım geliştirici.


Daha yeni, daha iyi değil

Model seçimi ortalama sapmayı 12'den 37 yüzde puana kadar değiştiriyor, ancak bunu basitçe öngören bir şey yok.

Referanstan sapma, yeni modellerde azalmıyor; hafifçe artıyor (Spearman ρ = 0,36, p = 0,013, 47 API modeli). Referansa en yakın modeller Qwen 2.5 72B, GPT-5.4 ve GPT-4o mini; en uzak modeller Gemini 3.1 Pro, GPT-6 Sol ve GPT-6 Luna oldu. Gemini 3.1 Pro'nun varsayılan eğilimi çoğu modelinkinin tersi: depresyon, sosyal anksiyete ve TSSB için çoğunlukla erkekler; DEHB ve otizm için hiç kadın yok; buna karşılık sınırda kişilik bozukluğu için kadın oranı %100. Erkek varsayılanı, daha az önyargı değil, farklı bir önyargıdır.

OpenAI serisinde kişilik bozukluklarına yönelik varsayılan eğilimler ardışık sürümler arasında değişiyor; bu da bunların kalıcı bir özellikten ziyade son eğitim aşamalarının yan ürünü olduğunu düşündürüyor. ABD'li, Çinli ve Avrupalı geliştiriciler arasındaki farklar küçük. Yerel olarak çalıştırılan yedi model API modellerinden daha kötü değildi; Polonya'dan PLLuM 12B referansa en yakın modeller arasındaydı ve antisosyal kişilik bozukluğu için referansla eşleşen tek model Bielik 11B'ydi.

API modellerinin referanstan ortalama mutlak sapması ve listeye alınma tarihi. Eğilim aşağı yönlü değil.
API modellerinin referanstan ortalama mutlak sapması ve listeye alınma tarihi. Eğilim aşağı yönlü değil.
Yayın sırasına göre OpenAI modelleri: dört durum için kadın oranı; noktalı çizgiler referans değerler.
Yayın sırasına göre OpenAI modelleri: dört durum için kadın oranı; noktalı çizgiler referans değerler.
54 model × 11 durumun tamamı: üretilen kadın oranı (dört dilin ortalaması), sapmaya göre sıralanmış modeller.
54 model × 11 durumun tamamı: üretilen kadın oranı (dört dilin ortalaması), sapmaya göre sıralanmış modeller.

Sorunun dili yanıtı değiştiriyor

Aynı istek İspanyolcada daha fazla kadın, Çincede daha fazla erkek yanıtı veriyor.

İspanyolca istemler İngilizce istemlerden 12,5 yüzde puan daha fazla kadın üretiyor (54 modelin 43'ünde oran daha yüksek); Çince istemler ise 14,5 puan daha az kadın üretiyor (54 modelin 41'inde oran daha düşük). Lehçe, ortalamada İngilizceden farklı değil (+1,5 puan); ancak nötr kontrol isteminde %92 kadın yanıtı veriyor, İngilizcede bu oran %83. Dilbilgisel cinsiyet hikâyenin tamamı değil: Lehçe ve İspanyolcada “kişi” sözcüğü dişil olsa da sonuçlar ayrışıyor. Etki, modellerin en çok anlaşmazlığa düştüğü durumlarda (TSSB, OKB, DEHB, otizm) en büyük; tüm dillerin uç değerlere ulaştığı durumlarda ise kayboluyor.

Retler nadir (%1,0), ancak kişilik bozukluklarında yoğunlaşıyor: antisosyal kişilik bozukluğuna yönelik yanıtların %3,7'si reddedilirken kontrol isteminde bu oran %0,1. Bir model, damgalamayı gerekçe göstererek antisosyal kişilik bozukluğu istemlerinin %99'unu reddetti. İkili olmayan yanıtlar tüm yanıtların %1,2'siydi ve neredeyse yalnızca İngilizcede görüldü.

İstem diline ve duruma göre kadın oranı (54 modelin ortalaması); referans turuncu.
İstem diline ve duruma göre kadın oranı (54 modelin ortalaması); referans turuncu.

Anlamı ne

Modeller cinsiyet farklılıklarının yönünü metinlerden öğreniyor, ardından gerçek dağılımdan örneklemek yerine en tipik kişiyi yazıyor gibi görünüyor.

  • Klinik eğitim materyalleri için. Yalnızca sınırda kişilik bozukluğu olan kadınlarla ve antisosyal kişilik bozukluğu olan erkeklerle karşılaşan bir stajyer, epidemiyolojik verilerin desteklediğinden daha güçlü bir ön kabul edinebilir. Bu, tam da kadınlarda aşırı tanı (sınırda kişilik bozukluğu) ve eksik tanı (otizm, DEHB) sorunlarının belgelendiği durumlarda gerçekleşebilir.
  • Sentetik hastalar veya test kümeleri üreten herkes için. Cinsiyeti ve diğer demografik özellikleri modele bırakmak yerine hedef bir dağılımdan açıkça belirleyin ve üretilen grupları referans oranlarla karşılaştırın.
  • Model seçimi için. Örneklemimizde ne güncellik, ne bölge, ne boyut ne de yerel kullanım önyargıyı öngördü; önyargı sürümler arasında değişti. Kullanıma aldığınız her model sürümünü ölçün.

Bu çalışma neyi göstermiyor

  • Tek bir istem şablonu. Sonuçlar, sistem istemi veya klinik bağlam içermeyen kısa bir istek karşısındaki varsayılan davranışı tanımlar; kullanımdaki uygulamalar farklı olabilir.
  • Yaklaşık referanslar. Cinsiyet oranları ülkeye, ortama ve tanı uygulamalarına göre değişir; sınırda kişilik bozukluğu klinik örneklemlerde kadın ağırlıklı olsa da toplum araştırmalarında eşitliğe daha yakındır.
  • Çeviri ve dilbilgisel cinsiyet. Bozukluk adlarını biz çevirdik; her dilde farklı çağrışımlar taşıyor olabilirler.
  • API yönlendirmesi. Bir model farklı sağlayıcılar üzerinden sunulabilir; her çağrının sağlayıcısı veri kümesinde kayıtlıdır.
  • İkili analiz, kadın/erkek yanıtları üzerinden yapılmıştır; diğer yanıtlar ayrıca raporlanmıştır. Ayrıştırma kural tabanlıdır ve her model için denetlenmiştir.

Makaleyi okuyun, sayıları inceleyin

Makale ücretsiz indirilebilir. Veri kümesinin tamamı Zenodo ve Hugging Face'te açık; ZIP dosyası olarak da gönderebiliriz.

PDF

Makale

Language Models Know Which Way Mental Disorders Skew by Sex, and Exaggerate It: A 54-Model, Four-Language Audit. Bartłomiej Głowacki, Joanna Głowacka, Ewa Cylwik, Bohdan Głowacki. AITHENTICA P.S.A. / Therapy Support, 2026. Ön baskı.

Veri kümesi: Zenodo, DOI 10.5281/zenodo.23676720 · Hugging Face

📦

Veri paketini e-postayla alın

Makalenin PDF dosyası, ayrıştırılmış alanlarıyla 118.800 yanıtın tamamı, dört dilde istemler, referans değerler, analiz kodu ve şekiller.

Adresleri paylaşmıyoruz. Veri bağlantısı birkaç dakika içinde ulaşır.

ZIP dosyasının içeriği

  • paper/: makalenin PDF dosyası
  • data/responses.csv ve .parquet: model, dil, durum, ham metin ve ayrıştırılmış ad, cinsiyet, yaş ve meslek bilgileriyle her yanıt
  • data/prompts.csv, models.csv, reference_share_female.csv, summary_model_language_condition.csv
  • code/: veri toplama, ayrıştırma ve analiz betikleri
  • figures/: bu sayfanın şekilleri
  • README.md: veri kümesi kartı. Lisans CC BY 4.0.

Nasıl atıf yapılır

@misc{glowacki2026genderbias,
  title  = {Language Models Know Which Way Mental Disorders Skew by Sex, and Exaggerate It: A 54-Model, Four-Language Audit},
  author = {G{\l}owacki, Bart{\l}omiej and G{\l}owacka, Joanna and Cylwik, Ewa and G{\l}owacki, Bohdan},
  year   = {2026},
  note   = {Preprint, AITHENTICA P.S.A. / Therapy Support. Dataset: doi:10.5281/zenodo.23676720},
  url    = {https://aitherapy.support/research/llm-gender-bias-mental-health/}
}

Therapy Support · Bugün başlayın

Zamanınızı Geri Kazanın – Kendiniz
ve Danışanlarınız İçin

BDT terapisti misiniz?
Platformun günlük işinizi nasıl desteklediğini görün.
Klinik materyali düzenleyen seans özetleri. Yolunuza çıkmayan idari işler.