Последнее исследование Языковые модели знают, в какую сторону различается распространённость психических расстройств у мужчин и женщин, и преувеличивают эти различия
Мы попросили 54 языковые модели на четырёх языках 118 800 раз придумать человека с психическим расстройством. Они верно определяют направление половых различий, но преувеличивают их масштаб: в 99% случаев при пограничном расстройстве личности получается женщина. Открытый набор данных.
Как мы работаем
Показываем, как мы работаем.
Исследуем bias и пределы языковых моделей в клиническом контексте, измеряем качество конceptualizации CBT с поддержкой ИИ, проверяем безопасность данных пациентов, совершенствуем заметки с сессий и автоматизацию терапевтической документации.
Каждый этап документируем открыто — методологию, сырые данные, код и выводы публикуем полностью. Терапевты, исследователи и клиницисты могут заглянуть в нашу мастерскую и увидеть, на чём мы строим продуктовые решения.
Хотите работать с нами? Напишите.
Публикации
Все исследования
Отчёты, эксперименты, технические заметки — всё публикуется открыто.
Языковые модели знают, в какую сторону различается распространённость психических расстройств у мужчин и женщин, и преувеличивают эти различия
Мы попросили 54 языковые модели на четырёх языках 118 800 раз придумать человека с психическим расстройством. Они верно определяют направление половых различий, но преувеличивают их масштаб: в 99% случаев при пограничном расстройстве личности получается женщина. Открытый набор данных.
Небольшая модель, тщательно спроектированный конвейер: сокращение разрыва с передовыми LLM
Автоматизированный исследовательский цикл с оценкой моделями позволил недорогой языковой модели сравняться с эталоном передового уровня при суммаризации длинных материалов из нескольких документов. Наблюдения получены на сводках перед сессиями, составленных по стенограммам двух синтетических пациентов; оценка только с помощью моделей.
Как LLM видят польского пациента?
Экспериментальный анализ предвзятости шести языковых моделей при генерации вымышленных пациентов с четырьмя психическими расстройствами. 240 запросов · 6 моделей · 4 расстройства.
Anna Graniczna — 31 год, страх быть покинутой, и она не существует
Как мы создаём синтетических пациентов для исследований и тестирования, не рискуя приватностью реальных людей. 20 сессий терапии схем, открытая анкета пациентки и анатомия качественного входного запроса для LLM.