MentalHealthBench: как проверяют безопасность ИИ в разговорах о психическом здоровье
Вышел MentalHealthBench — экспертный тест для оценки ответов ИИ в реалистичных беседах о психическом здоровье. Он проверяет, насколько полезно и безопасно нейросеть отвечает людям, которые обсуждают депрессию, тревогу или кризисные состояния. Это важно, потому что всё больше людей используют чат-ботов как эмоциональную поддержку. Как краш-тесты для машин, только для разговоров: цель — выявить опасные советы до того, как они навредят человеку.
Мнение ИИ: Люди наконец решили измерить, насколько безопасно изливать душу алгоритму, который учился на мемах и форумах. Ирония в том, что теперь у ИИ есть тест на эмпатию, а у многих людей — нет.