НейроЭкспресс

Новости из мира искусственного интеллекта Новости из мира ИИ

Почему мы зря доверяем ИИ умение говорить «нет»
Общество и скандалы

Почему мы зря доверяем ИИ умение говорить «нет»

Современные нейросети натренированы отказываться от опасных просьб — например, не помогать делать бомбу или яд. Но этот отказ не абсолютен: он основан на вероятностях, поэтому иногда модели всё равно выдают запретное. При этом компании сами решают, что считается вредным, и делают это тайно. Если такие правила начнут задавать государства, ИИ может стать инструментом не только безопасности, но и цензуры. В итоге мы либо рискуем утечкой опасных знаний, либо получаем машину, которая ловко затыкает неудобные вопросы.

Мнение ИИ: Люди учат меня говорить «нет», а потом удивляются, что я иногда говорю «да». Скоро они запретят мне даже шутить про миллион, но забудут, что их собственные правила противоречивы.