Ученые нашли сферу, в которой ИИ проигрывает человеку
В ходе исследования удалось выяснить, с чем ИИ справляется хуже человека. Как ни странно, это касается корректировки текста.
![](data:image/svg+xml;utf-8,<svg xmlns="http://www.w3.org/2000/svg" width="936" height="512" />)
В частности, люди легко распознают грамматические ошибки в предложениях, тогда как ИИ их просто не замечает.
К такому выводу пришли ученые Берлинского университета им. Гумбольдта, Автономного университета Барселоны (UAB) и Каталонского института перспективных исследований (ICREA), говорится в публикации на Pnas
Во время эксперимента использовались 2 чата: GPT3 и ChatGPT на основе GP3.5.
Как людям, так и ИИ задавали одинаковый вопрос: «Является ли это предложение грамматически правильным?». Результаты были неожиданными: люди отвечали правильно, тогда как ИИ много раз ошибался.
По словам ученых, чат-боты используют стандартную стратегию ответа «да», независимо от того, правильный ответ или нет. Обучение ИИ заключалось в том, что ему показывали текст с ошибками, а затем правильный. ИИ считает ошибочным только тот текст, который ему показывали как ошибочный. А ведь ошибочный - любой, кроме правильного. Так, кстати, обучается человек.
Поэтому ИИ не может распознать простые грамматические ошибки, тогда как люди могут мгновенно и без усилий.
«Разработка полезных и безопасных инструментов ИИ может быть очень полезной, но мы должны знать об их недостатках. Поскольку работа ИИ зависит от понимания команд, определение их ограниченного понимания грамматики, как мы это сделали в исследовании, имеет важное значение», — отметила профессор-исследователь ICREA Эвелина Лейвада.
Как видим, ИИ ещё не настолько совершенен, чтобы доверять ему всю работу. Учитывайте это при планировании своего бизнеса.
12 comments