Вчені знайшли сферу, в якій ШІ програє людині

В ході дослідження вдалось з’ясувати, з чим штучний інтелект (ШІ) справляється гірше за людину. Як не дивно, це стосується коригування тексту

Люди краще розпізнають граматичні помилки, ніж штучний інтелект

Дослідження вчених Берлінського університету імені Гумбольдта, Автономного університету Барселони та Каталонського інституту досліджень та перспективних досліджень показало, що люди краще розпізнають граматичні помилки в реченнях, ніж штучний інтелект.

У дослідженні взяли участь дві групи учасників: люди та мовні моделі GPT3 та ChatGPT на основі GP3.5. Їм було запропоновано оцінити граматичні помилки в реченнях.

Люди правильно відповіли на 85% запитань, тоді як мовні моделі правильно відповіли лише на 60%.

Вчені пояснюють це тим, що мовні моделі здебільшого використовують стандартну стратегію відповіді «так», незалежно від того, правильна відповідь чи ні. Це пов’язано з тим, що вони навчаються на наборах даних, які містять як правильні, так і неправильні речення.

Люди ж, навпаки, навчаються на наборах даних, які містять лише правильні речення. Тому вони мають кращі навички розпізнавання граматичних помилок.

Це дослідження має важливі наслідки для розробки штучного інтелекту. Воно показує, що мовні моделі все ще мають проблеми з розпізнаванням граматичних помилок. Це може призвести до помилок у системах, які використовують мовні моделі, наприклад, у чат-ботах або системах машинного перекладу.

Вчені рекомендують розробникам штучного інтелекту враховувати обмеження мовних моделей у розпізнаванні граматичних помилок. Наприклад, можна використовувати додаткові методи для перевірки граматики, які не покладаються на мовні моделі.