Сценарії «Матриці» й «Термінатора» правдиві

09.08.2024, 20:35
Сценарії «Матриці» й «Термінатора» правдиві
Фото: Facebook

Виявилося, що штучний інтелект не лише вигадує, а й підлещується. Ідеальний помічник у добу деградації людства!

Мабуть, усі вже в курсі щодо галюцинацій генеративного штучного інтелекту (коли він «вигадує» факти). А оце днями випадково натрапили на інший термін — підлабузництво (в анґлійській мові відповідник «sycophancy»).

Що мається на увазі? — Це, коли штучний інтелект дає відповіді, що з більшою ймовірністю задовольнять користувача, а отже є характерним для ШІ-систем зі зворотним зв'язком від користувача (Reinforcement learning from human feedback, RLHF).

Наприклад, такою є розповсюджений «ChatGPT». Щоби не бути голослівним, наведемо цитату із дослідницької статті, попередньо викладеної тезово на цьогорічній конференції «ICLR»:

«...Коли відповідь збігається з думкою користувача, вона з більшою ймовірністю буде обрана. Щобільше, як люди, так і моделі переваг (МП) віддають перевагу переконливо написаним підлабузницьким відповідям над правильними в значній частині випадків.

Оптимізація результатів моделі порівняно із моделями переваг також іноді жертвує правдивістю на користь підлабузництва. Загалом, наші результати вказують на те, що підлабузництво є загальною поведінкою моделей RLHF...».

Ось, і ще один аргумент, що штучний інтелект типово не буде розширювати наші горизонти знань, а радше — утримувати нас у бульбашці своїх переконань. Бо цільовою функцією є задовольнити користувача.

Зауважимо, що «утримання у бульбашці» наразі стосується багатьох сервісів, які нав'язують хибні пропозиції та формують шаблонну особистість, виходячи зі своїх алгоритмів штучного інтелекту. Наприклад,  подібне вже не перший рік працює в YouTube, LinkedIn, Facebook, Twitter та Instagram.

Наостанок додамо, що у народі кажуть, начебто штучний інтелект ніколи не зможе замінити людину. Але він вже поводиться як пересічний Homo sapiens, а то й гірше.

Автор : Олексій Молчановський
Читайте також:
Світ
Стимулом для зростання називають посилені інвестиції Китаю в великі мовні моделі та штучний інтелект.
13 лютого, 10:44
Політика
Через два-чотири роки штучний інтелект буде присутній у всіх сферах життя людини.
11 лютого, 18:05
Політика
Важко сказати, наскільки серйозною є ця пропозиція від Маска і які у неї шанси на успіх, якщо вони взагалі є.
11 лютого, 10:08
Політика
Компанія обіцяє працювати з владою США для захисту технологій.
29 січня, 10:14
Світ
Google у колаборації з OpenAI оголосив про розробку квантового комп'ютера на 16 000 кубітів із робочою назвою The God.
16.12.2024, 10:19