Эксперимент был поставлен учеными из Калифорнии. Эксперты собрали 1400 людей и попросили каждого пройти по 10 тестов CAPTCHA разных видов: набор символов, выбор фото, собирание пазла и т. п.
Всего было отобрано 200 самых популярных сайтов в интернете. Выяснилось, что 120 из них против ботов используют защиту CAPTCHA («капча»). Во время эксперимента ученые измеряли точность и скорость решения человеком головоломки, а затем эти показатели сравнили с результатами ботов.
Что в итоге
Итог простой и в то же время удивительный. В среднем человек решает «капчу» за 15 секунд. Точность решения составляет от 50 до 84%. Тем временем ИИ-бот выполняет эти же задания за 1-15 секунд с точностью 85-100%.
Сравнение результатов решения «капч» человеком и ботом:
| Человек | Бот | |||
| Тип «капчи» | Скорость решения | Точность | Скорость решения | Точность |
| reCAPTCHA – просто кликнуть «я не робот» | от 3,1 до 4,9 сек | от 71 до 85% | 1,4 сек | 100% |
| reCAPTCHA – найти объект на фото | от 15 до 26 сек | 81% | 17,5 сек | 85% |
| Ввести искаженные текст и цифры | от 9 до 15,3 сек | от 50 до 84% | меньше 1 сек | 99,8% |
| hCAPTCHA – найти предмет среди ИИ-изображений | от 18 до 32 сек | от 71 до 81% | 14, 9 сек | 98% |
Чтобы осознать весь абсурд ситуации, напомним, CAPTCHA — это система защиты сайтов от ботов. По задумке, только люди способны решать абстрактные задачи, но как показывает практика, это не так.
<…> никто не любит их [головоломки]. Мы могли и не проводить эксперимент, чтобы осознать это. Но многие не понимают, действительно ли те усилия, которые прилагают люди для решения CAPTCHA, помогают.
Ученые призывают пересмотреть отношение к CAPTCHA. Желательно вообще отказаться от них, так как эти головоломки не решают проблему, а только усложняют жизнь человека.