ШІ готується скласти “Останній іспит людства” на рівні універсального експерта
За рік штучний інтелект знатиме більше, ніж усі експерти-люди
ШІ готується скласти “Останній іспит людства” на рівні універсального експерта/Фото: pexels
Штучний інтелект вже дуже скоро знову пройде один із найскладніших тестів на знання у світі під назвою “Останній іспит людства” (HLE). До цієї події лишилося всього кілька місяців. Розробники вважають, що результат буде вражаючим. Вони також стверджують, що за рік нейронки знатимуть більше, ніж усі експерти-люди.
Деталі
Іспит HLE був створений керівниками технічних компаній. Його метою була перевірка інтелектуальності їхніх систем. Тестування складається з 2500 ретельно підібраних питань. Загалом тест охоплює приблизно сто тем. Там є запитання як про міфи та фізіологію, так і про ракетобудування. При цьому кожне запитання вимагає рівня розуміння мінімум на рівні доктора філософії.
Цікаво, що два роки тому система ChatGPT від OpenAI вже брала участь у цьому тестуванні. Тоді нейронка набрала лише 3 відсотки вірних відповідей. Google та Anthropic показали не набагато кращі результати. На той момент між справжніми науковцями та великими мовними моделями (LLM) дійсно був великий розрив. Проте якість технологій невпинно зростала, і минулого місяця Google Gemini набрав вражаючі 45,9% на іспиті. На думку експертів, зрештою ШІ зможе набрати повний бал. Anthropic досягла результату 34,2 відсотка в HLE. Наразі ця компанія теж швидко покращує свої результати.
Автори тесту зазначають, що 100-відсотковий результат на іспиті за допомогою штучного інтелекту став би значним проривом, адже вказаний тест “розроблений як останній закритий академічний тест такого роду”. Тобто, якщо технологія зламає HLE, її потрібно буде перевірити на питаннях, на які жодна людина не знає відповіді в майбутньому.
Раніше ми писали про те, як AI-алгоритми очистили бібліотеку від майже 200 видань. Таким чином було проведено цензурування. Зокрема, під вилучення потрапив роман “1984” Джорджа Орвелла та “Сутінки” Стефані Мейєр. Також штучний інтелект визначив як “невідповідні” автобіографію Мішель Обами “Становлення” та “Щоденник записників” Ніколаса Спаркса.
Ще новини за темою, які можуть зацікавити:
Не пропустіть цікавинки!
Підписуйтесь на наші канали та читайте новини у зручному форматі!
