Шість ультрасучасних моделей штучного інтелекту не змогли успішно пройти математичні тести, показавши найвищий результат лише на рівні 2%.


Математики створили нові задачі, аби перевірити аналітичні здібності шести передових штучних інтелектів. Проте, ці системи майже не змогли впоратися з тестами.

Сучасні моделі штучного інтелекту стикаються з труднощами при вирішенні математичних завдань, що вимагають дослідницького підходу. Навіть найпрогресивніші системи ШІ здатні справитися лише з 2% з численних проблем, які перед ними постають, згідно з інформацією від LiveScience.

Відповідно до інформації, наданої дослідницьким інститутом Epoch AI, для вирішення складних математичних проблем докторам наук часто потрібні години або навіть дні. Тим часом найсучасніші моделі штучного інтелекту змогли дати правильні відповіді лише на менш ніж 2% з цих завдань.

Протягом останніх десяти років було створено безліч тестів для штучного інтелекту. Вчені зазначають, що в багатьох випадках моделі ШІ успішно справляються з цими випробуваннями. Наприклад, у відомому тесті MMLU (Оцінка масового багатозадачного мовного розуміння) сучасні моделі штучного інтелекту демонструють правильність у 98% математичних завдань.

Переважна частина цих тестів орієнтована на оцінку можливостей штучного інтелекту в галузі математики на рівні середньої школи та університету, зазначає Елліот Глейзер, математик з Epoch AI.

Однак новий тестовий набір під назвою FrontierMath орієнтований на більш складні рівні мислення. Компанія Epoch AI створила запитання у співпраці з професорами математики. Відзначається, що тести охоплюють різноманітні підгалузі, починаючи з теорії чисел і закінчуючи алгебраїчною геометрією.

Висновки науковців показують, що наразі моделі штучного інтелекту не мають математичних міркувань на дослідницькому рівні. Однак у міру розвитку ШІ ці порівняльні тести дадуть спосіб дізнатися, чи поглиблюються їхні здібності до міркування.

"Команда науковців підкреслила, що постійно аналізуючи новітні моделі та взаємодіючи з дослідниками у сфері штучного інтелекту, ми маємо на меті розширити наше розуміння як потенціалу, так і обмежень ШІ."

OBOZ.UA повідомляв, що картина, створена одним із найсучасніших художників на основі штучного інтелекту, була продана на аукціоні за $1 мільйон.

Related posts