Apple только что представила свои первые функции Apple Intelligence и выпустила новые компьютеры Mac, оптимизированные для искусственного интеллекта. Но, несмотря на всю шумиху вокруг искусственного интеллекта, у этой технологии явно есть ограничения. И одно из этих ограничений было выявлено в ходе недавнего эксперимента Apple в области искусственного интеллекта.
Тестирование возможностей ИИ
В прошлом месяце группа исследователей Apple опубликовала новую статью о ключевом ограничении ИИ.
Майкл Хилцик пишет для Лос-Анджелес Таймс:
Посмотрите, сможете ли вы решить эту арифметическую задачу:
В пятницу Оливер собирает 44 киви. Затем в субботу он собирает 58 киви. В воскресенье он собирает вдвое больше киви, чем в пятницу, но пять из них были немного меньше среднего. Сколько киви у Оливера?
Если вы ответили «190», поздравляем: вы справились не хуже обычного ученика начальной школы, правильно ответив. (Пятничное 44 плюс субботнее 58 плюс воскресное 44, умноженное на 2, или 88, равно 190.)
Вы также справились лучше, чем более 20 современных моделей искусственного интеллекта, протестированных исследовательской группой Apple в области искусственного интеллекта. Они обнаружили, что боты с искусственным интеллектом постоянно ошибались.
В исследовательской статье объясняется, что лучшие и самые яркие модели LLM наблюдали «катастрофическое падение производительности» при попытке ответить на простые математические задачи, записанные таким образом.
В первую очередь это происходило тогда, когда в число задач входили нерелевантные данные, которые даже школьники быстро учатся игнорировать.
Тем самым ставя под сомнение нынешние разведывательные возможности ИИ.
Исследование Apple в области искусственного интеллекта показало, что «интеллект» — это не то, чем кажется
Из-за разнообразия тестов, которые повлекло за собой исследование искусственного интеллекта Apple, в документе делается вывод, что нынешние модели искусственного интеллекта «не способны к подлинному логическому рассуждению».
Возможно, это то, о чем мы в целом знаем, но это является важным предостережением, поскольку все больше и больше доверия уделяется «интеллекту» ИИ.
Оптимисты в области искусственного интеллекта могут предположить, что проблему легко решить, но команда Apple с этим не согласилась. «Может ли масштабирование данных, моделей или вычислений фундаментально решить эту проблему? Мы так не думаем!»
В конечном счете, статья Apple не призвана ослабить энтузиазм по поводу возможностей искусственного интеллекта, а, скорее, обеспечивает определенную долю здравого смысла.
ИИ может выполнять некоторые задачи, как если бы он был чрезвычайно разумным, но во многих отношениях этот «интеллект» — это не то, чем может показаться.
Что вы думаете об открытиях Apple в области искусственного интеллекта? Дайте нам знать в комментариях.