Шефът на Meta AI казва, че големите езикови модели няма да достигнат човешкия интелект

Ръководителят на Meta за изкуствен интелект каза, че големите езикови модели, които захранват генеративни AI продукти като ChatGPT, никога няма да постигнат способността да разсъждават и планират като хората, както той се фокусира вместо това върху радикален алтернативен подход за създаване на „суперинтелигентност“ в машините.

Ян ЛеКун, главен учен по изкуствен интелект в гиганта на социалните медии, който притежава Facebook и Instagram, каза, че LLM имат „много ограничено разбиране на логиката . . . не разбират физическия свят, нямат постоянна памет, не могат да разсъждават в никаква разумна дефиниция на термина и не могат да планират . . . йерархично”.

В интервю за Financial Times той се противопостави на разчитането на напреднали LLM в стремежа да се направи интелигентност на човешко ниво, тъй като тези модели могат да отговарят точно на подканите само ако са били захранвани правилно тренировъчни данни и следователно са „присъщо опасни“.

Вместо това той работи за разработването на изцяло ново поколение AI системи, които се надява да захранват машини с интелект на човешко ниво, въпреки че каза, че тази визия може да отнеме 10 години, за да се постигне.

Meta налива милиарди долари в разработването на свои собствени LLM, тъй като генеративният AI експлодира, целяйки да настигне конкурентни технологични групи, включително OpenAI, подкрепян от Microsoft, и Google на Alphabet.

LeCun ръководи екип от около 500 служители в лабораторията на Meta за фундаментални изследвания на AI (Fair). Те работят за създаването на AI, който може да развие здрав разум и да научи как светът работи по начини, подобни на хората, в подход, известен като „моделиране на света“.

Експерименталната визия на шефа на Meta AI е потенциално рискова и скъп хазарт за групата в социалните медии във време, когато инвеститорите жадуват да видят бърза възвръщаемост на инвестициите в ИИ.

Миналия месец Meta загуби близо 200 милиарда долара от стойност, когато главният изпълнителен директор Марк Зукърбърг обеща да увеличи разходите и да превърне социалната медийна група във „водещата AI компания в света“, изплаши инвеститорите на Уолстрийт, загрижени за нарастването разходи с малък потенциал за незабавни приходи.

„Ние сме в точката, в която смятаме, че сме на прага на може би следващото поколение системи с изкуствен интелект“, каза LeCun.

Коментарите на LeCun идват, докато Meta и нейните съперници се стремят напред с все по-подобрени LLM. Фигури като шефа на OpenAI Сам Олтман вярват, че осигуряват жизненоважна стъпка към създаването на изкуствен общ интелект (AGI) – моментът, когато машините имат по-големи когнитивни възможности от хората.

OpenAI пусна миналата седмица своя нов по-бърз GPT-4o модел, а Google разкри нов „мултимодален“ агент с изкуствен интелект, който може да отговаря на заявки в реално време във видео, аудио и текст, наречен Project Astra, задвижван от надстроена версия на своя модел Gemini.

Meta също стартира новия си модел Llama 3 миналия месец. Ръководителят на глобалните въпроси на компанията сър Ник Клег каза, че най-новият LLM има „значително подобрени възможности като разсъждения“ – способността да се прилага логика към заявки. Например, системата би предположила, че човек, страдащ от главоболие, болки в гърлото и хрема, е настинал, но също така би могла да разпознае, че алергиите може да са причина за симптомите.

Въпреки това, LeCun каза, че тази еволюция на LLM е повърхностна и ограничена, като моделите се учат само когато човешки инженери се намесят, за да ги обучат на тази информация, вместо AI да стига до заключение органично като хората.

>

„Със сигурност изглежда на повечето хора като разсъждение – но най-вече се използва натрупано знание от много данни за обучение“, каза LeCun, но добави: „[LLMs] са много полезни въпреки техните ограничения.“

Google DeepMind също прекара няколко години в търсене на алтернативни методи за изграждане на AGI, включително методи като обучение с подсилване, при което AI агентите се учат от заобикалящата ги среда във виртуална среда, подобна на игра.

На събитие в Лондон във вторник, шефът на DeepMind сър Демис Хасабис каза, че това, което липсва на езиковите модели, е „те не разбират пространствения контекст, в който се намирате . . . така че това ограничава тяхната полезност в крайна сметка”.

Meta създаде своята лаборатория Fair през 2013 г., за да бъде пионер в изследванията на AI, наемайки водещи академици в космоса.

Въпреки това, в началото на 2023 г. Meta създаде нов екип на GenAI, ръководен от главен продуктов директор Крис Кокс. Той привлече много AI изследователи и инженери от Fair и ръководи работата по Llama 3 и го интегрира в продукти, като новите си AI асистенти и инструменти за генериране на изображения.

Създаването на екипа GenAI дойде като някои вътрешни хора твърдяха, че академичната култура в рамките на лабораторията Fair е отчасти виновна за късното пристигане на Мета в генеративния бум на ИИ. Зукърбърг настоява за по-комерсиални приложения на ИИ под натиска на инвеститорите.

Въпреки това ЛеКън остава един от основните съветници на Зукърбърг, според хора, близки до компанията, поради неговото досие и репутация на един от бащите-основатели на AI, печелейки награда Тюринг за работата си върху невронните мрежи.

„Ние пренасочихме Fair към по-дългосрочната цел на AI на човешко ниво, по същество защото GenAI сега е фокусиран върху нещата, към които имаме ясен път“, каза LeCun.

„[Постигането на AGI] не е проблем с дизайна на продукта, дори не е проблем с технологичното развитие, това е до голяма степен научен проблем“, добави той.

LeCun публикува за първи път статия за неговата визия за моделиране на света през 2022 г. и оттогава Meta пусна два изследователски модела, базирани на подхода.

Днес той каза, че Феър тества различни идеи за постигане на интелигентност на човешко ниво, защото „в това има много несигурност и изследване, [така че] не можем да кажем коя ще успее или ще се окаже вдигна”.

Сред тях екипът на LeCun захранва системите с часове видео и умишлено пропуска кадри, след което кара AI да предвиди какво ще се случи по-нататък. Това е, за да се имитира как децата се учат от пасивно наблюдение на света около тях.

Той също каза, че Феър проучва изграждането на „универсална система за кодиране на текст“, която ще позволи на система да обработва абстрактни представяния на знания в текст, които след това могат да бъдат приложени към видео и аудио.

Някои експерти се съмняват дали визията на LeCun е жизнеспособна.

Арон Кулота, доцент по компютърни науки в университета Тулейн, каза здравият разум отдавна е бил „трън в очите на AI“ и че е било предизвикателство да се обучават моделите на причинно-следствена връзка, оставяйки ги „податливи на тези неочаквани провали“.

Един бивш служител на Meta AI описа натиска на световното моделиране като „неясен пух“, добавяйки: „Чувствам се като много забиване на знамена“.

Друг настоящ служител каза, че Fair тепърва трябва да се докаже като истински съперник на изследователски групи като DeepMind.

В по-дългосрочен план LeCun вярва, че технологията ще захранва AI агентите, които потребителите могат да взаимодействат чрез носими технологии, включително очила с добавена реалност или „умни“ очила и „гривни“ за електромиография (EMG).

„[За да бъдат агентите с ИИ] наистина полезни, те трябва да притежават нещо подобно на интелигентност на човешко ниво“, каза той.

Допълнителен репортаж от Мадхумита Мургия в Лондон

p>

Последвайте ни в