Тібо розкриває, що Google розробив модель, подібну до ChatGPT, на рік раніше

icon MarsBit
Поділитися
AI summary iconКороткий зміст
Тібо, колишній дослідник DeepMind і лідер OpenAI Codex, у оголошенні про проект розкрив, що Google розробив модель, подібну до ChatGPT, під назвою LMChat ще в 2021 році. Модель ніколи не була запущена через внутрішні занепокоєння щодо її впливу на пошук. Тібо підтвердив свою участь і зазначив, що DeepMind не мав повноважень для продовження. Новина в ланцюжку спричинила дискусію щодо обережної позиції Google щодо інновацій у сфері ШІ.

Що, Google справді створив ChatGPT на рік раніше, ніж OpenAI?

Не Google пізніше виправився, це самі люди OpenAI, Tibo, керівник Codex, щойно підтвердив це:

Це була раніша версія ChatGPT. Спочатку вона називалася LMChat, а потім отримала інший кодове ім’я.

Google занадто напружений, щоб випустити його, а DeepMind заборонено запускати продукти, які можуть завдати шкоди бізнесу Google.

DeepMind

Але чому Тібо так добре знає цю давню історію?

The answer is: He was on that Google team at the time.

Тоді я був частиною цієї команди.

Так, Тібо, який зараз створює «нескінченні токени» для OpenAI, був учасником того самого проекту Google.

Користувачі в шоці, у Тібо була така історія:

Ні, я думав, що ти просто кнопка скидання Codex (bushi).

DeepMind

Джефф Дін: Я не можу змиритися з цим!!

Так ось, інженер Midjourney недавно знайшов на X старе інтерв’ю з колишнім керівником Google Brain Джеффом Діном:

Іноді я думаю про те інтерв’ю з Джеффом Діном, де він сказав, що вони мали внутрішній чат-бот ще до ChatGPT, але вважали, що користуватися ним гірше, ніж просто користуватися Google.

DeepMind

Не очікувалося, що Тібо відповість особисто, і він зробив непряму діалог з Джеффом Діном:

Проект, про який говорив Джефф, дійсно існував, спочатку він називався LMChat і майже був ChatGPT на рік раніше.

Щодо того, чому це не було опубліковано, Тібо з неволею зазначив, що DeepMind не має таких повноважень: LLM завдасть удару по пошуковій системі Google, і боси дуже нервують, не надаючи дозволу.

Закінчивши розповідь про цю історію, Тібо лише зітхнув:

Ой, я часто згадую про це.

Користувачі впали в шок...

Твій колишній бос у Google абсолютно не повинен більше стикатися зі будь-чим, що має відношення до бізнесу.

DeepMind

Не одинокий випадок: у біографії Гасбіс, лідера штучного інтелекту в Google, також зазначалося, що OpenAI не зробила нічого революційного. Тоді багато хто усвідомлював потенціал LLM, але Оттман мав сміливість повністю ігнорувати питання безпеки й просто випустив його.

Але не варто звинувачувати Google — «Google Search» виходив із надзвичайно високого рівня, і якщо йдеться лише про пошук, Google Search вже дуже досконалий.

А як щодо великих моделей 2023 року? Вони майже все плутали, і будь-який контент, що стосувався актуальності, був повністю ілюзією.

Але зараз Scaling вирішив усе.

«Краще за пошук Google» — цей критерій, який сам Google встановив для себе, в кінцевому підсумку коштував йому небаченої дорогі ціни.

Незавершена подорож до Google

Тібо, справжнє ім’я Тібо Соттіо, керівник Codex, володар безмежних токенів, також відомий як «Кібер-батько».

(PS: Скинув, скинув o(╥﹏╥)o, на вихідних не помітив — все витратив!!!)

DeepMind

У 2015 році Тібо приєднався до Google, спочатку працюючи над проектами, пов’язаними з Google Maps, а потім перейшов до DeepMind.

Тоді DeepMind все ще була досить чистою дослідницькою лабораторією, де AlphaGo, підсилене навчання та дослідження загального штучного інтелекту перебували на піку уваги.

У DeepMind Тібо відповідає за створення інфраструктури штучного інтелекту та машинного навчання, яку використовують дослідники.

За пам’яттю Тібо, у DeepMind колись розробляли чат-продукт під назвою LMChat, який пізніше отримав інший кодовий назву. Його досвід уже дуже схожий на ChatGPT.

Але Google дуже обережно ставився до цього, оскільки це безпосередньо впливало б на існуючий бізнес, а відповідності DeepMind було недостатньо. У підсумку, цей продукт так і не був запущений для загальної публіки.

Листопада 2022 року ChatGPT з’явився на світ.

Тібо після цього розвалився.

У 2024 році він завершив майже дев’ятирічну кар’єру в Google і офіційно приєднався до OpenAI.

Виявилось, що вибір Тібо був правильним.

Такі невдачі LMChat — не випадкові, вони, як і Vibe Coding, мають лише нуль або безліч разів (bushi).

Ця невелика історія в кінцевому підсумку стала символом Google протягом усієї ери штучного інтелекту.

Зараз відставання Coding Battle викликає ще більш жорстку хвилю змін персоналу всередині Google.

18 червня Noam Shazeer оголосив про приєднання до OpenAI.

Це ім’я не потребує пояснень. Один із ключових авторів революційної статті 2017 року «Attention Is All You Need», яка започаткувала еру Transformer у штучному інтелекті. У 2021 році він залишив Google та заснував Character.AI, а у 2024 році Google купив його разом із компанією за 2,7 мільярда доларів США, щоб він став співкерівним Gemini.

Як результат, людину, яку купили за 2,7 млрд доларів, не вдалося зберегти навіть два роки.

19 червня Джон Джампер оголосив про перехід до Anthropic.

Віце-президент DeepMind, Хасбіс, який сам вибрав цього ключового лідера — щойно захистивши дисертацію, він був призначений керівником команди AlphaFold.

У 2024 році він і Хасбіс отримали Нобелівську премію з хімії за проривову роботу з передбачення структури білків за допомогою AlphaFold.

Але зараз лауреати Нобелівської премії обрали конкурента.

Після двох серйозних ударів Google продовжує втрачати кошти.

24 червня на дошці нагород Google за таланти з’явилися ще два нових імені: Jonas Adler та Alexander Pritzel.

DeepMind

Обоє є ключовими внесками у Gemini. Адлер керує напрямком AI-програмування в Google, а Пріцель працює над передтренуванням. Обидва брали участь у дослідженні AlphaFold і є колегами Джона Джампера.

Місце призначення — теж Anthropic.

Ще одна річ

У коментарях до посту хтось задав дуже цікаве питання:

Якби Google першим випустив GPT, що б було інакше?

На жаль, ніхто не відповідає.

DeepMind

Але я ж знаю цю задачу!

Це ж той найкласичніший старий жарт із світу технологій.

У 1970-х роках лабораторія Xerox розробила графічний інтерфейс, мишу та Ethernet. Ці люди повністю володіли всіма козирями ери ПК — справжній мільйонний вибух.

А які результати? Xerox просто не приділяв цьому жодної уваги.

Оскільки продажі Xerox розрахували: цей накладний інтерфейс дозволить мені продати дві додаткові картриджі з тонером або дві пачки паперу A4? Ні. Тоді навіщо це робити?

...

І ось, сканінг спостерігав, як Джобс прийшов і ознайомився, після чого створив Macintosh і безпосередньо став королем.

З цього моменту Xerox став «козлом відпущення» Сіліконової долини. Кожного разу, коли галузь зазнавала зміни парадигми, лідери віддавали перевагу використанню Xerox як жертви:

Бачите, ось хвороба великих компаній! (piapiapia, звук кнута)

Але чесно, хто б не сидів на тому місці, бачачи прибуток у сотні мільярдів доларів на рік, хто б хотів сам собі знищити бізнес...

Замініть «тонер і папір А4» на «пошук і реклама», а «графічний інтерфейс» на «ChatGPT» —

Той, хто ще в 2017 році написав Transformer і мав повний комплект божественного обладнання, Google, у кінцевому підсумку, у марафоні AGI...

Отримав «Америка 豆包 ».

DeepMind

Посилання для довідки: [1]https://x.com/thsottiaux/status/2083596911060324570

Цей текст походить з微信-каналу «Quantum Bit» (ID: QbitAI), автор: Jay

Відмова від відповідальності: Інформація на цій сторінці може бути отримана від третіх осіб і не обов'язково відображає погляди або думки KuCoin. Цей контент надається лише для загального інформування, без будь-яких запевнень або гарантій, а також не може розглядатися як фінансова або інвестиційна порада. KuCoin не несе відповідальності за будь-які помилки або упущення, а також за будь-які результати, отримані в результаті використання цієї інформації. Інвестиції в цифрові активи можуть бути ризикованими. Будь ласка, ретельно оцініть ризики продукту та свою толерантність до ризику, виходячи з ваших власних фінансових обставин. Для отримання додаткової інформації, будь ласка, зверніться до наших Умов використання та Розкриття інформації про ризики.