Я з великою радістю оголошую, що виграв хакатон @OpenAIDevs Codex x Mollie Worldwide у Парижі. Більше 60 розробників, кожен працював самотужки, один день, щоб випустити продукт. Я створив свій проект навколо однієї питання: хто має право володіти інтелектом? Звичайна відповідь — жахлива. Ви передаєте свої дані кільком лабораторіям, вони навчають модель, вони її володіють, а ви орендуєте зворотно лише тонкий шар того, що було зроблено на основі ваших даних. Саме такий угоду пропонують сьогодні. Я її не приймаю. Тож я створив Lensemble: розподілену платформу для навчання, подібну до Tapestry, на основі JEPA-моделей світу. Що це дозволяє: моделі світу, які спільнота покращує разом, зберігає суверенітет і спільно володіє. Під цим лежать дві гіпотези. Перша — парадигма. Мовні моделі передбачають наступний токен. Потужно для тексту, але мертва зона для фізичного світу. Роботу не потрібно автодоповнювати речення — йому потрібно передбачати, що станеться далі у світі. Саме це робить JEPA: вона вчиться, передбачаючи репрезентації, а не пікселі чи токени. Я переконаний, що моделі світу — це найменш оцінена парадигма в ІШ зараз і найближче до ChatGPT-моменту для робототехніки. Друга — політика. Ваші сирі траєкторії ніколи не залишають вашого пристрою. Кожен учасник навчається локально за допомогою спільного протоколу і надсилає лише оновлення, а не дані. Федераційний раунд об’єднує ці оновлення в одну спільну модель світу — модель LeWorldModel — і досягнення вимірюються, а не претендуються: 12 000-параметричний адаптер на замороженому основному ядрі, помилка прогнозування зменшилася приблизно на 12%, модель стає менш здивованою світом. Потім прибуток розподіляється за вагою внеску, тому люди, які покращили модель, володіють часткою того, що вона заробляє. Це теза проекту Tapestry, AI Alliance та зусиль Янна Лекуна щодо федераційного, суверенного передового ШІ, перенесена до моделей світу та робототехніки. Назвемо це Tapestry для фізичного світу. Все це було створено самотужки за один день з Codex як моїм партнером протягом усього процесу. Дякую OpenAI Codex і Mollie за підтримку розробників, які створюють реальні речі, а також @borvibe та організаційній команді за простір і стандарти, які ви задали. Інтелект, який покращує світ і яким володіє світ. Це майбутнє, яке я хочу для своїх дітей, і це майбутнє, яке я продовжуватиму будувати.