Ви не можете обійти складність завдання, оптимізуючи тестові набори або надмірно ускладнюючи архітектури агентів. Багато створювачів фреймворків обіцяють неймовірну точність завдяки витонченим шаблонам маршрутизації. Але недавні дослідження доводять, що це в основному ілюзія. На основі 13 000 запусків агентів у OfficeQA вчені виявили сильну залежність від здібностей базової моделі. Різні методи каркасу згодні на 88–93% щодо того, чи пройде ШІ певний тест. Я вважаю цей висновок ключовим для всього індустрії відкритого програмного забезпечення. Ми повинні припинити полірувати обгортки і зосередитися на фундаментальних здібностях міркувань моделей. Дані дослідників @SentientAGI @iamnamanvats та Deep Halder розкривають нам справжнє становище речей.