Согласно сообщению Reuters от 17 августа, бывшие ведущие исследователи Google Brain Дэвид Ха и Ллион Джонс объявили о создании в Токио исследовательской компании по искусственному интеллекту Sakana AI. Компания отказалась раскрывать детали финансирования. Сообщается, что Джонс является пятым автором исследовательской работы Google 2017 года «Внимание — это все, что вам нужно», в которой представлена «преобразовательная» архитектура глубокого обучения, которая позже стала основой ChatGPT, а также является текущей разработкой, основанной на генеративных искусственных технологиях. интеллект, основа продукта. Ха был директором по исследованиям в Stability AI и исследователем Google Brain.

Джонс сказал, что Sakana AI сосредоточится на создании новых архитектур для базовых моделей. «Вместо того, чтобы строить одну гигантскую модель, которая поглощает все эти данные, наш подход состоит в том, чтобы использовать большое количество более мелких моделей, каждая из которых имеет свои уникальные преимущества и меньшие наборы данных, и позволить этим моделям взаимодействовать друг с другом», — сказал Ха. решать задачи."