Китай представил первую модель ИИ, имитирующую работу нейронов мозга
Группа китайских исследователей разработала новую модель искусственного интеллекта для энергоэффективных вычислений нового поколения, передает агентство Kazinform со ссылкой на Синьхуа.
В Институте автоматики Китайской академии наук была представлена крупномасштабная модель SpikingBrain-1.0, полностью обученная и функционирующая на графических процессорах производства КНР.
В отличие от распространенных генеративных систем, основанных на ресурсоемкой архитектуре Transformer, новый подход опирается на принцип работы спайковых нейронов, благодаря чему интеллект формируется по образцу биологических процессов в мозге.
— Эта крупная модель открывает нетрансформерный технический путь для развития нового поколения ИИ. Она может вдохновить на создание нейроморфных чипов с более низким энергопотреблением, — отметил директор Института автоматики Сюй Бо.
По данным исследователей, архитектура SpikingBrain обеспечивает исключительно эффективное обучение. Используя всего около 2% предобучающих данных, необходимых для типичных крупных моделей, система показывает результаты, сопоставимые с рядом открытых решений в задачах понимания языка и логических рассуждений.
Модель SpikingBrain обеспечила ускорение в 26,5 раза по сравнению с архитектурой Transformer при генерации первого токена из контекста в миллион знаков. Такой результат открывает широкие возможности для обработки ультрадлинных текстов, включая анализ юридических и медицинских документов, исследования в области физики высоких энергий и моделирование ДНК-последовательностей.
Ранее мы писали, что Китай нацелен на интеграцию ИИ в энергетику.