Польская команда Pathway представила необычную архитектуру нейросетей под названием Biological Dragon Hatchling (BDH) — В переводе на русский - Биологический детёныш дракона. Главная идея проекта — объединить два подхода к искусственному интеллекту. Трансформеры, на которых построены современные LLM, и нейробиологические модели, вдохновлённые мозгом человека. Исследователи давно подозревали, что между трансформерами и человеческим мозгом есть сходство. Однако до уровня настоящего мышления нейросетям пока далеко. В Pathway решили попробовать сократить этот разрыв — и получилась архитектура, где каждый нейрон ведёт себя как живая клетка, общаясь только с ближайшими соседями. Как это работает В BDH нейроны связаны между собой графом — вершины это нейроны, рёбра — синапсы с весами. Обучение построено по правилу Хебба: «Нейроны, которые активируются вместе, укрепляют связь между собой.» Если два нейрона часто вспыхивают одновременно, их связь усиливается. Это почти как механизм внимания (attention) в трансформерах — но реализованный на биологический лад. Интересно и то, что веса здесь разделены на фиксированные и динамические — что является аналогом долгосрочной и кратковременной памяти. BDH-GPU. Мост между мозгом и трансформерами Чтобы всё это можно было обучать на привычных GPU, Pathway создали тензорную версию BDH-GPU. По сути, это та же архитектура, но выраженная через матрицы и векторы — значит, она совместима с современными библиотеками машинного обучения. Внутри всё знакомо - блоки MLP, ReLU, внимание, активации. Но при этом нейросеть сохраняет биологическую логику поведения. Что получилось Результаты впечатляют: Почему это важно Biological Dragon Hatchling выглядит как один из самых интересных экспериментов последних лет в области архитектуры ИИ. Если Pathway удастся превратить этот прототип в реальный продукт, это может стать шагом к новому поколению нейросетей — тех, что не просто угадывают, а понимают.