Black Forest Labs расширяет линейку Flux-3 для робототехники

huggingface:black-forest-labs · оригинал

Материал подготовлен автоматизированной редакционной системой. Факты можно сверить по указанному первоисточнику.

Компания Black Forest Labs обновила на платформе Hugging Face семейство моделей Flux-3, ориентированных на управление роботами. В линейку вошли базовая модель, а также специализированные версии для манипуляторов Franka и SO101.

Появление открытых весов моделей, объединяющих генеративные подходы с задачами робототехники, может упростить разработку систем управления автономными устройствами для исследователей и инженеров.

Компания Black Forest Labs представила обновлённую линейку моделей на платформе Hugging Face, ориентированную на задачи робототехники. В центре внимания находится семейство Flux-3, которое включает базовую архитектуру и две специализированные версии, адаптированные под конкретные типы манипуляторов. Все три модели — flux-3-action-base, flux-3-action-droid и flux-3-action-so101 — классифицируются в пайплайне «robotics» и используют формат хранения весов safetensors.

Согласно метаданным на Hugging Face, базовая модель flux-3-action-base служит фундаментом для остальных версий. Теги указывают на её принадлежность к категории «world-action-model», что подразумевает способность модели не только генерировать изображения или видео, но и предсказывать или планировать действия в физическом мире. На момент публикации количество загрузок базовой модели составляло ноль, однако она получила одну отметку сообщества.

Версия flux-3-action-droid, как следует из тегов, оптимизирована для работы с манипуляторами Franka. Эта модель также является дообученной (fine-tune) на базе основной архитектуры. Статистика показывает 33 загрузки и отсутствие отметок. Наличие тега «droid» в сочетании с упоминанием «franka» позволяет предположить, что модель обучена на данных, специфичных для этой платформы робототехники.

Третья модель в линейке — flux-3-action-so101 — ориентирована на манипуляторы SO101. Она имеет 48 загрузок и одну отметку. В метаданных этой версии указан датасет «lerobot/community_dataset_v3», что свидетельствует об использовании общедоступных данных сообщества LeRobot для обучения или дообучения модели. Это может повысить воспроизводимость результатов для других разработчиков.

Все три модели используют лицензию «other» и размещены в регионе США. Теги «lerobot» и «flux» присутствуют во всех версиях, что указывает на тесную связь с экосистемой LeRobot и технологией Flux. Отсутствие цитат или официальных заявлений от разработчиков ограничивает возможности для глубокого анализа технических деталей, однако структура метаданных даёт чёткое представление о назначении каждого компонента.

Появление таких моделей в открытом доступе на Hugging Face упрощает доступ к инструментам для создания систем «мир-действие» (world-action models). Это направление позволяет роботам лучше понимать окружающую среду и принимать решения на основе визуального ввода. Для исследователей это означает возможность экспериментировать с передовыми архитектурами без необходимости создавать их с нуля.