| Разработчики: | |
| Дата премьеры системы: | март 2023 г. |
| Отрасли: | Информационные технологии |
| Технологии: | Робототехника, Роботы Промышленные, Роботы Сервисные, Средства разработки приложений |
Содержание |
История
2023: Анонс продукта
6 марта 2023 года исследователи из компании Google и Берлинского технического университета представили открытую мультимодальную языковую модель на основе искусственного интеллекта для обучения автономных роботов.
Проект носит название PaLM-E. Модель объединяет язык и компьютерное зрение для управления роботами. В общей сложности, как отмечается, доступны 562 млрд параметров, что обеспечивает максимальную гибкость. Модель, в частности, позволяет роботу выполнять широкий спектр задач на основе голосовых команд человека без необходимости постоянного переобучения. Иными словами, робот воспринимает директивы на естественном языке, анализирует их и немедленно приступает к работе.
Например, если роботу приказано «принеси мне рисовые чипсы из ящика стола», PaLM-E оперативно создаст план действий на основе команды и своего поля зрения. Затем мобильная роботизированная платформа с автоматизированной рукой полностью автономно выполнит все необходимые операции.
PaLM-E получает данные от камеры робота и анализирует окружение без необходимости предварительного описания сцены. Это означает, что человеку не нужно аннотировать визуальные данные. Более того, PaLM-E может реагировать на изменения окружающей обстановки во время выполнения задачи.Профессиональные дисплеи для медучреждений: как цифровые технологии улучшают качество обслуживания пациентов и работу медперсонала 
PaLM-E базируется на существующей масштабной языковой модели, известной как PaLM (схожа с технологией ChatGPT). Она интегрирована с сенсорной информацией и роботизированным управлением. Система непрерывно наблюдает за своим окружением и кодирует полученные данные в последовательность «векторов», подобно тому, как слова кодируются в «языковые токены». Таким образом, сенсорная информация воспринимается аналогично обработке голосовых команд. Кроме того, PaLM-E может передавать знания и навыки, полученные от предыдущих задач, к новым, что приводит к повышению эффективности.[1]
Примечания
Подрядчики-лидеры по количеству проектов
Promobot (Промобот) (31) Яндекс (Yandex) (15) Cognitive Pilot (Когнитив Роботикс) (14) Сбербанк (11) Nvidia (Нвидиа) (11) Другие (532) Mains Lab (Мэйнс Лаборатория) (2) Яндекс (Yandex) (2) Московский центр инновационных технологий в здравоохранении Медтех (2) Ростехнадзор (Федеральная служба по экологическому технологическому и атомному надзору) (1) Газпромнефть-Развитие (1) Другие (45) Яндекс (Yandex) (2) Яндекс.Облако (Yandex Cloud) (2) Инфосистемы Джет (2) Fora Robotics (Фора Роботикс) (2) Департамент информационных технологий Москвы (ДИТ) (2) Другие (43)Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров
Promobot (Промобот) (10, 32) ABB Group (8, 23) Cognitive Pilot (Когнитив Роботикс) (3, 21) Cognitive Technologies (Когнитивные технологии) (1, 21) Яндекс (Yandex) (2, 11) Другие (612, 148) Эфко ГК (2, 1) Транспорт будущего (2, 1) Бирюч-НТ Инновационный Центр (2, 1) РОББО (ранее ScratchDuino, СкретчДуино) (1, 1) 3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1) Другие (13, 13) Fora Robotics (Фора Роботикс) (1, 2) 3D Bioprinting Solutions (3Д Биопринтинг Солюшенс) (1, 1) Dobot (Shenzhen Yuejiang Technology) (1, 1) Intuitive Surgical (1, 1) НИТУ МИСиС (Национальный исследовательский технологический университет) (1, 1) Другие (5, 5) Яндекс (Yandex) (1, 2) Pudu Robotics (Pudu Technology) (1, 2) Intuitive Surgical (1, 1) Ronavi Robotics, Ронави Роботикс (ранее Ронави логистические системы) (1, 1) Геоскан (Geoscan) (1, 1) Другие (2, 2)Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)
Promobot - 28 (26, 2) Cognitive Agro Pilot Система автоматического вождения - 21 (21, 0) ABB IRB Промышленные роботы - 19 (19, 0) Искусственный интеллект (ИИ, Artificial intelligence, AI) - 16 (0, 16) Da Vinci (робот-хирург) - 11 (11, 0) Другие 106 МИСиС и 3D Bioprinting Solutions: 3D-биопринтер в виде роборуки для применения в операционной in situ - 1 (1, 0) Робот-врач Promobot - 1 (1, 0) Визорлабс Видеопилот (VizorLabs Spotter) - 1 (1, 0) Smart Meal Service: Lunch fastPass Робот-кассир - 1 (1, 0) Искусственный интеллект (ИИ, Artificial intelligence, AI) - 1 (0, 1) Другие 7 For-1 Антропоморфный робот - 2 (2, 0) Яндекс: Складские роботы - 1 (1, 0) Da Vinci (робот-хирург) - 1 (1, 0) Aripix A1 Робот-манипулятор - 1 (1, 0) Dobot CR-серия Коллаборативные роботы - 1 (1, 0) Другие 1 Искусственный интеллект (ИИ, Artificial intelligence, AI) - 2 (0, 2) Pudu CC1 Робот-уборщик - 2 (2, 0) Яндекс.Ровер - 2 (2, 0) Роботы КиберСклад - 1 (1, 0) Ronavi S-серия Роботы для сортировки товаров - 1 (1, 0) Другие -1 Подрядчики-лидеры по количеству проектов
Солар (ранее Ростелеком-Солар) (47) Финансовые Информационные Системы (ФИС, FIS, Финсофт) (15) Форсайт (13) Axiom JDK (БеллСофт) ранее Bellsoft (10) Unlimited Production (Анлимитед Продакшен, eXpress) (10) Другие (399) Солар (ранее Ростелеком-Солар) (10) Форсайт (3) Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (3) КРИТ (KRIT) (2) Cloud.ru (Облачные технологии) ранее SberCloud (2) Другие (13) Солар (ранее Ростелеком-Солар) (6) МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (4) Unlimited Production (Анлимитед Продакшен, eXpress) (4) РЖД-Технологии (3) Robin (Робин) (3) Другие (23)Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров
Солар (ранее Ростелеком-Солар) (2, 49) Microsoft (41, 47) Oracle (49, 26) Hyperledger (Open Ledger Project) (1, 23) IBM (33, 18) Другие (624, 315) Солар (ранее Ростелеком-Солар) (1, 11) Banks Soft Systems, BSS (Бэнкс Софт Системс, БСС) (1, 3) Форсайт (1, 3) Сбербанк (1, 2) Cloud.ru (Облачные технологии) ранее SberCloud (1, 2) Другие (9, 9) Unlimited Production (Анлимитед Продакшен, eXpress) (1, 6) Солар (ранее Ростелеком-Солар) (1, 6) Мобильные ТелеСистемы (МТС) (1, 4) МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 4) Robin (Робин) (1, 3) Другие (14, 24) Unlimited Production (Анлимитед Продакшен, eXpress) (1, 5) Солар (ранее Ростелеком-Солар) (1, 4) Мобильные ТелеСистемы (МТС) (2, 3) МТС Exolve (Межрегиональный ТранзитТелеком, МТТ) (1, 2) T1 Digital (Т1 Диджитал) (1, 1) Другие (15, 15) Форсайт (1, 2) Наносемантика (Nanosemantics Lab) (1, 1) Актив (Актив-софт) (1, 1) РТК ИТ Плюс (1, 1) Другие (0, 0)Распределение базовых систем по количеству проектов, включая партнерские решения (проекты, партнерские проекты)
Solar appScreener (ранее Solar inCode) - 49 (49, 0) Hyperledger Fabric - 23 (23, 0) Windows Azure - 20 (20, 0) FIS Platform - 15 (15, 0) Форсайт. Мобильная платформа (ранее HyperHive) - 14 (14, 0) Другие 320 Solar appScreener (ранее Solar inCode) - 11 (11, 0) Форсайт. Мобильная платформа (ранее HyperHive) - 3 (3, 0) BSS Digital2Go - 3 (3, 0) Cloud ML Space - 2 (2, 0) Tarantool Data Grid - 1 (1, 0) Другие 7 Solar appScreener (ранее Solar inCode) - 6 (6, 0) EXpress Защищенный корпоративный мессенджер - 6 (6, 0) МТС Exolve - 4 (4, 0) РЖД и Робин: Облачная фабрика программных роботов - 3 (3, 0) Форсайт. Мобильная платформа (ранее HyperHive) - 3 (3, 0) Другие 12 EXpress Защищенный корпоративный мессенджер - 5 (5, 0) Solar appScreener (ранее Solar inCode) - 4 (4, 0) МТС Exolve - 2 (2, 0) Eftech.Factory - 1 (1, 0) GitFlic Российский сервис для хранения кода и работы с ним - 1 (1, 0) Другие 11 Форсайт. Мобильная платформа (ранее HyperHive) - 2 (2, 0) Guardant SLK - 1 (1, 0) РТК ИТ Плюс: Акола Конструктор для создания порталов и приложений - 1 (1, 0) Другие 0 
