#обучение_роботов — Public Fediverse posts

Как я продавал двери, 11 лет работал в IT, а потом начал учить сварочного робота наплавлять круги

Привет, я Иван из НИИ Крокодил. Это небольшая команда внутри ИЖ-РЭСТ, завода штампов и пресс-форм. Если коротко, мы пришли на завод из IT и теперь пытаемся понять, где можем быть полезны. Но началось всё, конечно, не с робота. Первую работу я получил лет в пятнадцать: продавал двери. Потом успел поработать в строительной теме, делал сайты, ушел в IT, занимался разработкой, продуктами, клиентами, процессами. В какой-то момент за плечами оказалось 11 лет в IT, куча проектов, привычка всё раскладывать на процессы и странное ощущение, что хочется делать что-то более физическое. Так я оказался на заводе. Мы не пришли учить завод жить. Скорее наоборот: сначала сами учимся понимать, как здесь всё устроено, а потом пробуем аккуратно добавлять то, что хорошо работает в IT. На этом фоне у нас и появилась задача со сварочным роботом. Точнее, робот уже был. Большая промышленная рука стояла в цехе и ждала, когда кто-нибудь превратит её из дорогого оборудования в рабочий инструмент. Задача звучала просто: научить робота наплавлять металл на несерийные детали. Давайте к делу.

https://habr.com/ru/articles/1036410/

#Роботы #обучение_роботов #завод #цифровизация_промышленности #промышленность #личный_опыт

Архитектура PhysicalAgent: как универсальные VLA-агенты могут стать альтернативой дорогому обучению

Когда мы смотрим на очередное видео, где робот ловко перебирает предметы или открывает дверь, кажется, что будущее почти наступило, хотя в реальности даже самым продвинутые модели остаются талантливыми, но узкими специалистами. Их развитие упирается в сложности обучения: стоимость сборов траекторий, закрытые датасеты и портирование навыков между разными моделями. Я Артем Лыков, ведущий RnD-разработчик в МТС Web Services. А параллельно — аспирант в Лаборатории интеллектуальной космической робототехники Сколтеха (руководитель Дмитрий Тетерюков), где лидирую направление когнитивной робототехники. Вместе с коллегами по лаборатории мы описали способ обойтись без многомесячных записей движений и сложных симуляций, опираясь на уже существующие VLA-модели и модульный агентный подход, позволяющий генерировать будущие действия робота прямо из картинки и текста, проверять их, править, повторять и в итоге добиваться результата, сравнимого со специализированными решениями. В этом материале я разберу архитектуру PhysicalAgent, покажу, как мы реализовали цикл Perceive → Plan → Reason → Act для роботов, и расскажу, чем нам помогли открытые видеомодели и как этот подход помогает переносить навыки между разными платформами.

https://habr.com/ru/companies/ru_mts/articles/979682/

#когнитивная_робототехника #VLAмодели #PhysicalAgent #обучение_роботов #AIагенты #генерация_видео #модульная_архитектура #сбор_данных #итеративное_планирование

[Перевод] Ваш хирург обучался на видосиках

Пожалуй, это худшее, что может услышать пациент перед операцией. Но, как говорится, что позволено Юпитеру – не позволено быку. И если люди обязаны учиться со скальпелями в руках, лично разбирая тонкости хирургии, то нейросеть и роботизированные конечности обучаются на просмотре видео. И весьма успешно.

https://habr.com/ru/articles/858214/

#da_vinci #нейросети #обучение_роботов #хирургия #имитационное_обучение #автоматизированная_хирургия #кинематика #нейросети_в_медицине #медицина #операция

[Перевод] Ваш хирург обучался на видосиках

Пожалуй, это худшее, что может услышать пациент перед операцией. Но, как говорится, что позволено Юпитеру – не позволено быку. И если люди обязаны учиться со скальпелями в руках, лично разбирая тонкости хирургии, то нейросеть и роботизированные конечности обучаются на просмотре видео. И весьма успешно.

https://habr.com/ru/articles/858214/

#da_vinci #нейросети #обучение_роботов #хирургия #имитационное_обучение #автоматизированная_хирургия #кинематика #нейросети_в_медицине #медицина #операция

[Перевод] Ваш хирург обучался на видосиках

Пожалуй, это худшее, что может услышать пациент перед операцией. Но, как говорится, что позволено Юпитеру – не позволено быку. И если люди обязаны учиться со скальпелями в руках, лично разбирая тонкости хирургии, то нейросеть и роботизированные конечности обучаются на просмотре видео. И весьма успешно.

https://habr.com/ru/articles/858214/

#da_vinci #нейросети #обучение_роботов #хирургия #имитационное_обучение #автоматизированная_хирургия #кинематика #нейросети_в_медицине #медицина #операция

[Перевод] Ваш хирург обучался на видосиках

Пожалуй, это худшее, что может услышать пациент перед операцией. Но, как говорится, что позволено Юпитеру – не позволено быку. И если люди обязаны учиться со скальпелями в руках, лично разбирая тонкости хирургии, то нейросеть и роботизированные конечности обучаются на просмотре видео. И весьма успешно.

https://habr.com/ru/articles/858214/

#da_vinci #нейросети #обучение_роботов #хирургия #имитационное_обучение #автоматизированная_хирургия #кинематика #нейросети_в_медицине #медицина #операция

Голопалуба: реализация технологии из сериала «Звездный путь»

Современный мир сложно представить без технологий, которые его наполняют. Некоторые из них малозаметны, тогда как другие приковывают к себе внимание буквально всех и каждого. Одной из таких технологий является искусственный интеллект. Данное направление объединяет в себе множество отдельных, но взаимосвязанных ветвей, одной из которых является генеративный ИИ. Основная функция такого ИИ заключается в генерации текстов, изображений или других медиаданных в ответ на запрос человека. Говоря о таком взаимоотношении между человеком и машиной, первым на ум приходит крайне популярный ChatGPT. Но его возможности хоть и велики, но не безграничны. Ученые из Школы инженерии и прикладных наук Пенсильванского университета (США) разработали систему, способную в ответ на текстовый запрос пользователя генерировать трехмерную виртуальную среду, как это делала голопалуба в сериале «Звездный путь: Следующее поколение». Как работает данная система, насколько обширны ее возможности, и где она может быть полезна? Ответы на эти вопросы мы найдем в докладе ученых.

https://habr.com/ru/companies/ua-hosting/articles/808069/

#3D #искусственный_интеллект #машинное_обучение #виртуальная_реальность #обучение_роботов #голопалуба #стар_трек #ChatGPT #воплощенный_ИИ