Роботы NVIDIA: от вращения ручки до диагностики заболеваний

NVIDIA Research представила Eureka - искусственный интеллект на базе GPT-4, который обучает роботов выполнению различных задач с помощью алгоритмов вознаграждения. Одним из наиболее заметных достижений Eureka стало обучение роботической руке трюкам с вращением ручки на уровне человека, и, как показано в видео на YouTube, даже лучше многих из нас.

Eureka также обучила четвероногих роботов, роботов с ловкими руками, роботов-помощников и других роботов выполнять почти 30 различных задач, включая открывание ящиков, использование ножниц, ловлю мячей. По данным NVIDIA Research, программы вознаграждения на основе метода проб и ошибок Eureka на 80% эффективнее программ, написанных экспертами-людьми. Это привело к улучшению производительности роботов более чем на 50%. Eureka также самооценивается на основе результатов обучения, корректируя функции вознаграждения по мере необходимости.

NVIDIA Research опубликовала библиотеку алгоритмов Eureka, приглашая всех желающих протестировать их на платформе NVIDIA Isaac Gym , предназначенной для исследований в области обучения с подкреплением.

Идея обучения роботов другими роботами становится всё более популярной. В мае 2023 года была опубликована статья в журнале Transactions on Machine Learning Research, в которой представлена новая система SKILL (Shared Knowledge Lifelong Learning). Система позволяет ИИ осваивать 102 различных навыка, включая диагностику заболеваний по рентгеновским снимкам грудной клетки и определение видов цветов.

Искусственные интеллекты обменивались своими знаниями, действуя как учителя, и смогли освоить каждый из 102 навыков. Исследователи из таких учебных заведений, как MIT и Университет Бристоля, также добились успеха в использовании ИИ для обучения роботов манипуляциям с объектами.