Ученые из Tinkoff Research открыли алгоритм для увеличения скорости обучения искусственного интеллекта в 20 раз. Ученые из лаборатории исследований искусственного интеллекта (ИИ) Tinkoff Research открыли новый алгоритм для обучения ИИ. Новый метод, названный SAC-RND[1], обучает роботов в 20 раз быстрее и на 10% качественнее всех существующих аналогов — такие результаты показало тестирование метода на робототехнических симуляторах. Обучение искусственного интеллекта — процесс, требующий больших ресурсов: прежде всего, вычислительных мощностей, финансовых затрат и времени. Его оптимизация позволит ускорить развитие всех областей, в которых используются ИИ-агенты, например робототехники. SAC-RND может повысить безопасность беспилотных автомобилей, упростить логистические цепочки, ускорить доставку и работу складов, оптимизировать процессы горения на энергетических объектах и сократить выбросы вредных веществ в окружающую среду. Открытие не только улучшает работу узкоспециализированных роботов, но и приближает ученых к созданию универсального робота, способного в одиночку выполнять любые задачи. Результаты исследования были признаны мировым научным сообществом и представлены на Международной конференции по машинному обучению (ICML)[2], которая в этом году прошла в 40-й раз в Гонолулу, Гавайи, с 23 по 29 июля. Это одна из трех крупнейших конференций в мире, оказывающих наибольшее влияние на исследования в сфере машинного обучения и искусственного интеллекта. Суть открытия Сегодня одно из наиболее перспективных видов обучения ИИ — обучение с подкреплением (RL)[3], вдохновленное процессами человеческого обучения и отличающееся высоким уровнем эффективности. RL позволяет роботам учиться методом проб и ошибок, адаптироваться в сложных средах и изменять поведение на ходу. Обучение с подкреплением может использоваться во всех сферах: от регулирования пробок на дорогах до рекомендаций в социальных сетях, которые предлагают пользователю контент, основанный на его предпочтениях. Ранее считалось, что использование случайных нейросетей (алгоритмов для последовательного и автоматического принятия решений, RND) не подходит для офлайн-обучения роботов с подкреплением. Изучив прежние работы, связанные с использованием RND, исследователи из Tinkoff Research обнаружили недостатки в проведенных экспериментах и полученных выводах. При использовании метода RND участвуют две нейросети — случайная и основная, которая пытается предсказать поведение первой. Важное свойство каждой нейросети — ее глубина: количество слоев, из которых она состоит. У основной сети не должно быть меньше слоев, чем у случайной, иначе она не сможет смоделировать ее поведение, что приведет к нестабильности или невозможности обучения. В Tinkoff Research обнаружили, что в предыдущих работах на тему использования случайных нейросетей в обучении с подкреплением размер случайной сети составлял четыре слоя, а размер основной — два. Использование неправильных размеров сетей привело научное сообщество к ошибочному выводу, что метод RND не умеет дискриминировать (классифицировать) данные — отличать действия, которые были в датасете, от тех, что там не было. Исследователи из Tinkoff Research исправили глубины сетей, сделав их эквивалентными, и быстро обнаружили, что при таких настройках методу удается различать данные. Следующим шагом стала оптимизация метода. Роботы научились приходить к эффективным решениям благодаря использованию механизма слияния, основанного на модуляции сигналов и их линейном отображении. В предыдущих работах на тему RND сигналы не подвергались дополнительной обработке. Метод SAC-RND был протестирован на робототехнических симуляторах и показал лучшие результаты при меньшем количестве потребляемых ресурсов и времени. Открытие поможет ускорить исследования в области робототехники и обучения с подкреплением, поскольку оно снижает время получения устойчивого результата в 20 раз и является важным шагом на пути к созданию универсального робота. Лаборатория исследований ИИ Tinkoff Research Tinkoff Research — это одна из немногих российских исследовательских групп, которая занимается научными исследованиями внутри компании, а не на базе некоммерческой организации. Ученые из Tinkoff Research исследуют наиболее перспективные области ИИ: обработку естественного языка (NLP), компьютерное зрение (CV), обучение с подкреплением (RL) и рекомендательные системы (RecSys). По результатам экспериментов они пишут научные статьи для наиболее авторитетных научных конференций: NeurIPS, ICML, ACL, CVPR и других. За два года существования команды более 13 статей были приняты на крупнейшие конференции и воркшопы в области ИИ. Научные работы Tinkoff Research цитируются учеными из университетов Беркли и Стэнфорда, а также исследовательского проекта Google по изучению искусственного интеллекта Google DeepMind. Визуализация принятия решения роботами, обученными с помощью разных алгоритмов. 4 рисунка сверху — предыдущие методы, основанные на RND, 4 рисунка снизу — метод SAC-RND. Стрелки на изображении должны вести робота в одну точку — они указывают направление к правильному действию. Метод Tinkoff Research во всех случаях стабильно приводит робота в нужную точку....
Сообщает android-robot.com
Поделиться новостью:
Топ новости часа
Топ новости часа- +278,83% (17400 пунктов) за 12 мес по паре GBP/USD — Тест стратегии форекс «ChaSyBi»...
- Чемпионат России. «Спартак» в гостях у «Оренбурга», «Динамо» против «Урала», ЦСКА сыграет с «Зенитом» в воскресенье...
- AMD рассказала о видеокартах следующего поколения. В интервью были затронуты в основном вопросы, связанные с ИИ в RDNA 4...
- Иск против «Барсы», допуск российских фехтовальщиков, задержан метатель банана, грант Навки, баттл Смородской и Заремы и другие новости...
- Hyundai Motor câștigă 2016 Kelley Blue Book Awards ca cea mai bună marcă de costuri de proprietate în ultimii 5 ani...
- Выставка мобильных технологий MWC продемонстрирует новые телефоны, искусственный интеллект и метавселенную...
22:00, 07 Апр Замедление искусственного интеллекта не поможет, считает профессор Развитие искусственного интеллекта (ИИ) выходит из-под контроля, по мнению примерно 3000 человек, подписавших открытое письмо, опубликованное лидерами бизнеса и учеными. Подписанты призывают к временному прекращению обучения особо высокопроизводител...
13:00, 23 Июн The Beatles написали песню с помощью искусственного интеллекта Один из основателей The Beatles Пол Маккартни рассказал, что искусственный интеллект дописал последнюю песню группы The Beatles. Об этом сообщает The Guardian. Музыкант рассказал, что использовал новую технологию, чтобы "вытащить" голос покойного Дж...
04:00, 15 Май Meta представила новую модель искусственного интеллекта Компания Meta Platforms представила новую модель искусственного интеллекта с открытым кодом под названием ImageBind, сообщает издание Verge. Новая модель ИИ связывает несколько форм данных, таких как аудио, текст, визуальные данные, данные о глубине...
08:00, 05 Сен Google привлекает компании к использованию облачного искусственного интеллекта Google заявила, что все глубже внедряет искусственный интеллект (ИИ) в свои облачные предложения, поскольку соперничает за бизнес фирм, стремящихся извлечь выгоду из этой технологии. Интернет-гигант представил новые функции на базе искусственного ин...
21:00, 21 Сен Как кибермошенники пытаются заставить инструменты искусственного интеллекта приносить прибыль Сторонники искусственного интеллекта говорят, что его потенциал безграничен. Но кибермошенники также могут использовать это в своих целях. Аналитики объяснили, как эта технология может повысить риск онлайн-преступлений. Фишеры электронных писем Чат-...
15:00, 02 Мар Представлена система искусственного интеллекта, предлагающая эмоциональную поддержку через чат Быстрое развитие моделей обработки естественного языка (NLP) и больших языковых моделей (LLM) позволило разработать новые диалоговые агенты для конкретного использования, предназначенные для ответа на определенные типы запросов. Они варьируются от а...
04:00, 25 Июл В Москве при помощи искусственного интеллекта с начала года проанализированы 100 тысяч маммограмм С 2023 года Москва впервые в стране ввела специальный тариф в рамках обязательного медицинского страхования на анализ рентгеновских снимков с помощью сервисов искусственного интеллекта. Первым в ОМС включили анализ маммографических исследований. За ...
12:00, 17 Апр Представлен Taichi: крупномасштабный дифракционный гибридный фотонный чипсет искусственного интеллекта Объединенная команда инженеров из Университета Цинхуа и Пекинского национального исследовательского центра информационных наук и технологий, расположенных в Китае, разработала крупномасштабный дифракционный гибридный фотонный чипсет искусственного и...
07:00, 09 Окт Подход искусственного интеллекта позволил создать «спортивно умную» роботизированную собаку Когда-нибудь, когда случаются землетрясения, пожары и наводнения, первыми, кто отреагирует, станут стаи собак-роботов-спасателей, спешащих на помощь застрявшим душам. Эти четвероногие животные, работающие на батарейках, будут использовать компьютерн...
11:00, 19 Окт Модели искусственного интеллекта определяют биоразнообразие по звукам животных в тропических лесах Тропические леса являются одними из важнейших мест обитания на нашей планете. Они характеризуются чрезвычайно высоким видовым разнообразием и играют выдающуюся роль в глобальном углеродном цикле и мировом климате. Однако многие районы тропических ле...
08:00, 22 Ноя Система искусственного интеллекта самоорганизуется для развития особенностей мозга сложных организмов Ученые из Кембриджа показали, что наложение физических ограничений на искусственно интеллектуальную систему – почти так же, как человеческий мозг должен развиваться и действовать в рамках физических и биологических ограничений – позволяет ему развив...
12:00, 15 Фев Мультимодальная модель искусственного интеллекта может помочь в персонализированном лечении туберкулеза Команда исследователей Мичиганского университета разработала мультимодальную модель искусственного интеллекта для прогнозирования результатов лечения больных туберкулезом (ТБ). Их анализ данных о пациентах по всему миру может привести к персонализац...
11:00, 05 Апр DeepMind разрабатывает SAFE, приложение на основе искусственного интеллекта, которое может проверять факты Команда специалистов по искусственному интеллекту из Google DeepMind разработала систему на основе искусственного интеллекта под названием SAFE, которую можно использовать для проверки фактов результатов LLM, таких как ChatGPT. Группа опубликовала д...
12:00, 20 Май Новое программное обеспечение на основе искусственного интеллекта позволяет быстро и надежно визуализировать белки в клетках Электронная криотомография (крио-ЭТ) становится мощной техникой для получения подробных трехмерных изображений клеточной среды и замкнутых биомолекул. Однако одной из задач методологии является идентификация белковых молекул на изображениях для даль...
21:00, 18 Ноя Система искусственного интеллекта «Student of Games» компании Deep Mind может побеждать людей в различных играх Команда исследователей искусственного интеллекта из EquiLibre Technologies, Sony AI, Amii и Midjourney, работающая с проектом Google DeepMind, разработала систему искусственного интеллекта под названием Student of Games (SoG), которая способна как п...
13:00, 07 Окт Разрабатывают решения искусственного интеллекта для включения арабского языка и его диалектов в обработку естественного языка Группа исследователей и инженеров из Университета Шарджи разработала систему глубокого обучения для использования арабского языка и его разновидностей в приложениях, связанных с обработкой естественного языка (НЛП), междисциплинарной областью лингви...
18:00, 04 Апр Анализ EUR/CHF: путь к паритету открыт Пара EUR/CHF развернула среднесрочный нисходящий тренд и демонстрирует сильное ралли. Есть несколько технических препятствий на пути пары к паритету. EUR/CHF перепродан согласно RSI, что указывает на риск отката. Пара EUR/CHF торгуется на уровне 0,9...
11:00, 03 Июн «МТС» создал тариф за 300 руб/мес с интернетом на скорости в 1 Гбит/с Телекоммуникационная компания «МТС» не перестаёт удивлять, и за копейки готова предоставить пользователям высокоскоростной доступ в интернет. Компания акцентировала внимание на том, что создала тариф, где мобильный интернет будет раздаваться на скор...
03:00, 03 Апр Совершенствуется алгоритм, основанный на оптимизации автономной парковки автомобиля Транспортные средства, которые могут управлять сами, были давней целью как в исследованиях в области робототехники, так и в автомобильной промышленности. Хотя различные компании инвестировали в эти автомобили и тестировали их, они до сих пор использ...
19:00, 20 Авг 20 приемов увеличения просмотров и участников Ютуб Вы поняли, что видео - самая эффективная форма контента, и знаете, что YouTube - это поисковая система, которая позволит вам совершить прорыв в цифровом маркетинге. Но как увеличить количество просмотров на YouTube? Какие бы цели вы ни преследовали,...
21:00, 08 Окт Алгоритм HVAC может обеспечить тепловой комфорт для жителей здания с меньшим выбросом углекислого газа Поскольку организации работают над сокращением энергопотребления и связанных с этим выбросов углекислого газа, одной из областей, которую еще предстоит оптимизировать, является отопление и охлаждение помещений. Фактически, HVAC, что означает отоплен...
05:00, 26 Мар Названы 4 способа для увеличения времени работы смартфона без подзарядки Удалив неиспользуемые приложения, выключив NFS, GPSГлонасс, bluetooth и wi-fi можно сберечь до 30% батареи, уверяет Арсений Щельцин. Гендиректором АНО «Цифровые платформы» Арсением Щельциным названы 4 способа для увеличения времени работ...
19:00, 07 Апр Инженеры придумали способ увеличения емкости жестких дисков Инженеры придумали способ увеличения емкости жестких дисков. Они использовали трехмерную магнитную запись, которая позволяет хранить больше информации на меньшем количестве дисков. Обычно центры обработки данных хранят большие объемы информации на ж...
09:00, 20 Июл Ученые создали "плащ" для увеличения запаса хода электрокаров Исследователи из Шанхайского университета Цзяо Тонг создали тепловой "плащ" для электромобилей. Он поможет повысить запас хода таких транспортных средств. Об этом пишет Daily Mail. Как известно, запас хода большинство автопроизводителей увеличивают ...
09:34, 19 Мар Важность английского языка для обучения Английский — один из самых распространенных языков в мире. Он считается международным языком бизнеса, науки и технологий. В результате английский становится все более важным для студентов, которые хотят добиться успеха в своей академической и профес...
08:38, 17 Июл Преимущества обучения вождению категории В Обучение вождению категории В - это важный этап в жизни многих людей. Получение водительских навыков и прав управления автомобилем вместе с https://avtoshkola-kolomna.ru/ открывает новые возможности и преимущества. В этой статье мы рассмотрим п...
15:00, 19 Мар Искусственный интеллект и человечество выигрывают от «спирали» взаимного обучения Искусственный интеллект и человечество выигрывают от «спирали» взаимного обучения, говорит сторонник «когнитивной физики». Дейи Ли из Китайской ассоциации искусственного интеллекта считает, что отношения людей и машин взаимовыгодны. Его статья о маш...
03:00, 11 Фев Разработан фреймворк машинного обучения, который кодирует изображения, как сетчатка Исследователи EPFL разработали подход машинного обучения для сжатия данных изображений с большей точностью, чем методы вычислений без обучения, с применением для имплантатов сетчатки и других сенсорных протезов. Основной проблемой разработки более с...
04:00, 12 Фев Представлена система регулировки освещения в помещении на основе глубокого обучения Интеллектуальная система регулировки освещения в помещении на основе глубокого обучения. Новая интеллектуальная система регулирования интенсивности внутреннего освещения, основанная на глубоком обучении, описана в International Journal of Industrial...
18:00, 23 Фев Методы машинного обучения идентифицируют тысячи новых космических объектов Ученые из Института фундаментальных исследований Тата (TIFR) в Мумбаи, Индия, и Индийского института космических наук и технологий (IIST) с помощью методов машинного обучения определили природу тысяч новых космических объектов в рентгеновском диапаз...
06:00, 23 Мар Новая методика LiGO ускоряет обучение больших моделей машинного обучения Не секрет, что ChatGPT от OpenAI обладает невероятными возможностями — например, чат-бот может писать стихи, напоминающие шекспировские сонеты, или отлаживать код для компьютерной программы. Эти возможности стали возможными благодаря массивной модел...
18:00, 11 Авг Разрабатывается более быстрый и дешевый способ обучения больших языковых моделей Команда из Стэнфорда разработала Sophia — новый способ оптимизации предварительной подготовки больших языковых моделей, который в два раза быстрее существующих подходов. ChatGPT и другие приложения, основанные на больших языковых моделях (LLM), полу...
01:00, 10 Апр Разрабатывают искусственного патологоанатома Группа ученых из Института наук о свете Макса Планка (MPL) в Эрлангене разработала новый, быстрый и точный метод анализа клеток в образцах тканей раковых больных без участия квалифицированного патологоанатома. Они используют искусственный интеллект ...
18:00, 21 Июл Представлен самый мощный в мире суперкомпьютер для обучения ИИ — Condor Galaxy 1. В его основе всего 64 микросхемы, но каждая размером с iPad Pro Пока в списке самых производительных суперкомпьютеров уже год с огромным отрывом лидирует единственная система с производительностью свыше 1 эксафлопса, а СМИ в основном обсуждают две строящиеся сейчас системы с производительностью свыше 2 эксафлопс...