Совместное проектирование, то есть одновременное проектирование программного и аппаратного обеспечения, является одним из способов удовлетворения потребностей в вычислительной мощности современных приложений искусственного интеллекта. Компиляторы, переводящие инструкции из одного представления в другое, являются ключевой частью головоломки. Группа исследователей из Китайской академии наук обобщила существующие технологии компиляторов в области совместного проектирования глубокого обучения и предложила собственную структуру Buddy Compiler. Обзорная статья группы была опубликована в журнале Intelligent Computing. Хотя другие обобщали оптимизации, аппаратные архитектуры, подходы к совместному проектированию и методы компиляции, никто не обсуждал системы глубокого обучения с точки зрения технологий компиляции для совместного проектирования. Исследователи изучали глубокое обучение с этой точки зрения, поскольку считают, что «технологии компиляции могут предоставить больше возможностей для совместного проектирования и, таким образом, могут лучше соответствовать требованиям производительности и мощности систем глубокого обучения». Обзор охватывает пять тем: История глубокого обучения и совместного проектирования Глубокое обучение и совместное проектирование прямо сейчас Технологии компиляции для совместного проектирования глубокого обучения Текущие проблемы и будущие тенденции Компилятор друзей История глубокого обучения и совместного проектирования С 1950-х годов нейронные сети претерпели множество взлетов и падений, что привело к сегодняшнему взрывному росту приложений и исследований глубокого обучения. Совместное проектирование началось в 1990-х годах и с тех пор было принято в различных областях, переходя от ручной работы к автоматизированному проектированию и в конечном итоге становясь сложным процессом, включающим моделирование, симуляцию, оптимизацию, синтез и тестирование. С 2020 года сетевая модель, называемая преобразователем, пользуется большим успехом: ChatGPT — это чат-бот, созданный с использованием «генеративного предварительно обученного преобразователя». Текущие приложения ИИ, такие как ChatGPT, сталкиваются с новым узким местом в производительности, которое снова потребует совместного проектирования аппаратного и программного обеспечения. Глубокое обучение и совместное проектирование прямо сейчас Прорыв в области глубокого обучения связан с использованием многочисленных слоев и огромного количества параметров, что значительно увеличивает вычислительные требования для обучения и логического вывода. В результате, полагаясь исключительно на оптимизацию на уровне программного обеспечения, становится сложно достичь разумного времени выполнения. Чтобы решить эту проблему, как промышленность, так и научные круги обратились к специализированным аппаратным решениям, стремясь достичь требуемой производительности за счет совместных усилий аппаратного и программного обеспечения, известных как совместное проектирование аппаратного и программного обеспечения. Недавно появилась комплексная система, включающая в себя фреймворки глубокого обучения, высокопроизводительные библиотеки, предметно-ориентированные компиляторы, модели программирования, аппаратные инструменты и методы совместного проектирования. Эти компоненты в совокупности способствуют повышению эффективности и действенности систем глубокого обучения. Технологии компиляции для совместного проектирования глубокого обучения Есть две популярные экосистемы, которые используются для создания компиляторов для глубокого обучения: тензорная виртуальная машина, известная как TVM, и многоуровневое промежуточное представление, известное как MLIR. Эти экосистемы используют разные стратегии: TVM выступает в качестве сквозного компилятора глубокого обучения, а MLIR выступает в качестве инфраструктуры компилятора. Между тем, в области аппаратных архитектур, адаптированных для рабочих нагрузок глубокого обучения, существует два основных типа: потоковая архитектура и архитектура вычислительного движка. Инструментальные потоки проектирования аппаратного обеспечения, связанные с этими архитектурами, также включают новые методы компиляции для продвижения достижений и инноваций. Сочетание компиляторов глубокого обучения и аппаратных методов компиляции открывает новые возможности для совместного проектирования глубокого обучения. Текущие проблемы и будущие тенденции Поскольку требования к производительности растут слишком быстро, чтобы разработка процессоров могла угнаться за ними, эффективная совместная разработка имеет решающее значение. Проблема с совместным проектированием заключается в том, что нет единого способа сделать это, нет единой структуры совместного проектирования или абстракции. Если требуется несколько уровней абстракции, эффективность снижается. Настройка компиляторов для конкретных доменов требует больших усилий. Формируются объединяющие экосистемы, но основные причины фрагментации остаются. Решением этих проблем могла бы стать модульная расширяемая унифицирующая структура. Компилятор друзей Участники проекта Buddy Compiler «привержены созданию масштабируемой и гибкой экосистемы совместного проектирования аппаратного и программного обеспечения». Модули экосистемы будут включать структуру компилятора, платформу компилятора как услуги, платформу эталонного тестирования, структуру предметно-ориентированной архитектуры и модуль совместного проектирования. Последние два модуля все еще находятся в разработке. Авторы прогнозируют дальнейшее развитие экосистем компиляции, которые помогут объединить работу, выполняемую в быстро развивающейся и несколько фрагментированной области глубокого обучения....
Сообщает android-robot.com
Новость из рубрики: Интернет, Игры
Поделиться новостью:
Топ новости часа
Топ новости часа- +278,83% (17400 пунктов) за 12 мес по паре GBP/USD — Тест стратегии форекс «ChaSyBi»...
- Чемпионат России. «Спартак» в гостях у «Оренбурга», «Динамо» против «Урала», ЦСКА сыграет с «Зенитом» в воскресенье...
- AMD рассказала о видеокартах следующего поколения. В интервью были затронуты в основном вопросы, связанные с ИИ в RDNA 4...
- Иск против «Барсы», допуск российских фехтовальщиков, задержан метатель банана, грант Навки, баттл Смородской и Заремы и другие новости...
- Hyundai Motor câștigă 2016 Kelley Blue Book Awards ca cea mai bună marcă de costuri de proprietate în ultimii 5 ani...
- Выставка мобильных технологий MWC продемонстрирует новые телефоны, искусственный интеллект и метавселенную...
02:00, 03 Апр Искусственный интеллект способен проявлять эмпатию Все более сложные системы искусственного интеллекта способны проявлять эмпатию, но их использование в психиатрической помощи поднимает этические вопросы. В мире, где технологии все больше переплетаются с нашими чувствами, искусственный интеллект эмо...
16:00, 01 Май Искусственный интеллект научился выявлять рак на ранней стадии Ученые фонда Royal Marsden NHS, Института исследования рака в Лондоне и Имперского колледжа Лондона разработали модель искусственного интеллекта, которая может диагностировать онкологические заболевания на ранних стадиях его развития, сообщает The G...
02:00, 05 Июн Искусственный интеллект представляет собой риск «вымирания» Мировые лидеры должны работать над снижением «риска исчезновения» технологий искусственного интеллекта, предупредила во вторник группа руководителей отрасли и экспертов. В однострочном заявлении, подписанном десятками специалистов, в том числе Сэмом...
14:00, 17 Янв Искусственный интеллект поможет предотвратить незаконное строительство Беспилотные летательные аппараты, дроны, уже не являются сюрпризом для прохожих во время мероприятий или солнечным днем в центре города. Дроны, которые уже давно используются в боевых действиях, теперь популярны не только у профессиональных и люби...
08:00, 17 Дек Найдена проблема, сбивающая с толку современный искусственный интеллект Представьте, что вы просматриваете фотографии на своем телефоне и натыкаетесь на изображение, которое сначала не можете распознать. Похоже на что-то нечеткое на диване; может это быть подушка или пальто? Через пару секунд щелкает — конечно! Этот пух...
12:00, 31 Окт Искусственный интеллект показал, что мы не настолько индивидуальны, как нам хотелось бы думать Ученый-компьютерщик из Астонского университета использовал искусственный интеллект (ИИ), чтобы показать, что мы не настолько индивидуальны, как нам хотелось бы думать. В конце 1960-х известный психолог Стэнли Милгрэм продемонстрировал, что если чело...
15:00, 19 Мар Искусственный интеллект и человечество выигрывают от «спирали» взаимного обучения Искусственный интеллект и человечество выигрывают от «спирали» взаимного обучения, говорит сторонник «когнитивной физики». Дейи Ли из Китайской ассоциации искусственного интеллекта считает, что отношения людей и машин взаимовыгодны. Его статья о маш...
05:00, 10 Май Искусственный интеллект улучшил качество изображения черной дыры Искусственный интеллект помог ученым улучшить фото черной дыры в галактике Messier 87 (M87). Об этом сообщает Space. Изображение черной дыры M87*, расположенной в 55 миллионах световых лет от Земли, было сделано телескопом Event Horizon (EHT) в 2019...
22:00, 25 Сен Программисты из России запустили искусственный интеллект, предсказывающий успешность заголовка Новая разработка российских программистов позволит оценить привлекательность заголовков на русском языке с помощью искусственного интеллекта. Сервис называется Турбочек. Его алгоритмы за несколько секунд просчитывают процент пользователей, которые к...
07:00, 05 Апр Сбербанк запустил сервис постановки диагноза через искусственный интеллект Сбербанк запустил в оборот сервис, который способен определить состояние человека по представленным симптомам. За работу докторов берется искусственный интеллект. Цифровая медицина – это достаточно перспективное направление, но специалисты видят бол...
20:00, 06 Окт Искусственный интеллект сломал поддержку видеокарт AMD Radeon в Windows 11. Как устранить проблему? Свежее обновление Windows 11 (KB5030310 или Moment) вызывает проблемы с драйверами видеокарт AMD Radeon. Из-за этого графика в играх зависает, а звук, который выводится через HDMI, прерывается или исчезает. Опытным путём было установлено, что пробле...
19:00, 26 Апр Adobe использует искусственный интеллект, чтобы сделать размытое видео четким Команда инженеров по видео и искусственному интеллекту из Adobe Research разработала приложение искусственного интеллекта под названием VideoGigaGAN, которое может принимать размытое видео и улучшать его, делая продукт более совершенным. Команда опи...
04:00, 27 Фев Выставка мобильных технологий MWC продемонстрирует новые телефоны, искусственный интеллект и метавселенную Новейшие смартфоны со складным экраном, иммерсивные метавселенные, аватары чат-ботов на базе искусственного интеллекта и другие привлекательные технологии призваны удивить посетителей ежегодной выставки беспроводной связи MWC, которая начинается в п...
00:00, 04 Май Искусственный интеллект начал читать мысли, правда пока только на небольшом расстоянии Искусственный интеллект научился читать мысли людей, выполняя анализ активности головного мозга. Для этого используются данные магнитно-резонансной томографии (МРТ). Метод был разработан специалистами Техасского университета. Ученые утверждают, что ...
17:00, 12 Апр Система использует искусственный интеллект для обнаружения диких животных на дорогах и предотвращения аварий Точно так же, как водители в Бразилии могут быть предупреждены о пробках впереди или о припаркованном на обочине транспортном средстве, вскоре на их смартфоне или на экране компьютера автомобиля могут появиться уведомления, предупреждающие их в режи...
03:00, 24 Май Build 2023: Microsoft добавляет искусственный интеллект в Microsoft Store для Windows 11 Microsoft интегрирует искусственный интеллект в магазин Microsoft Store, чтобы пользователям было проще найти приложения, использующие ИИ. В частности, компания добавит раздел «AI Hub», где будут собраны приложения с искусственным интеллектом от сто...
13:00, 09 Мар Подход исследователей может защитить квантовые компьютеры от атак Ожидается, что квантовые компьютеры, которые могут решать несколько сложных задач экспоненциально быстрее, чем классические компьютеры, улучшат приложения искусственного интеллекта (ИИ), развернутые в таких устройствах, как автономные транспортные с...
02:00, 06 Мар Настоящему ИИ понадобится биология: компьютеры, работающие на клетках человеческого мозга Пришло время создать компьютер нового типа, говорят исследователи из Университета Джона Хопкинса вместе с доктором Бреттом Каганом, главным научным сотрудником Cortical Labs в Мельбурне, который недавно руководил разработкой проекта DishBrain, в кот...
13:00, 10 Ноя Принят новый перечень приложений, обязательных для предустановки на смартфоны, компьютеры и телевизоры Правительство РФ утвердило обновлённый перечень приложений, обязательных для предустановки на некоторые виды электронной продукции, продающейся в стране. Как и прежде он поделен на три раздела: смартфоны и планшеты; компьютеры и ноутбуки; умные теле...
13:00, 09 Июн 12-летняя дочь Пинк спела вместе с ней на концерте Вслед за Бейонсе, выступившей на концерте вместе с дочерью Блю Айви, на сцену дочь вывела Пинк. 12-летняя Уиллоу Сейдж Харт исполнила с матерью песню Cover Me in Sunshine во время первого шоу тура Pink Summer Carnival 2023, который стартовал в Велик...
11:00, 29 Мар Заработал умный сервис путешествий «Wildberries.Вместе» Команда крупнейшей российской торговой онлайн-площадки Wildberries поделилась интересной новостью. Теперь Wildberries широко занимается не только продажей товаров, но и туристическими сервисами. Сгенерировано нейросетью Midjourney Команда запустила ...
13:00, 11 Окт Влюблённым парам полезнее спать вместе, чем по отдельности Совместный сон партнёров более крепкий и имеет меньше нарушений фазы быстрого сна, сообщают учёные из Германии. Паттерны сна и движения партнёров во время сна могут синхронизироваться; Фото: depositphotos Исследователи из Центра целостной психиатрии...
22:00, 17 Дек Kalush вместе с репером Skofka представили мощную совместную песню Фронтмен украинской группы Kalush Олег Псюк в дуэте репером Skofka представили новую композицию Батьківщина. Она обнародована на YouTube, в пятницу, 16 декабря. По словам музыкантов, песня написана душой и сердцем, болью за Украину и печалью за умер...
14:00, 02 Июл Принц Уильям вместе с принцем Джорджем посетил матч по крикету Принц Уильям вместе со своим старшим сыном, 9-летним принцем Джорджем, посетил проходивший в Лондоне матч по крикету между сборными Англии и Австралии.Принц Уильям и принц Джордж/Gettyimages.ruВместе с членами королевской семьи за противостоянием ко...
07:00, 02 Дек Lenovo вместе с фондом Repair Together собрали средства на восстановление поврежденных домов Компания Lenovo в рамках благотворительной акции "Родные стены, родным людям" вместе с волонтерской инициативой Repair Together собрали средства на приобретение строительных материалов на восстановление поврежденных домов для жителей села Лукашевка ...
09:00, 03 Дек Чемпионат Европы-2024: Нидерланды и Франция снова вместе, Албания в группе "смерти" В субботу, 2 декабря, в Эльбской филармонии немецкого Гамбурга состоялась жеребьевка группового этапа финальной части чемпионата Европы 2024 года. В жеребьевке принимали участие 21 сборная: Германия в качестве страны-хозяйки и 20 стран, которые полу...
15:00, 10 Дек Ирину Шейк и Тома Брэди снова заметили вместе после вечеринки Леонардо ДиКаприо Ирина Шейк и Том Брэди попали в объективы папарацци в Майами, куда многие звезды съехались ради ярмарки современного искусства Art Basel.Знаменитый американский футболист дожидался российскую модель у ее отеля в своем автомобиле. После того, как Ири...
17:00, 08 Май Google Pixel Watch выйдут позже в этом году вместе с Pixel 8 Линейка Google Fitbit обновляется раз в два года. Согласно отраслевому источнику, компания переходит на ежегодный цикл выпуска Pixel Watch. Ожидается появление новых Pixel Watch, которые, скорее всего, будут называться Pixel Watch 2. Предположительн...
15:00, 25 Май Алкоголь в умеренных количества может улучшить память и интеллект пожилых людей У женщин и мужчин возрастом около 62 лет умственные способности стали лучше после употребления алкоголя нормированными порциями. Алкоголь может быть полезен только в умеренных количествах, а при чрезмерном потреблении оказывает разрушительное влияни...
15:43, 17 Сен Кирилл Бажин: «Хотелось сказать Бабикову на втором круге, почему он меня не подтолкнул со спуска, шли же вместе. Он просто меня объехал» Российский биатлонист Кирилл Бажин прокомментировал свое выступление в гонке преследования на этапе Кубка Содружества в Раубичах, где он стал вторым. Победу одержал Антон Бабиков. «Я бы не сказал, что было сложно идти за Бабиковым – можно сказать, п...