Поищите в Интернете «обучение на протяжении всей жизни», и вы найдете подробный список приложений, которые научат вас шить, играть в шахматы или даже говорить на новом языке. Однако в развивающихся областях искусственного интеллекта (ИИ) и автономных устройств «обучение на протяжении всей жизни» означает нечто иное — и оно немного более сложное.
Это относится к способности устройства непрерывно работать, взаимодействовать с окружающей средой и учиться у нее — самостоятельно и в режиме реального времени.
Эта способность имеет решающее значение для развития некоторых из наших наиболее многообещающих технологий — от автоматизированных дронов-доставщиков и беспилотных автомобилей до внепланетных марсоходов и роботов, способных выполнять работу, слишком опасную для людей.
Во всех этих случаях ученые с головокружительной скоростью разрабатывают алгоритмы, позволяющие осуществить такое обучение.
Но специализированные аппаратные ускорители искусственного интеллекта или чипы, необходимые устройствам для запуска этих новых алгоритмов, должны не отставать.
Именно эту задачу взял на себя Анхель Янгуас-Гил, исследователь Аргоннской национальной лаборатории Министерства энергетики США (DOE).
Его работа является частью Аргоннской микроэлектронной инициативы. Янгуас-Гил и многопрофильная группа коллег недавно опубликовали в журнале Nature Electronics статью , в которой исследуются проблемы программирования и аппаратного обеспечения, с которыми сталкиваются устройства, управляемые искусственным интеллектом, и то, как мы можем преодолеть их с помощью проектирования.
Обучение в режиме реального времени Современные подходы к ИИ основаны на модели обучения и вывода.
Разработчик «обучает» возможности ИИ в автономном режиме использовать только определенные типы информации для выполнения определенного набора задач, тестирует его производительность и затем устанавливает его на целевое устройство.
«В этот момент устройство больше не может учиться на новых данных или опыте», — объясняет Янгуас-Гил.
«Если разработчик хочет расширить возможности устройства или улучшить его производительность, он или она должны вывести устройство из эксплуатации и обучить систему с нуля».
Для сложных приложений эта модель просто невозможна. «Представьте себе планетоход, который сталкивается с объектом, который он не был обучен распознавать.
Или он входит в местность, для навигации по которой он не был обучен», — продолжает Янгуас-Гил. «Учитывая временной разрыв между марсоходом и его операторами, его выключение и попытка переобучить его для работы в этой ситуации не сработают.
Вместо этого марсоход должен иметь возможность собирать новые типы данных. информация к информации, которая у него уже есть, и задачи, связанные с ней.
А затем принимать решения о том, что делать дальше, в режиме реального времени». Проблема в том, что обучение в реальном времени требует значительно более сложных алгоритмов.
В свою очередь, для работы этих алгоритмов требуется больше энергии, больше памяти и больше гибкости от аппаратных ускорителей. И эти чипы почти всегда строго ограничены по размеру, весу и мощности — в зависимости от устройства.
Ключи к ускорению обучения на протяжении всей жизни Согласно документу, ускорителям искусственного интеллекта необходим ряд возможностей, позволяющих их хост-устройствам непрерывно обучаться.
Возможность обучения должна быть расположена на устройстве. В большинстве предполагаемых приложений у устройства не будет времени получить информацию из удаленного источника, такого как облако, или запросить передачу от оператора с инструкциями, прежде чем ему потребуется выполнить задачу.
Ускоритель также должен иметь возможность со временем изменять способ использования своих ресурсов, чтобы максимально эффективно использовать энергию и пространство.
Это может означать принятие решения об изменении места хранения определенных типов данных или количества энергии, используемой для выполнения определенных задач.
Другая необходимость заключается в том, что исследователи называют «восстанавливаемостью модели».
Это означает, что система может сохранить достаточную часть своей исходной структуры, чтобы продолжать выполнять намеченные задачи на высоком уровне, даже несмотря на то, что она постоянно меняется и развивается в результате своего обучения.
Система также должна предотвращать то, что эксперты называют «катастрофическим забыванием», когда изучение новых задач заставляет систему забывать старые.
Это обычное явление в современных подходах к машинному обучению. При необходимости системы должны иметь возможность вернуться к более успешным практикам, если производительность начнет страдать.
Наконец, у акселератора может возникнуть необходимость консолидировать знания, полученные в результате выполнения предыдущих задач (используя данные из прошлого опыта посредством процесса, известного как воспроизведение), в то время как он активно выполняет новые.
Все эти возможности создают проблемы для ускорителей искусственного интеллекта, которые исследователи только начинают решать.
Как мы узнаем, что это работает? Процесс измерения эффективности ускорителей искусственного интеллекта также находится в стадии разработки.
В прошлом оценки фокусировались на точности задач, чтобы измерить количество «забывания», которое происходит в системе при изучении серии задач. Но эти меры недостаточно детализированы, чтобы собрать информацию, необходимую разработчикам для разработки чипов искусственного интеллекта, способных решить все задачи, необходимые для обучения на протяжении всей жизни.
Согласно документу, разработчики теперь больше заинтересованы в оценке того, насколько хорошо устройство может использовать полученные знания для улучшения своей производительности при выполнении задач, которые идут до и после момента в последовательности, где оно изучает новую информацию.
Другие новые показатели направлены на измерение того, насколько быстро модель может обучаться и насколько хорошо она управляет собственным ростом.
Прогресс перед лицом сложности Если все это звучит исключительно сложно, что ж, так оно и есть.
«Оказывается, для создания устройств, которые действительно смогут обучаться в режиме реального времени, нам потребуются прорывы и стратегии, охватывающие от разработки алгоритмов до проектирования чипов и новых материалов и устройств», — говорит Янгуас-Гил.
К счастью, исследователи могут использовать или адаптировать существующие технологии, изначально задуманные для других приложений, таких как устройства памяти.
Это может помочь реализовать возможности обучения на протяжении всей жизни таким образом, чтобы это было совместимо с современными технологиями обработки полупроводников.
Аналогичным образом, новые подходы к совместному проектированию, которые разрабатываются в рамках исследовательского портфеля Аргонна в области микроэлектроники, могут помочь ускорить разработку новых материалов , устройств, схем и архитектур, оптимизированных для обучения на протяжении всей жизни.
В своей статье Янгуас-Гил и его коллеги предлагают некоторые принципы проектирования, которые помогут направлять усилия по развитию в этом направлении.
Они включают: Архитектура с широкими возможностями реконфигурации, позволяющая модели менять способы использования энергии и хранения информации по мере обучения — аналогично тому, как работает человеческий мозг.
Высокая пропускная способность данных (для быстрого обучения) и большой объем памяти.
Встроенная связь для повышения надежности и доступности.
«Процесс решения этих проблем во многих научных дисциплинах только начинается. И он, вероятно, потребует очень тесного сотрудничества между этими дисциплинами, а также открытости к новым разработкам и новым материалам», — объясняет Янгуас-Гил.
«Это чрезвычайно захватывающее время для всей экосистемы непрерывного обучения».
Рубрика: Технологии. Читать весь текст на android-robot.com.
Подарите любимым оригинальные приветствия. Скажи миру: Привет! Жизнь в современном мире означает возможность услышать и произнести огромное количество приветствий. Люди здороваются с друзьями, родными, новыми зна...
Видеостудии Jalinga Система Jalinga - почасовая аренда сенсорной видеостудии является эффективным способом создания видео контента за небольшие деньги. Видеоматериалы сн...
«Конкретная дата»: когда на улицы Москвы вернутся электросамокаты Нельзя точно сказать, когда электросамокаты вернутся в Москву. Об этом сообщил пресс-секретарь сервиса кикшеринга Whoosh Денис Балакирев в эксклюзивн...
МВД объявило в розыск еще одного адвоката Навального* МВД России объявило в розыск адвоката блогера Алексея Навального* Александра Федулова. Об этом свидетельствуют данные электронной базы ведомства. &la...
Эксперты ждут очередного Золотого мяча для Месси После триумфального выступления на футбольном чемпионате мира в Катаре лидер сборной Аргентины Лионель Месси стал основным претендентом на главную ин...
Топ-5 самых дорогих футболистов РПЛ составляют игроки «Зенита» Пока элитный футбольный дивизион России – Премьер-лига, находится на зимних каникулах, эксперты футбольного финансового рынка обновили ориентировочну...
Intel демонстрирует сверхбыструю версию Thunderbolt Интерфейс обеспечивает обмен данными с периферийными устройствами на скорости 80 Гбит/с — как только что анонсированная спецификация USB4. Компания I...
OCS предлагает сервисы StormWall для защиты от DDoS-рисков и хакерских атак Компания StormWall предлагает рынку решения в области информационной безопасности — сервисы на основе искусственного интеллекта для защиты от DDoS-ат...
Этот усилитель для наушников со встроенным ЦАПом можно взять с большой скидкой На AliExpress заметно снизилась цена на Fosi Audio Q4 Mini. Это усилитель для наушников, предназначенный для тех, кому звук от встроенной в ноутбук и...
Зачем умной колонке понадобился экран? Обзор Яндекс Станции Дуо Макс Весь январь тестировал новую смарт-колонку Яндекс Станция Дуо Макс. Наконец-то придумал, зачем ей экран и где она максимально полезна. Об этом и о са...
Почему мошенники стали звонить через WhatsApp и Viber? Телефонные мошенники все чаще стали обзванивать абонентов через мобильные мессенджеры. Расскажем, с чем связана эта тенденция, и как не попасться на ...
Номера телефона +7 (902) — какой оператор и кто может звонить? Как мошенники используют номера +7 (902) для обмана людей? Обезопасить себя от звонков мошенников и спамеров можно, если заранее узнать, откуда звоня...
Иммунолог Парецкая: при мытье посуды нужно пользоваться перчатками Хотя так поступают далеко не все хозяйки. При уборке, кстати, многие тоже вспоминают о перчатках только тогда, когда кожа рук стала сухой или средств...
78.ru: В Ленобласти многодетная мать 4 года жила с мумией мужа Страшную находку совершил инспектор подразделения по делам несовершеннолетних, когда пришёл по вызову в семью, которая жила в деревне Старосиверская ...
Поездка с риском для жизни: смолянин «налетел» на неожиданное препятствие на дороге в центре города Крышка люка, на которую наехал молодой человек, больно ударила не только по авто, но и по бюджету горожанина. Максим, герой нашей истории, — об...
В Курске в галерее Дейнеки открылась выставка «Зеркало Малевича» Реалистическое и абстрактное. Их противопоставление и взаимопроникновение. В курской галерее Дейнеки открылась выставка «Зеркало Малевича». Она приур...
Курские сурки проспали свой праздник Коммуникабельный семьянин и большой любитель поспать. 2 февраля отмечают День сурка. Правда, не в России, а в США и Канаде. Но, благодаря известному ...
Советы по улучшению производительности и внешнего вида Infiniti Автомобили Infiniti, известные своей роскошью и мощными техническими характеристиками, являются отличной базой для модификаций, которые могут улучшит...
Продажа электромобилей в Москве Приобрести электромобили из Китая в компании «Автотрейдер» может каждый желающий. Кстати, популярность такого рода транспортных средств с каждым годо...
Пользователи X раскритиковали президента Польши за желание сберечь американских солдат После заявления президента Польши Анджея Дуды о необходимости прекратить действия России для защиты американских солдат от возможной гибели, пользова...
Нидерландская журналистка о роли ЧВК «Вагнер» в судьбе России: «она дает нации надежду на победу» Коллективный Запад ведет полномасштабную войну против РФ, которой для победы необходимо сплотить свои ряды и отбросить в сторону все существующие вну...