Menu English Ukrainian Russian Home

Бесплатная техническая библиотека для любителей и профессионалов Бесплатная техническая библиотека


НОВОСТИ НАУКИ И ТЕХНИКИ, НОВИНКИ ЭЛЕКТРОНИКИ
Бесплатная техническая библиотека / Лента новостей

Роботов научили быть любопытными

08.06.2017

На протяжении нескольких лет разработчики компьютерных программ для роботов пытались создать "алгоритм любопытства", однако повторить человеческую любознательность было довольно сложно. По их словам, большинство методов не могут оценить "пробелы" в знаниях робота и понять, что ему будет интересно.

Однако Тодду Хестеру из Google DeepMind в Великобритании и Питеру Стоуну из Техасского университета в США удалось создать алгоритм, позволяющий компьютерной программе "проявлять любопытство", самостоятельно изучая окружающую среду. Новый подход позволит роботам учиться еще быстрее, чем сейчас. Исследователи назвали алгоритм TEXPLORE-VENIR - он основывается на технике "подкрепляющего обучения".

Эта техника работает по следующему принципу: когда программа приближается к решению проблемы (например, выходу из лабиринта), то получает некоторое вознаграждение. Предполагается, что, получив награду, в будущем она снова попытается достичь какой-либо цели. Исследователи немного изменили технику "подкрепляющего обучения" таким образом, чтобы программа получала вознаграждение просто за новое знание, даже если оно не помогает достичь цели. Например, TEXPLORE-VENIR зарабатывает бонусы, когда изучает картину мира, ищет отдаленные места на карте или осваивает кулинарные рецепты.

Хестер и Стоун протестировали свой алгоритм в двух сценариях. Первым из них стал виртуальный лабиринт из 4-х комнат, соединенных между собой запертыми дверями. Боту - просто компьютерной программе - нужно было исследовать территорию, найти ключ, взять его и открыть дверь. За каждую открытую дверь он зарабатывал 10 очков. Чтобы достичь наивысшего балла, ему было дано 3000 "шагов".

Когда при помощи алгоритма TEXPLORE-VENIR бот изучил местность (потратив на это 1000 "шагов"), то заработал 55 очков. При этом если он использовал другие алгоритмы, то получал от 0 до 35 очков. Когда программе пришлось одновременно исследовать местность и отпирать двери, с помощью TEXPLORE-VENIR она заработала 70 баллов, а в других случаях - менее 5.

Ко второму эксперименту исследователи подключили человекоподобного робота Nao. При помощи алгоритма TEXPLORE-VENIR ему нужно было выполнить три задания: ударить по музыкальной тарелке, найти и поднести к глазам розовую ленту и нажать на кнопку, расположенную на его ноге. На каждое задание Nao получил 200 "шагов", и еще 400 "шагов" ему было дано на "обучение" (изучение предметов). По результатам 13-ти попыток он нажал на кнопку 7 раз, ударил по тарелке в 1-м из 5-ти случаев и в итоге стал быстрее находить розовую ленту.

Алгоритм TEXPLORE-VENIR показал хорошие результаты, однако излишнее любопытно может снизить продуктивность робота, считают сторонние исследователи. Может получиться так, что внутренняя мотивация робота на получение награды за обучение превысит его внешнюю мотивацию решить поставленную задачу. Поэтому важно найти баланс между двумя видами мотивации.

<< Назад: Вкус воды 08.06.2017

>> Вперед: Боевые лазеры для бомбардировщиков 07.06.2017

Последние новости науки и техники, новинки электроники:

Использование Apple Vision Pro во время операций 16.03.2024

Медицинская команда больницы Кромвеля в Лондоне впервые применила Apple Vision Pro в ходе двух операций на позвоночнике. Это событие подтверждает потенциал гарнитуры в качестве медицинского инструмента, изменяющего подход к хирургической практике. Хотя сами врачи не использовали Vision Pro, операционная медсестра работала с виртуальной реальностью, используя очки во время подготовки и выполнения процедур. Гарнитура позволила просматривать виртуальные экраны в операционной, выбирать инструменты и следить за ходом операции. Программное обеспечение, разработанное компанией eXeX, специализирующейся на создании приложений на основе искусственного интеллекта для хирургии, существенно улучшило процесс оказания медицинской помощи пациентам. Использование Apple Vision Pro открывает новые возможности для разработки приложений в сфере здравоохранения, таких как клиническое образование, планирование операций, обучение и медицинская визуализация. Внедрение Apple Vision Pro в медицинскую пр ...>>

Хранение углерода в Северное море 16.03.2024

Министр энергетики Норвегии Терье Осланд объявил о запуске проекта Longship, нацеленного на создание центрального хранилища углекислого газа в Северном море. Этот амбициозный проект оценивается в $2,6 млрд и направлен на применение технологии CCS (углеродного захвата и хранения) для смягчения воздействия климатических изменений. Норвегия уже имеет опыт в области CCS благодаря успешным проектам Sleipner и Snohvit, и сейчас стремится увеличить объем углерода, запечатываемого под морским дном. План Longship предусматривает создание мощности по захвату и хранению 1,5 млн. тонн углерода ежегодно в течение 25 лет. Несмотря на позитивные перспективы, существуют опасения по поводу долгосрочных последствий такого хранения. Однако сторонники проекта утверждают, что морское хранение углерода имеет ряд преимуществ, включая минимальное воздействие на окружающую среду. Проект Longship осуществляется при участии компаний Equinor, Shell и TotalEnergies через совместное предприятие Northern Li ...>>

Выращены мини-органы из амниотической жидкости человека 15.03.2024

Международная команда ученых под руководством профессора Фань Сюлиня из Университета Чжэцзян разработала уникальный способ выращивания мини-органов из клеток, обнаруженных в амниотической жидкости человека. Этот значительный прорыв в медицине может привести к улучшению диагностики и лечения врожденных заболеваний. Органоиды, представляющие собой трехмерные клеточные структуры, имитирующие органы в меньшем масштабе, были выращены из клеток легких, почек и тонкого кишечника, найденных в амниотической жидкости. Этот метод открывает новые возможности для изучения различных состояний плода и может стать ключом к ранней диагностике и лечению врожденных дефектов. Хотя пока не проводились попытки использования этого метода в лечении, ученые надеются, что их исследования в будущем помогут бороться с серьезными врожденными заболеваниями, которые затрагивают миллионы новорожденных ежегодно. Этот прорыв может изменить практику медицинских вмешательств, позволяя диагностировать и лечить врожд ...>>

Морозоустойчивая литий-ионная батарея 15.03.2024

Международная группа ученых под руководством профессора Университета Чжэцзян, Фань Сюлиня, разработала новый вид электролита, позволяющий литий-ионным батареям функционировать при крайне низких температурах. Этот новый прорыв открывает двери для использования батарей даже при -80 °C. Исследование нового электролита для литий-ионных батарей представляет значительный шаг вперед в области разработки энергоемких и холодоустойчивых батарей. Этот прорыв может иметь далеко идущие последствия для различных отраслей, требующих энергоснабжения в условиях экстремальных температур. Сюлинь подчеркивает, что такие батареи могут быть применены в различных областях, включая телекоммуникации, транспорт, исследования в Арктике, авиацию и другие. Ученые создали инновационный электролит, который состоит из редких молекул растворителя, позволяющих достичь характеристик, ранее недоступных для современных электролитов. Этот электролит обеспечивает быструю зарядку в холодных условиях, позволяя лит ...>>

Разработана новая форма лабораторного мяса 14.03.2024

Ученые Университета Макмастера представили новую форму лабораторного мяса, используя инновационный метод, призванный стать альтернативой традиционным продуктам животного происхождения с высокой степенью подобия в текстуре и вкусе. Рави Сельваганапати и Алиреза Шахин-Шамсабади из школы биоинженерии Университета разработали метод создания мяса путем формирования тонких листьев культивированных клеток мышц и жира, выращиваемых в лабораторных условиях. Эти листья живых клеток, сравнимые по толщине с обычной бумагой, сначала выращиваются в пробирках, а затем концентрируются на пластинах для роста, снимаясь и складываясь в стопки. Процесс слияния клеток происходит перед их отмиранием. Благодаря этой технологии, сборка листьев позволяет формировать куски мяса различной толщины и насыщать их жиром в необходимых пропорциях, что отличает этот метод от других альтернатив. Ученым удалось создать образец мяса из доступных линий мышиных клеток, а также приготовить его для дегустации. Они ...>>

Случайная новость из Архива

Решена главная проблема литиевых аккумуляторов нового поколения 07.11.2016

Исследователи из Кембриджского университета вместе с сотрудниками Пекинского технологического института разработали литий-серный аккумулятор нового поколения.

Принцип работы аккумулятора напоминает функционирование тонкого кишечника человека.

В новой разработке ученым удалось преодолеть главную проблему литий-серных аккумуляторов, которая заключалось в постепенной потере их емкости. Так, серосодержащий катод отделен от электролита специальной мембраной, которая по структуре напоминает волокна, находящиеся в тонкой кишке.

Как и стенки тонкого кишечника, этот слой из волокон оксида цинка способен захватывать фрагменты активного вещества и присоединять их к проводящей решетке. Это позволяет повторно использовать материалы аккумулятора, которые были подвергнуты разрушению.

Автор исследования Дэн Чжао утверждает, что удельная энергия литий-серной батареи превосходит в пять раз удельную энергию литий-ионной, которая используется в большинстве портативных устройств. Однако он добавил, что аккумулятор пока не способен пройти через большое количество циклов зарядки-разрядки.

Смотрите полный Архив новостей науки и техники, новинок электроники


All languages of this page

Главная страница | Библиотека | Статьи | Карта сайта | Отзывы о сайте

www.diagram.com.ua

www.diagram.com.ua
2000-2024