Роботов научили быть любопытными. Новость Бесплатной технической библиотеки

НОВОСТИ НАУКИ И ТЕХНИКИ, НОВИНКИ ЭЛЕКТРОНИКИ
Бесплатная техническая библиотека / Лента новостей

Роботов научили быть любопытными

08.06.2017

На протяжении нескольких лет разработчики компьютерных программ для роботов пытались создать "алгоритм любопытства", однако повторить человеческую любознательность было довольно сложно. По их словам, большинство методов не могут оценить "пробелы" в знаниях робота и понять, что ему будет интересно.

Однако Тодду Хестеру из Google DeepMind в Великобритании и Питеру Стоуну из Техасского университета в США удалось создать алгоритм, позволяющий компьютерной программе "проявлять любопытство", самостоятельно изучая окружающую среду. Новый подход позволит роботам учиться еще быстрее, чем сейчас. Исследователи назвали алгоритм TEXPLORE-VENIR - он основывается на технике "подкрепляющего обучения".

Эта техника работает по следующему принципу: когда программа приближается к решению проблемы (например, выходу из лабиринта), то получает некоторое вознаграждение. Предполагается, что, получив награду, в будущем она снова попытается достичь какой-либо цели. Исследователи немного изменили технику "подкрепляющего обучения" таким образом, чтобы программа получала вознаграждение просто за новое знание, даже если оно не помогает достичь цели. Например, TEXPLORE-VENIR зарабатывает бонусы, когда изучает картину мира, ищет отдаленные места на карте или осваивает кулинарные рецепты.

Хестер и Стоун протестировали свой алгоритм в двух сценариях. Первым из них стал виртуальный лабиринт из 4-х комнат, соединенных между собой запертыми дверями. Боту - просто компьютерной программе - нужно было исследовать территорию, найти ключ, взять его и открыть дверь. За каждую открытую дверь он зарабатывал 10 очков. Чтобы достичь наивысшего балла, ему было дано 3000 "шагов".

Когда при помощи алгоритма TEXPLORE-VENIR бот изучил местность (потратив на это 1000 "шагов"), то заработал 55 очков. При этом если он использовал другие алгоритмы, то получал от 0 до 35 очков. Когда программе пришлось одновременно исследовать местность и отпирать двери, с помощью TEXPLORE-VENIR она заработала 70 баллов, а в других случаях - менее 5.

Ко второму эксперименту исследователи подключили человекоподобного робота Nao. При помощи алгоритма TEXPLORE-VENIR ему нужно было выполнить три задания: ударить по музыкальной тарелке, найти и поднести к глазам розовую ленту и нажать на кнопку, расположенную на его ноге. На каждое задание Nao получил 200 "шагов", и еще 400 "шагов" ему было дано на "обучение" (изучение предметов). По результатам 13-ти попыток он нажал на кнопку 7 раз, ударил по тарелке в 1-м из 5-ти случаев и в итоге стал быстрее находить розовую ленту.

Алгоритм TEXPLORE-VENIR показал хорошие результаты, однако излишнее любопытно может снизить продуктивность робота, считают сторонние исследователи. Может получиться так, что внутренняя мотивация робота на получение награды за обучение превысит его внешнюю мотивацию решить поставленную задачу. Поэтому важно найти баланс между двумя видами мотивации.

<< Назад: Вкус воды 08.06.2017

>> Вперед: Боевые лазеры для бомбардировщиков 07.06.2017

Последние новости науки и техники, новинки электроники:

Искусственная кожа для эмуляции прикосновений 15.04.2024

В мире современных технологий, где удаленность становится все более обыденной, сохранение связи и чувства близости играют важную роль. Недавние разработки немецких ученых из Саарского университета в области искусственной кожи представляют новую эру в виртуальных взаимодействиях. Немецкие исследователи из Саарского университета разработали ультратонкие пленки, которые могут передавать ощущение прикосновения на расстоянии. Эта передовая технология предоставляет новые возможности для виртуального общения, особенно для тех, кто оказался вдали от своих близких. Ультратонкие пленки, разработанные исследователями, толщиной всего 50 микрометров, могут быть интегрированы в текстильные изделия и носиться как вторая кожа. Эти пленки действуют как датчики, распознающие тактильные сигналы от мамы или папы, и как исполнительные механизмы, передающие эти движения ребенку. Прикосновения родителей к ткани активируют датчики, которые реагируют на давление и деформируют ультратонкую пленку. Эта ...>>

Кошачий унитаз Petgugu Global 15.04.2024

Забота о домашних животных часто может быть вызовом, особенно когда речь заходит о поддержании чистоты в доме. Представлено новое интересное решение стартапа Petgugu Global, которое облегчит жизнь владельцам кошек и поможет им держать свой дом в идеальной чистоте и порядке. Стартап Petgugu Global представил уникальный кошачий унитаз, способный автоматически смывать фекалии, обеспечивая чистоту и свежесть в вашем доме. Это инновационное устройство оснащено различными умными датчиками, которые следят за активностью вашего питомца в туалете и активируются для автоматической очистки после его использования. Устройство подключается к канализационной системе и обеспечивает эффективное удаление отходов без необходимости вмешательства со стороны владельца. Кроме того, унитаз имеет большой объем смываемого хранилища, что делает его идеальным для домашних, где живут несколько кошек. Кошачий унитаз Petgugu разработан для использования с водорастворимыми наполнителями и предлагает ряд доп ...>>

Привлекательность заботливых мужчин 14.04.2024

Стереотип о том, что женщины предпочитают "плохих парней", долгое время был широко распространен. Однако, недавние исследования, проведенные британскими учеными из Университета Монаша, предлагают новый взгляд на этот вопрос. Они рассмотрели, как женщины реагируют на эмоциональную ответственность и готовность помогать другим у мужчин. Результаты исследования могут изменить наше представление о том, что делает мужчин привлекательными в глазах женщин. Исследование, проведенное учеными из Университета Монаша, приводит к новым выводам о привлекательности мужчин для женщин. В рамках эксперимента женщинам показывали фотографии мужчин с краткими историями о их поведении в различных ситуациях, включая их реакцию на столкновение с бездомным человеком. Некоторые из мужчин игнорировали бездомного, в то время как другие оказывали ему помощь, например, покупая еду. Исследование показало, что мужчины, проявляющие сочувствие и доброту, оказались более привлекательными для женщин по сравнению с т ...>>

Электронный шлем для водителей грузовиков 14.04.2024

Безопасность на дорогах, особенно для водителей тяжелой строительной техники, является приоритетной задачей инженеров и ученых. В свете этого немецкий Институт структурной прочности и надежности систем имени Фраунгофера представил новый продукт - электронный шлем, который предназначен для защиты водителей от серьезных травм при вождении строительных машин. Новый электронный шлем, разработанный командой инженеров из Института Фраунгофера, открывает новые перспективы для безопасности водителей грузовиков и строительной техники. Устройство способно контролировать уровень тряски в кабине автомобиля и предупреждать водителя о возможной опасности. Основой работы шлема является встроенный пьезоэлектрический датчик, который генерирует электричество при физической деформации. Этот механизм позволяет устройству реагировать на интенсивные вибрации, характерные для работы строительной техники. Когда уровень деформации превышает безопасные значения, на шлеме включается сигнальная система, пре ...>>

Антивитамины вместо антибиотиков 13.04.2024

Проблема бактериальной резистентности к антибиотикам становится все более серьезной, создавая угрозу для эффективного лечения инфекций. В свете этого исследователи ищут новые пути борьбы с супербактериями. Одним из перспективных направлений является использование антивитаминов, способных оказывать антибактериальное действие. Антивитамины, хоть и известные как вещества, противоположные витаминам, оказались перспективным инструментом в борьбе с бактериальной резистентностью к антибиотикам. Исследование, проведенное учеными из Геттингенского университета в Германии, подтвердило их потенциал в создании новых препаратов для борьбы с опасными инфекциями. В связи с распространением супербактерий, стойких к антибиотикам, появляется необходимость в поиске альтернативных методов лечения. Антивитамины представляют собой молекулы, аналогичные витаминам, но способные подавлять активность бактерий без вреда для организма человека. На данный момент науке известны всего три антивитамина: розе ...>>

Случайная новость из Архива

Жесткие диски Toshiba N300 Pro и X300 Pro 12.03.2022

Компания Toshiba представила две новые серии жестких дисков N300 Pro и X300 Pro, предназначенных для "владельцев бизнеса и творческих профессионалов", соответственно. Новые серии HDD выполнены в форм-факторе 3,5 дюйма, имеют емкость до 18 Тбайт, отличаются высокой производительностью и надежностью, и сочетают в себе технологии Toshiba Cache и Stable Platter (модели емкостью более 10 Тбайт) и FC-MAMR (18 Тбайт).

У представителей обеих серий скорость вращения шпинделя составляет 7200 оборотов в минуту. Новинки способны выдержать нагрузку до 300 Тбайт в год. Компания предоставляет на них пятилетнюю гарантию.

Накопители серии X300 Pro выпускаются емкостью 4, 6, 8, 10, 12, 14, 16 и 18 Тбайт. Как сообщается в пресс-релизе, "инновационная конструкция X300 Pro помогает оптимизировать точность позиционирования и производительность чтения/записи для доступа к данным в режиме реального времени". В моделях емкостью 10, 12, 14, 16 и 18 Тбайт используется конструкция с наполнением герметичных зон гелием и лазерной сваркой. Для всех моделей X300 Pro заявлено среднее время безотказной работы 1,0 млн часов (MTTF), они созданы для ресурсоемких приложений. Серия X300 Pro предназначена для профессиональных настольных рабочих станций, высокопроизводительных игровых компьютеров, высокопроизводительных ПК и рабочих станций для мультимедийного дизайна.

Серия N300 Pro тоже включает модели емкостью 4, 6, 8, 10, 12, 14, 16 и 18 Тбайт с технологией магнитной записи CMR. Накопители предназначены для круглосуточной работы в среде NAS и оснащены встроенными RV-датчиками для компенсации вращательных колебаний. Средняя наработка на отказ (величина MTTF) составляет 1,2 млн часов (MTTF). Накопители N300 Pro созданы для высокоинтенсивных рабочих нагрузок и оптимизированы для RAID систем NAS с количеством отсеков до 24. В качестве потенциальных потребителей накопителей этой серии указаны средние и крупные предприятия.

Смотрите полный Архив новостей науки и техники, новинок электроники

All languages of this page

Главная страница | Библиотека | Статьи | Карта сайта | Отзывы о сайте