Любопытство и ТВ

Добрый день!

Если мы знаем, куда стремиться, то нередко можем научить достигать этого и компьютер. Например, имея цель поставить мат в шахматах, компьютер вполне способен научиться его ставить. Здесь вполне понятная система поощрения, поэтому машина даже на такой сложной игре способна эффективно обучаться. Но как быть, если цель так и не удалось сформулировать? За что награждать?

Люди придумали такую штуку — Curiosity-Driven Learning. Если говорить грубо, то идея в следующем: система старается попасть в состояния, в которых ранее не была. И вот за достижение нового состояния робот получает награду (т.е. он продолжает заниматься привычным делом — максимизирует какую-то характеристику).

И тут мы подходим к жестокому эксперименту над бедным роботом-младенцем. Юный и любопытный он старательно занимается чем угодно. Чем? Например, проходит компьютерные игры. Но не с целью «набрать как можно больше очков», а потому что ему «интересно» увидеть новое. И вот он уже вполне способен пройти десять уровней Марио, а также сделать многое другое.

А потом его пускают исследовать лабиринт. О, бродить по лабиринту, как же это здорово! Но что это? Пульт от телевизора и сам телевизор на стене... Что же будет дальше?

Посмотрите на беднягу (интересен весь ролик, но я сейчас пишу о моменте с 1:40):



https://youtu.be/l1FqtAHfJLI

Оказалось, что самый простой и быстрый способ для получения новой информации — переключение каналов. Робот забрасывает исследование лабиринта, ему хватает кнопок пульта. Забавно? Видели уже подобное?

Как вы понимаете, лента и уведомления социальной сети нередко выполняют для нас роль такого же телевизора. На что ещё мы столь же бессмысленно отвлекаемся от дела? Например, процесс доказательства великой теоремы Ферма можно отнести к этому? Или даже сам этот результат? Большинство ведь какую-то пользу народному хозяйству от этой теоремы никогда не ощутит, в отличие от многих других научных результатов. Какие можете предложить менее спорные примеры?

Хорошего завершения недели!