істоти або машини. Однак здібності істоти краще характеризуються швидкістю самонавчання, ніж швидкістю навчання, яка залежить від активності вчителя і від способу навчання. Важко відняти вплив вчителя, якщо ми порівнюємо здібності, наприклад, восьминога і ворони.
Як відбувається самонавчання
Істота зауважує, що деякий повторюване обставина важливо. p> Приклади таких обставин - ніч, голод, втікання від ворога. p> Іноді тварина повторює ситуацію своїми діями, наприклад, полює. p> При повторенні ситуації істота намагається підібрати більш вигідну поведінку. p> У результаті, в такій ситуації воно веде себе досить успішно. p> Ключове розходження між навчанням і самонавчанням полягає у способі вироблення поведінки. При навчанні вчитель показує або прямо стимулює правильне поводження. Він ставить оцінку за елементи поведінки, тобто за проміжні етапи роботи. Навчаючи дітей, роботів і нейронні мережі ми застосовуємо проміжні оцінки за кожен успіх чи невдачу. При цьому тільки вчитель здатний оцінити ефективність кожного етапу навчання. p> При самообучении істота саме винаходить правильне поведінка, отримуючи позитивну оцінку (задоволення, уникнути небезпеки) тільки за правильний кінцевий результат. Між поведінкою та оцінкою мається логічна причинний зв'язок, яка зазвичай далеко не очевидна. Рішення проблеми "За що саме отримана оцінка" - одне з основних завдань механізму свідомості. p> Я визначаю якість моїх "розумних" алгоритмів за швидкістю їх самонавчання в деяких стандартних завданнях. Цікаво порівняти різні алгоритми з тваринами в схожих тестах. Де зараз знаходиться мій алгоритм самонавчання? Між гідрою і равликом, або між мурахою і метеликом?
самонавчального метелик p> Зараз у мене є найпростіша демонстрація адаптується штучного інтелекту, яка здатна вразити поки тільки тих, хто розуміє. Це програма tmpbrain.zip для Windows. p>
Програма показує маленький світ, в якому живуть метелик і квітка. Метелик спеціально зроблена настільки простий, як тільки я зміг собі уявити. Вона має почуття (органи чуття), моторну систему (Органи дій) і мозок. h2> Органи метелики
Почуття квітки, або бажання. Wish = 0 означає, що бажання задоволено. Метелик відчуває це за допомогою спеціального органу, коли вона стосується квітки. Wish = 1 означає, що метелик має бажання. p> Зір визначає, з якою з чотирьох сторін світу знаходиться квітка. За допомогою зору метелик відчуває одне з чотирьох якостей, які пізніше асоціюються у неї з напрямками до квітки. Номери напрямків використовуються мозком як чотири не пов'язаних один з одним якості, які спочатку не мають сенсу. p> Рух. Моторна система інтерпретує вироблений мозком сигнал, як команду рухатися в одному з чотирьох напрямків. Тільки моторна система "знає", що це за напрямки, і як потрібно рухатися.
Мозок отримує сигнали від органів чуття (сенсорів) і подає сигнали моторної системі. Єдиний сигнал, що має сенс для мозку, це ...