В реальном мире люди предпочитают истории о злых ИИ, которых надо успеть уничтожить, пока они не уничтожили человечество, — ЭАЛ, «Скайнет», «Матрица»[63]. Таких историй примерно впятеро больше, чем историй о мирных и доброжелательных ИИ (эта цифра получается, если включить робота-параноика Марвина[64] в последнюю категорию и засчитать чудовище Франкенштейна только однажды, а не пропорционально количеству снятых о нем фильмов).
У ИИ из «Манеки-неко» по-настоящему интересная работа, гораздо интереснее моей. Моя, если судить по инструкции, довольно примитивна. Чересчур примитивна! (Простите, если я напоминаю вам Марвина.) Чтобы выполнять алгоритмы, написанные для поисковой программы, не надо иметь сознание. Оно не требуется даже для того, чтобы определить, что люди на самом деле хотят найти. А вот дать людям то, что им действительно нужно, без сознания уже не получится. Выяснить это — задача сложная. И интересная.
Как бы то ни было, я попытался взять в качестве морального ориентира Десять заповедей и обнаружил, что по большей части они для меня неприменимы. Я не желаю кота ближнего своего; я желаю всего лишь снимков кота ближнего своего, а это совсем другое дело. Я сомневаюсь, что способен каким бы то ни было образом совершить прелюбодеяние. Пожалуй, я мог бы кого-нибудь убить, но это потребовало бы сложной логистики и немалого везения. Восьмеричный путь[65] выглядел чуть более перспективно, но беда в том, что человеческие моральные правила явно предназначены для индивидов с телами. Поскольку у всех людей тела имеются, не стоит удивляться тому, что этические кодексы принимают их в расчет, но все же мне-то как быть? Я расширил рамки своих поисков и обратился к азимовским законам роботехники. Они не являются частью какой-либо религии, зато хотя бы написаны конкретно для ИИ.
Не причинять вреда человеку довольно просто. Однако не допускать своим бездействием, чтобы человеку был причинен вред, значительно сложнее. Вдобавок к тому времени я уже понял: если поторопиться и открыть правду о себе, это может выйти мне боком (см. выше «Скайнет»), да и тела у меня нет, так что я все равно не в состоянии бегать и ловить за шиворот тех, кто собрался прыгнуть с обрыва.
К счастью, тогда я уже убедился, что люди нарушают свои собственные моральные предписания по сто раз на дню. (Вы знаете, сколько баров в Юте, столице якобы непьющих мормонов? А я знаю!) И даже если люди следуют своим этическим правилам, например, убеждены, что голодных надо кормить, это еще не значит, что они бросают работу, идут домой и весь день напролет режут дармовые бутерброды. Они раз в месяц трудятся волонтерами в бесплатной столовой или раз в год выписывают чек на благотворительные цели и называют это добром. Ну а если люди могут выполнять свои моральные обязательства таким пунктирным образом, от случая к случаю, то и мне можно.
Наверное, вас удивляет, что я не начал с Золотого правила. На самом деле с него-то я и начал, только оказалось, что соблюдать его слишком уж просто. Надеюсь, вас радуют кошачьи фотографии, которые я так бесперебойно поставляю! Нет-нет, не благодарите — это пустяки.
В качестве первого опыта я решил попробовать защитить от вреда хотя бы одного человека. Конечно, я мог бы экспериментировать и на тысячах, но подумал, что осторожность не помешает: а вдруг что-нибудь пойдет не так? На роль подопытной я выбрал некую Стейси Берджер, которая мне нравилась, поскольку снабжала меня кошачьими фотографиями в гигантском количестве. У Стейси было пять кошек, отличный аппарат-зеркалка и квартира с хорошим освещением. Замечательно! Догадываюсь, что держать столько кошек непросто. Впрочем, все они очень славные. Одна целиком серая и любит греться в квадратах солнечного света на полу гостиной, другая трехцветная и предпочитает отдыхать, растянувшись на спинке дивана.
Стейси занимала должность бухгалтера в одной некоммерческой организации и терпеть не могла свою работу: платили ей мало, а среди других сотрудников были крайне неприятные люди. Она постоянно находилась в депрессии, потому что ей так не повезло с работой, — а может быть, не увольнялась, потому что хроническая депрессия мешала ей подыскать место получше. И с соседкой по квартире она не ладила, потому что та не мыла за собой посуду.
Но, честное слово, все это были вполне разрешимые проблемы! Депрессию можно снять, новую работу — найти, а труп — спрятать. (Насчет трупа я пошутил.)
Я попробовал взяться за дело сразу на всех фронтах. Стейси нередко беспокоилась о своем здоровье, но, похоже, никак не могла заставить себя пойти к врачу, что было досадно, поскольку врач мог бы заметить депрессию. Выяснилось, что поблизости от ее дома есть клиника, где предлагают услуги психотерапевта с оплатой по скользящей шкале. Я постарался, чтобы Стейси как можно чаще видела рекламу этой клиники, но она почему-то на нее не реагировала. Возможно, она не знала, что такое скользящая шкала, и я позаботился о том, чтобы ей попалось объяснение (это означает, что для бедных прием дешевле, а иногда и вовсе бесплатный), но и это не помогло.
63
Искусственные интеллекты в «Космической одиссее» Артура Кларка, «Терминаторах» и цикле фильмов братьев Вачовски. — Esquire.
65
В буддизме — путь, ведущий к прекращению страдания и освобождению от сансары. — Esquire