Текст книги "Технологии против человека"

Герд Леонгард
Технологии против человека

© ООО «Издательство АСТ», 2018

© Fast Future Publishing Ltd 2016

© Федоров, Максим Валериевич, 2018

* * *

Предисловие

Книга «Технологии против человека» приподнимает завесу над важнейшими вызовами, которые сегодня стоят на пути развития нашей цивилизации. В ней обсуждаются неотложные вопросы о роли человека в мире экспоненциально развивающихся технологий: искусственного интеллекта, больших данных, виртуальной и дополненной реальности, редактирования генома, интернета вещей, роботизации, автоматизированного производства. Ее автор Герд Леонгард – известный футуролог и ведущий эксперт по потребительским трендам будущего. На страницах книги он подробно описывает возможные этические, экономические и социальные последствия широкого внедрения экспоненциальных технологий на нашей планете.

Появление первых электронных компьютеров в середине XX века стимулировало писателей-фантастов к моделированию гипотетического будущего. Спустя всего лишь несколько десятков лет многие казавшиеся нереальными идеи либо уже реализованы (интернет, беспилотные дроны, мобильная связь и прочее), либо проглядываются в проектах, над которыми в настоящий момент работают крупные технологические компании и ведущие научно-исследовательские учреждения по всему миру (чтение мыслей с помощью когнитивных технологий, цифровой двойник человека, нейрообучение)[1]1
  См. также статью Григория Анатольевича Кабатянского в журнале «Наука и жизнь» (2017, № 8), в которой обсуждаются эволюции идей в свете истории развития цифровых технологий.


[Закрыть].

Занявшись описанием будущего на страницах своих произведений, известные писатели вскоре поняли опасности новых технологий. Для многих угрозы, связанные с техническим прогрессом, послужили дополнительным стимулом к творчеству. Так, Станислав Лем в циклах фантастических рассказов «Из воспоминаний Иона Тихого» и «Звездные дневники Иона Тихого» более полувека назад в полушутливой форме обозначил большинство обсуждаемых в настоящей книге проблем (преобладание искусственно созданного разума над человеческим; законодательные вопросы, которые связаны с развитием искусственного интеллекта; клонирование человеческого разума в цифровой форме и др.). Другой великий фантаст, Айзек Азимов, одним из первых начал широкое обсуждение этических вопросов, вызванных роботизацией, суперкомпьютерами и искусственным интеллектом. Этическим аспектам внедрения технологий автор настоящей книги уделяет особое внимание, зачастую ссылаясь на произведения Азимова.

Само по себе слово «робот» отнюдь не новое. Впервые оно появилось в 1920 году в пьесе Карела Чапека («Россумские универсальные роботы»), основной сюжет которой заключался в описании восстания искусственно созданных андроидов против человечества (в конце пьесы людской род оказался полностью уничтожен восставшими машинами). Вопрос о возможном выходе технологий из-под контроля и их конфликте с человечеством будоражил умы многих людей на протяжении столетий, что отражалось не только в научно-фантастической литературе. Рассуждения на эту тему неоднократно приводили мыслителей к апокалиптическим прогнозам, к беспокойству о трагическом финале человечества вследствие технологического прогресса.

В книге «Технологии против человека» автор поднимает все выше упомянутые темы уже на новый уровень обсуждения – в контексте современной эпохи, когда многие смелые идеи фантастов прошлого стали повседневной реальностью миллиардов людей (мобильная беспроводная связь, видеоконференции, интернет и т. д.). Отсюда крайне убедительно утверждение Леонгарда, что «наконец мы достигли точки, когда ориентированные на человека политика и стандарты, цифровая этика, социальные контракты и глобальные соглашения о гуманизации этих экспоненциальных технологий будут столь же важны, как и договоры о нераспространении ядерного оружия» (глава 12).

В своей работе автор предупреждает не только о явных опасностях, сопряженных, например, с потенциальной возможностью массированных кибератак на финансовую или энергетическую систему. На мой взгляд, одним из самых важных пунктов в книге Леонгарда является предупреждение о менее заметных и тем самым более опасных проблемах, которые связаны с тем, что «мы скоро можем стать совершенно бесполезными без технологий – медленными, несовершенными, тупыми, убогими, ленивыми и страдающими ожирением» (глава 12). Действительно, история показывает, что с технологическими угрозами человечество, как правило, справлялось и справляется до сих пор. Хорошие примеры тому приводил в своих интервью академик Сергей Петрович Капица[2]2
  См. например, одно из его последних интервью для журнала «Сноб» (2012): https://snob.ru/magazine/entry/49621.


[Закрыть]. Стоит отметить, что Сергей Петрович и его коллеги (Сергей Павлович Курдюмов, Григорий Геннадьевич Малинецкий и др.) очень многое сделали для создания теории научного прогнозирования поведения сложных социальных систем, в том числе и таких масштабных, как человечество, на основе базовых принципов синергетики – науки о самоорганизации в сложных системах. Подробнее с данной темой можно ознакомиться, прочитав книгу «Синергетика и прогнозы будущего»[3]3
  С. П. Капица, С. П. Курдюмов, Г. Г. Малинецкий. Синергетика и прогнозы будущего. М.: Эдиториал УРСС, 2003.


[Закрыть] и последующие работы ее авторов, где с позиций синергетики и нелинейной динамики рассматриваются модели устойчивого развития как отдельных стран, так и человечества в целом. Исходя из этих исследований, можно сделать вывод, что при условии сохранения некоего критического количества людей на планете, владеющих логическим мышлением и достаточным знанием в комбинации с доброй волей, человечество справится с любыми угрозами технологической природы.

Однако если люди потеряют свои «главные человеческие качества, такие как конфиденциальность, тайна, анонимность, эмоции, спонтанность, удивление, интуицию, воображение и духовность» (глава 12) и, таким образом, перестанут быть людьми, то человечество может скоро исчезнуть с лица Земли в первую очередь как социальный феномен, а вскоре и вовсе как биологический вид. В этом-то и кроется основная опасность тех новых технологий, которые приходят практически каждый день в нашу повседневность. За тот комфорт, который они приносят, мы можем заплатить высокую цену. Будет уместно вспомнить сказку Карло Коллоди «Приключения Пиноккио», где описывается Страна развлечений – место, в котором можно «довольствоваться только игрой» и увеселениями. Однако невеселый итог пребывания длительное время в праздности – это превращение в осла. Поэтому сложно не согласиться с Леонгардом в его положении: «Если мы хотим оставаться „естественными людьми“, несмотря на мощные приманки волшебных технологий; если мы хотим сохранить то, что действительно делает нас счастливыми, а не только то, что заставляет нас функционировать, мы должны принять меры, пока еще есть пространство для маневра» (глава 12).

В своей работе автора формулирует ряд основных принципов для «обсуждения наилучших путей продвижения вперед», которые, на его взгляд, помогут вывести человечество на путь устойчивого и гармоничного развития без отказа от благ технологического прогресса.

Во многом идеи, изложенные в данной книге, перекликаются с идеями, обсуждаемыми в рамках глобальной инициативы IEEE Global Initiative по этическим рекомендациям для искусственного интеллекта и автономных систем[4]4
  См.: http://standards.ieee.org/develop/indconn/ec/autonomous_systems.html.


[Закрыть]. Эта инициатива является программой Института электротехники и электроники (IEEE), крупнейшей в мире технической профессиональной организации, насчитывающей более 400 000 членов в более чем 160 странах. Деятельность IEEE посвящена продвижению технологий на благо человечества[5]5
  https://ethicsinaction.ieee.org.


[Закрыть].

В результате напряженной работы международного коллектива из более 100 специалистов разных областей науки появился проект документа под названием «Рекомендации для этически обоснованного проектирования. Концепция взаимодействия людей с искусственными интеллектом и автономными системами с приоритетом человеческих ценностей»[6]6
  См. русскоязычный вариант документа по ссылке: http://standards.ieee.org/develop/indconn/ec/ead_executive_summary_russian_v1.pdf.


[Закрыть]. Со стороны Российской Федерации в этом проекте участвовала рабочая группа, координируемая Павлом Михайловичем Готовцевым, заведующим лабораторией в НИЦ «Курчатовский институт»[7]7
  См. его статью об этике искусственного интеллекта на сайте N+1: https://etika.nplus1.ru/programmer/ai-ethics.


[Закрыть]. Программа IEEE по этическим рекомендациям для искусственного интеллекта и автономных систем уже привлекла большое внимание со стороны видных мировых политических и культурных организаций. Создание этого документа служит хорошим примером того, что предлагаемый Леонгардом подход по вынесению социальных и этических проблем, связанных с экспоненциальными технологиями, на общепланетарный уровень обсуждения может действительно привести к положительным сдвигам в обществе. Поэтому я вслед за автором книги призываю читателей вступить в «Команду людей» и «не поддаваться искушению предпочесть технологическое волшебство, т. е. великолепное моделирование реальности, самой реальности».

С глубокой благодарностью Григорию Анатольевичу Кабатянскому за обсуждение предисловия и Ксении Дмитриевне Поляковой за редактирование текста.

Максим Валериевич Федоров, профессор Сколтеха, директор Центра науки, образования и инноваций Сколтеха по научным и вычислительным технологиям для задач с большими массивами данных, директор Образовательной программы Сколтеха по наукам о данных, Сколковский институт науки и технологий (Сколтех)

Эту книгу я посвящаю своей любимой жене Анжелике Фельдман, которая так много рассказала мне о человечности, терпела мое постоянное отсутствие и поддерживала меня во время создания книги, а также высказывала критические замечания, которые были мне так необходимы. Без тебя я бы ее никогда не написал.

Введение

Как можно сохранить человечность перед лицом всеобъемлющих экспоненциальных[8]8
  Экспоненциальный рост – возрастание величины, когда скорость роста пропорциональна значению самой величины. Экспоненциальный рост противопоставляется более медленным линейной или полиномиальной зависимостям. Экспоненциальные изменения – изменения, происходящие со скоростью, соответствующей экспоненциальному закону роста (здесь и далее – примеч. пер.).


[Закрыть] технологических изменений?

Наш мир вступает в эпоху по-настоящему значимых изменений, и многие из нас скоро будут потрясены неожиданными темпами технологического развития. Эти экспоненциально развивающиеся технологические достижения содержат в себе огромный потенциал, но вместе с тем и большую опасность, к которой следует подходить со всей ответственностью.

Человечеству брошен вызов

Я думаю, что изменения, произошедшие после недавних неожиданных событий, таких как, к примеру, Брекзит (решение Соединенного Королевства выйти из состава Европейского союза), покажутся ничтожными по сравнению с тем, что нас ожидает в сфере технологий: изменениям подвергнутся все стороны жизни на планете и даже сама наша человеческая сущность.

В прошлом все радикальные изменения, выпадавшие на долю человечества, происходили от последовательной эволюции одного ключевого фактора: от дерева, камня, бронзы и железа – к паровому двигателю, электричеству, автоматизации производства и интернету. Сегодня, напротив, я предвижу, что технологии спровоцируют такие мегасдвиги, которые будут действовать совместно и смогут изменить не только экономику, культуру и общество, но также нашу природу и мораль.

Манифест процветания человечества

«Технологии против человечества» – это не хвала стремительной технологической революции и не плач по краху цивилизации. Кинолюбителям, таким же, как и я, наверное, уже давно надоели голливудские утопические фантазии и постапокалиптические антиутопии. Будущее нельзя создать, основываясь исключительно на слепом оптимизме или парализующем страхе!

Цель этой книги – усилить и ускорить процесс обсуждения мер по контролю и безопасному использованию научных и технологических достижений, с тем чтобы технологии служили на благо человечества и способствовали его процветанию.

Я надеюсь выйти за рамки закрытой дискуссии между экспертами, учеными и аналитиками и донести эти проблемы до простых людей, которые сейчас мало ими интересуются или вовсе о них не знают. Как футуролог, а также исследователь настоящего, я бы хотел представить вашему вниманию более определенную картину будущего, которое многим кажется далеким и/или недостойным внимания.

Предназначение моей книги – положить начало оживленной дискуссии, которую я считаю самым важным разговором человечества. Моя роль заключается в том, чтобы стать ее катализатором, поэтому я не ставил себе задачей написать «инструкцию по применению»; вместо этого я предлагаю вам энергичный манифест. И, чтобы начатый мной разговор не смолк, я буду более подробно высказываться по обозначенным мной проблемам в своих будущих выступлениях, онлайн-публикациях и фильмах.

То, что мы можем что-то сделать, не значит, что мы должны это делать

Я думаю, что нам стоит отступить от разговоров о возможностях и путях их достижения, которые ведут эксперты. Вместе этого посмотрим на ситуацию с другой стороны: какую роль технологии могут оказать на развитие человечества? Возможность воплотить идею в жизнь еще не означает, что нам стоит это делать.

Чтобы разобраться в этой проблеме, я обозначил основные движущие силы изменений и представил оценку потенциальных осложнений, которые они могут спровоцировать. Я подчеркнул важность многих вопросов, возникающих на фоне ускоренного (часто даже экспоненциального) темпа развития науки и технологий.

Я считаю, что решения, принимаемые относительно научных и технологических исследований, их финансирования и регулирования, должны приниматься в первую очередь в интересах счастья и благополучия всего человечества. В конце концов, процесс познания осуществляется с помощью технологий, а не ради них.

Далее, я представляю несколько вариантов развития событий, которые могут осуществиться в зависимости от того, какой путь мы выберем. Я завершаю несколькими провокационными идеями, которые должны подтолкнуть нас к разговору о том, как нам выбрать наилучший путь для человечества и как принимать оптимальные решения на этом пути.

Чтобы начать этот смелый разговор и направить дискуссию в правильное русло, я разделил свою книгу на двенадцать глав.

Глава 1. Пролог к будущему. Сейчас, в середине второго десятилетия нашего века, мы находимся в точке разворота в развитии технологий, мы переживаем момент, когда экспоненциальные и комбинаторные изменения в технологическом окружении человечества становятся неизбежными и необратимыми. Это время – наш последний шанс разобраться в природе грядущих изменений: от искусственного интеллекта до редактирования генома. И для этого нам будет необходимо найти баланс.

Глава 2. Технологии против нас. В этой главе я объясняю, почему технологии могут имитировать нас, а в будущем смогут даже заменить нас и почему они никогда не смогут стать нами. Технологии морально нейтральны, и поэтому их неизбежное внедрение в нашу жизнь должно обсуждаться как на государственном уровне, так и в частных корпорациях. Я рассматриваю этику как определяющую составляющую человека, превыше религиозных и культурных различий.

Глава 3. Мегасдвиги. Переход на цифровой формат преподносится как главная трансформация в деятельности организаций и государственного сектора, в то время как на самом деле это лишь один из десяти мегасдвигов, которые навсегда изменят жизнь человечества. Я изучаю эти мегасдвиги: от перехода на мобильные устройства до автоматизации и роботизации. Это не медленные эволюционные процессы, к которым у нас будет время приспособиться. Они скорее представляют собой ураган потрясений и изменений, которые наверняка пошатнут основы устоявшихся экономических отношений.

Глава 4. Автоматизация общества. В этой главе я опровергаю распространенные заблуждения о том, что автоматизация приведет только к потере рабочих мест для «синих воротничков» (или даже для белых). Грядущая волна автоматизации выйдет далеко за пределы предприятий и общественной инфраструктуры и перекинется на наши биологические процессы, например старение или роды. Хотя мы привыкли к постепенным общественным изменениям, на адаптацию к которым у нас уходило вплоть до десятилетия, я спрашиваю, готовы ли мы все вместе отказаться от своего человеческого суверенитета в пользу обезличенной власти технологий? Готовы ли мы к самому большому ограничению свободы воли и индивидуальных прав человека?

Глава 5. Интернет вещей. Эта глава посвящена проблемам, связанным с интернетом вещей – пожалуй, главной темой современных технологических трансформаций, которой особенно интересуются крупные корпорации. Задумываемся ли мы о различии между алгоритмами и человечностью (тем, что я называю андроритмами)? Придется ли нам отказаться от человечности и стать похожими на механизмы, чтобы не стать отсталыми элементами в мире интернета вещей? С учетом того, как быстро видоизменяются компьютеры, превращаясь сначала в мобильные устройства, затем в носимые предметы и в будущем, вероятно, в то, что можно будет внедрить в организм с помощью инъекций или имплантов, решимся ли мы принести в жертву этим сомнительным цифровым трендам свои уникальные видовые особенности?

Глава 6. От магии к мании и вреду. Здесь я наглядно показываю, как наша любовь к технологиям развивается по предсказуемому пути: от волшебства к мании и вредным последствиям. Сейчас мы позволяем себе наслаждаться опосредованной технологиями жизнью и общением, но на самом деле это не наш выбор: технологии провоцируют выработку определенных гормонов, которые, в свою очередь, делают нас зависимыми от них – все это в интересах тех, кто стоит за «большими технологиями». Пока мы беззаботно веселимся на вечеринке под названием «технологический прогресс», мы не думаем о том, какую цену нам придется заплатить за это завтра.

Глава 7. Цифровое ожирение: наша новая пандемия. Цифровое ожирение не так широко известно, как физическое, но в последнее время оно превратилось в эпидемию невообразимых размеров. Мы с жадностью поглощаем новости, обновления и прочую сгенерированную алгоритмами информацию и тем самым пользуемся сомнительными развлечениями, которыми нас снабжают бурно развивающиеся технологические пузыри. Принимая во внимание приближающуюся волну еще более новых технологий и интерактивных цифровых платформ, нам пора задуматься не только о правильном физиологическом питании нашего тела, но и о цифровом.

Глава 8. Меры предосторожности против активных действий. Я полагаю, что для безопасного и благоприятного будущего не нужно сдерживать или оттягивать инновации, но вместе с тем необходимо считаться с экспоненциальными рисками и не перекладывать ответственность на других. Оплату счета, который придет будущим поколениям за наши азартные игры с технологиями, нельзя откладывать – это может спровоцировать сиюминутные неприятности небывалых масштабов. И меры предосторожности, и активные действия недостаточны в отношении комбинаторных и экспоненциальных изменений, для которых промедление так же пагубно, как и рывок вперед. Трансгуманизм, со своей тягой к неизведанному, представляет собой наиболее опасный выход из сложившейся ситуации.

Глава 9. Счастливая случайность. Деньги правят миром, но счастье важнее. Оно не только считается смыслом человеческой жизни во многих философских и культурных традициях, но и служит единственным фактором, который нельзя с точностью измерить и воссоздать на основе технологий. В то время как технологии делают доступными гедонистические удовольствия, что мы можем сделать, чтобы защитить более глубокие проявления счастья, включающие в себя эмпатию, сопереживание и осознанность? Счастье также связано с удачей, со случайностью – как же мы сможем использовать технологии для минимизации опасностей, которым подвергается жизнь человека, и в то же время сохранить ее спонтанность и загадочность?

Глава 10. Цифровая этика. Технологии будут вмешиваться во все сферы человеческой деятельности, и цифровая этика станет вопросом первоочередной важности для каждого человека и любой организации. Пока мы еще не создали единого языка для обсуждения этой проблемы и не пришли к единому мнению по правам и обязанностям в цифровой сфере. Устойчивое экологическое развитие, как правило, рассматривается развивающимися странами как проблема ведущих мировых держав, и про него часто забывают во время экономических рецессий. Цифровая этика, напротив, выйдет на первый план в политической и экономической жизни. Настало время поговорить об этике в сфере цифровых технологий, представляющих собой, возможно, большую угрозу для человечества, чем ядерное оружие.

Глава 11. Земля 2030: рай или ад? Когда мы фантазируем о ближайшем будущем, мы можем легко себе представить, что наша жизнь и работа изменятся до неузнаваемости. Многие из этих изменений мы примем с радостью, например возможность работать не ради денег, а ради удовольствия. Однако некоторые из тех прав и свобод, которые сейчас воспринимаются нами как сами собой разумеющиеся, например свобода выбирать, какие товары потреблять, или свобода определять свой стиль жизни, могут исчезнуть или остаться привилегией исключительных людей. Рай это или ад? Решайте сами.

Глава 12. Время решений. В этой завершающей главе я утверждаю, что настало время изменения отношения к технологиям: мы должны не просто применять их, а интегрировать их в человеческую жизнь, одновременно устанавливая границы. Бесчисленные этические, экономические, социальные и биологические проблемы не будут ждать следующего форума, который организует будущее поколение. Пора начать регулировать массовое применение технологий и подойти к этому так же ответственно, как мы бы подошли к регуляции любой другой силы, ведущей к изменениям, например ядерной энергии. Эта глава – не итог большого диалога, а лишь начало разговора, который должен продолжиться в медиа, в школах, в правительстве и, что особенно важно, в советах директоров. Прошло то время, когда технократы и технологи могли перекладывать этические проблемы на чужие плечи.

Я надеюсь, что эта книга вдохновит вас на размышления о вызовах, на которые нам предстоит ответить, и я приглашаю вас поучаствовать в дальнейшем обсуждении технологий против человечества на сайте www.techvshuman.com.

Герд Леонгард

Цюрих, Швейцария

Август 2016