С начала существования человечества мы были самыми умными существами на планете и прочно закрепились на вершине пищевой цепочки. Мы делали все что хотели, а все остальные существа должны были подчиниться. Но мы были настолько умными, что сами создали сначала глубокое обучение[1], а на его основе – своего не просто сильного, но и непобедимого конкурента.
Предсказание будущего не назовешь точной наукой, но, когда есть очевидные признаки, нетрудно сделать весьма правдоподобный прогноз.
Если вы оказались на морозе –30 в одной футболке, вы продержитесь несколько часов, не более.
Нам не нужен хрустальный шар, чтобы предсказать будущее. Мы берем то, что знаем о настоящем (мороз, слишком легкая одежда), траекторию из прошлого (человек в таких условиях начинает дрожать, затем движения замедляются, снижается пульс, и наконец исчезает способность дышать), добавляем немного знаний (люди, даже те, кто обучен выживанию в критических ситуациях, в итоге погибают) и получаем представление о том, что, скорее всего, произойдет.
Однако предсказания не сбудутся, если изменятся условия – мы найдем теплое место, или одежду по сезону, или температура внезапно станет плюсовой.
То, что нам известно об искусственном интеллекте и траектории, которой мы следовали в последнее десятилетие, подсказывает, что большая часть нашего будущего уже предначертана и мы неизбежно столкнемся со следующими факторами:
▶ Искусственный интеллект уже создан, его не остановить.
▶ Машины станут умнее людей, и скорее раньше, чем позже.
▶ Ошибки будут случаться.
Мы неизбежно столкнемся с относительно мрачным будущим. «Относительно», потому что оно не дотягивает до сценариев конца света, которые мы с ужасом наблюдаем в научно-фантастических фильмах. Однако не стоит обольщаться: даже относительно мрачные сценарии наносят ущерб.
Одни машины будут делать в точности то, что им говорят, а другие – конкурировать со своими собратьями, подвергая нас риску. Некоторые машины неправильно поймут, что мы им поручили, и в результате нанесут ущерб. Машины будут страдать от багов, вирусов и ошибок в коде, но все без исключения рано или поздно будут выполнять задачи, за которые ранее отвечали люди, и ценность человечества неминуемо уменьшится.
Если мы хотим найти способ предотвратить эти сценарии, действовать нужно прямо сейчас.
Сингулярности случались в истории человечества много раз. Как говорит футуролог Джейсон Сильва: «С любой другой прорывной технологией было то же самое. Мы создаем инструмент, а затем инструмент создает нас».
Когда люди впервые заговорили, это было технологией, последствия которой были непостижимы для примитивных существ – наших далеких предков.
Первые автомобили, которые должны были заменить лошадей, пугали наших прадедушек и прабабушек.
Когда Билл Гейтс заявил, что «ПК будет на каждом столе и в каждом доме», это казалось невероятным для наших родителей, которые теперь, 40 лет спустя, не расстаются со смартфонами.
Каждое изобретение изменило нашу жизнь так, как мы не могли бы предсказать. Но ситуация, в которой мы сегодня оказались, уникальна. Каждая технология, которую мы когда-либо создавали, вплоть до создания искусственного интеллекта, была просто инструментом, непонятным, инновационным, но полностью контролируемым человеком. И мы этим инструментом пользовались. Мы говорили ему, что делать, и он это делал. У него не было ни воли, ни выбора. Конечно, иногда мы допускали ошибки, и это приводило к некоторым проблемам, которые можно было без особых усилий решить.