맥스 테그마크의 라이프 3.0

감사의 말 9
프렐류드: 오메가팀 이야기 15
1. 우리 시대 가장 중요한 대화에 참여하는 것을 환영하며 40
2. 물질이 지능을 갖게 되다 75
3. 가까운 미래: 약진, 오류, 법, 무기, 일자리 117
4. 지능 폭발 187
5. 그 후: 다음 1만 년 223
6. 우리의 우주적인 재능: 다음 수십억 년과 그 너머 277
7. 목적 333
8. 의식 376
에필로그: FLI 팀 이야기 422

우리는 내 아내 마이어, 래리의 부인 루시와 함께 부부동반으로 저녁식사를 하면서 기계가 필연적으로 의식을 갖게 될 것인지 토론했는데, 래리는 그건 관심을 핵심이 아닌 다른 곳으로 돌리는 주제라고 주장했다. 그날 늦은 밤에 칵테일을 마신 뒤 길고 활발한 토론이 래리와 일론 사이에 오갔다. 둘은 AI의 미래와 무엇을 해야 하는지를 놓고 얘기를 나눴다. 토론이 새벽까지 이어지면서 참관자와 훈수꾼이 계속 늘어났다. 래리는 내가 디지털 이상주의라고 여기는 입장을 열정적으로 방어했다. 디지털 생활은 우주 진화에서 자연스럽고 바람직한 다음 단계이고 우리가 디지털 마인드를 멈춰 세우거나 노예로 만들려고 하지 않고 자유롭게 풀어놓는다면 그 결과가 좋을 것이 거의 확실하다고 말했다. 나는 래리가 디지털 이상주의자 가운데 영향력이 가장 큰 인물이라고 본다. 그는 생명이 은하계와 그 너머로 영역을 넓힐 경우(그는 그렇게 해야 한다고 생각한다), 디지털 형태가 필요할 것이라고 말했다. 그가 주로 걱정하는 것은 AI 피해망상이 디지털 이상주의의 도래를 늦추거나(또는 늦추고) AI를 군사적으로 탈취하는 파국을 일으킬 가능성이었다. 이 가능성은 구글의 ‘사악해지지 말자’라는 슬로건에 저촉되는 종류이다. 일론은 계속 맞받아치며 래리에게 그 주장의 세부 내용을 뚜렷하게 제시해보라고 요구했다. 예컨대 왜 디지털 라이프가 우리가 좋아하는 모든 것을 파괴하지 않으리라고 그렇게 확신하는지 물었다. 래리는 계속 일론을 종차별주의자speciesist라고 몰아붙였다. 탄소가 아니라 실리콘을 기반으로 한다는 이유로 어떤 생명 형태를 열등하게 취급한다는 것이었다.
/ 1장 우리 시대 가장 중요한 대화에 참여하는 것을 환영하며

《데일리메일》에서 이 제목을 봤을 때 나는 놀라서 눈이 휘둥그레졌다. “스티븐 호킹, ‘로봇의 부상浮上은 인류에게 재앙’ 경고.” 비슷한 기사를 몇 번이나 봤는지 헤아리다 잊어버렸다. 그런 기사에서는 늘 그러하듯 무기를 든 사악해 보이는 로봇이 등장하고, 로봇이 의식을 갖고(갖거나) 사악해져 봉기해 우리를 죽일지 모르니 걱정해야 한다고 제안한다. 여담인데 그런 기사는 다른 측면에서 인상적이다. 왜냐하면 내 AI 분야 동료들이 걱정하지 않는 시나리오를 간결하게 요약한 것이기 때문이다. 그 시나리오에는 의식, 악, 로봇 등에 대한 세 가지 개별 오해가 결합돼 있기 때문이다.…
기계가 사악해진다는 공포는 관심을 딴 데로 돌리는 또 다른 요소이다. 정말 걱정할 거리는 악의가 아니라 능력이다. 초인간 AI는 개념 정의상 그게 무엇이든 목표를 달성하는 일에 매우 뛰어나고, 그래서 우리는 그것의 목표와 우리 목표를 정렬해두어야 한다. 당신이 개미를 싫어해 일부러 개미를 짓밟지 않더라도 당신이 수력 녹색에너지 프로젝트 책임자이고 물을 채워야 할 지역에 개미언덕이 있다면, 개미떼에게 나쁜 일이 된다. 이로운 AI 운동은 인간이 그런 개미의 처지에 놓이게 되는 상황을 피하려고 한다.
/ 1장 우리 시대 가장 중요한 대화에 참여하는 것을 환영하며

비관론자들은 끝이 분명하다고 주장한다. 즉, 모든 군도가 결국 물에 잠기고 사람이 기계보다 저렴하게 할 수 있는 일은 전혀 남지 않으리라고 말이다. 스코틀랜드 출신 미국 경제학자 그레고리 클라크는 2007년 책 『맬서스, 산업혁명, 그리고 이해할 수 없는 신세계』에서 우리는 미래의 직업 전망에 대해 1900년 초기 자동차 시대 두 마리 말이 나눈 가상 대화에서 생각할 거리를 얻을 수 있다고 주장했다.

“나는 기술적 실업이 걱정이야.”
“걱정 마. 러다이트가 되지 말라고. 증기기관이 나와 우리의 산업현장 일자리를 차지하고 기차가 마차를 끄는 우리 일자리를 대체했을 때도 우리 선조들이 그렇게 말했지. 그러나 지금 우리한테는 더 많은 일자리가 있지 않나. 더구나 지금 일자리는 전보다 더 낫고. 나는 가벼운 마차를 끄는 편이 훨씬 좋아. 전에는 멍청한 광산 펌프를 가동하느라 하루 종일 원을 그리며 돌아야 했잖아.”
“그렇지만 내연기관이 정말 확산되면 어떻게 하지?”
“우리 말들이 여태 상상하지 못한 더 새로운 일자리가 만들어지리라고 확신해. 전에도 늘 그랬잖아. 바퀴와 쟁기가 나왔을 때도 그랬고.”

아뿔싸, 말들을 위한 ‘미처 상상되지 않은’ 새로운 일자리는 생기지 않았다. 필요가 없어진 말들은 도살되어 대체되지 않았고, 미국의 말 수는 1915년 약 2,600만 두에서 1960년 300만 두 정도로 급감했다. 기계의 근육이 말을 필요하지 않게 한 것처럼 기계의 정신이 인간에게도 같은 영향을 미칠 것인가?
/ 3장 가까운 미래: 약진, 오류, 법, 무기 일자리