새로운 질서 #1 독후감

[yoonminsang]

서문

추모의글

마음의 이상주의는 이성의 현실주의와 양립할 수 있으며 전자가 후자를 고귀하게 만든다는 것을 그는 평생에 걸쳐 증명하려고 애썼다.

---

나는 10년넘게 전공서적을 제외한 책을 거의 읽지 않았다. 그리고 비교적 최근에 책을 읽기 시작했다. 그 책도 너무 좋아서 충격받았는데 이건 더 충격을 받았다. 위 한 문장만으로도 이 책을 읽을 가치가 있다고 느껴졌다. 나는 슬픈 영화를 봐도 울지 않는 사람인데 눈물이 나려고 한다.

나는 이성의 현실주의에 가까운 사람이다. 그래서 비판적 사고와 긍정적 사고를 하는 사람이라고 생각해왔다. 어쩌면 내 긍정적 사고는 마음의 이상일지도 모른다. 그리고 비판적 사고는 이성의 현실주의와 맞닿아있는 것 같다.

우리 모두는 이상과 현실을 모두 바라본다. 사람에 따라 이상과 현실을 바라보는 비중이 다를뿐이다. 인간이란 원래 그렇지만 최근들어 이분법적인 사고와 그에 따른 갈등이 늘어나는 것 같다. 모두 장단점이 있으니 서로 잘 융화되어서 잘 지냈으면 하는 작은 바람이 있다.

---

세상을 건설하는 과정에서 자유, 선택, 자율성의 역할이 얼마나 중요한지 알았다. 인간은 미래가 필연적이라 상정하고 살지 않으며 그렇게 살아서도 안 된다고 믿었으며, 이를 이론상은 물론 실제로도 증명해보였다.

들어가는글

인간이 목적을 정하고 그것을 달성 하기 위해 AI를 이용할 것인가, 아니면 AI가 목적의 일부를 직접 정하도록 허락할 것인가? 무엇보다 인류가 향후 의사결정에 철학적 방향을 제시할 수 있도록, 인간의 존엄성을 현대적이고 지속 가능하게 정의하는 일이 가장 시급하다.

1부 시작

1장 발견

인간종의 역량 가운데 가장 즐거운 능력을 하나만 꼽으라면 단연 발견이다. 지구가 둥근지 확인하는 항해, 남극 탐험, 우주 탐사 등 발견을 위해 위험을 무릅쓰고 다양한 탐사를 해왔다.

인공지능의 등장

AI는 두렴움이 없기 때문에 겁먹지 않는다. 수치심을 느끼지 않아 시래에 주저함이 없다. 신속하게 목표를 재조준할 수 있어서, 높은 실패율을 감당할 수 있다. 미래에는 AI를 이요한 탐사가 재정적, 정치적 부담이 되지 않을 것이다. 하지만 완전히 자유로울 수는 없다.

박식가

한 분야의 지식이라도 다 알려면 평생 노력해야 하는 보통 사람들과 달리 여러 분야의 지식을 통달한 박식가들이 있었다. 폰 노이만과 같은 탁월한 지성 덕분에 인류는 지성의 정점에 도달하여 지적인 지평을 확장할 수 있었을지도 모른다. 하지만 박식가가 되는 것은 현실적으로 어렵다. 오늘날의 혁신은 뛰어난 1인보다는 팀에서 많이 발생한다. 그러나 여러 사람에게서 나온 지식을 통합하는 일은 매우 어렵다. 특히 최고의 지성들 중에서는 협업자의 수가 매우 적어 소통으로 시너지가 발생하기 힘들 수 있다.

이와 반대로 AI는 최고의 박식가가 될 것이다.

21세기의 탐사

물리학자들은 현실의 양극단에서 인간의 존재를 설명하려는 두 개의 양립할 수 없는 이론을 통합해줄 '대통일 이론Grand Unified Theory'을 꾸준히 찾고 있다. 우주론(일반상대성이론)과 아원자론(양자역학)이 바로 그 두 이론이다. AI는 겉보기에 완전히 별개인 이해의 영역들에 질서와 체계를 부여한다. 양립 불가능한 신념 체계들을 화해시키는 데에 일조할 수도 있다.

AI는 가장 큰 결실을 안겨줄 탐사 방법을 놀라운 정도로 정확하게 판단할 수 있다.(ex 알파고)

AI는 축적한 지식을 파괴적인 목적으로 사용할 수 있다.

컴퓨팅을 개발할 때에도 그랬듯이 인간의 목적에 부합하게 AI를 개발하려는 인간의 노력은 다른 모든 인간의 탐사를 촉진할 것이다.

2장 뇌

우리는 현재 처한 상황을 두 가지로 생각할 수 있다.

첫째는 익숙한 것들의 반복이다. ex) 바퀴는 이동거리의 피로를 줄임, 엑스레이는 시력의 범위를 확장, 전화는 소리를 증폭.

두번째는 천년 동안 진화해온 결과물인 뇌의 대응물을 수십년만에 만들어냄으로써, 지금까지 인위적인 복제나 재창조가 불가능했던 마지막 기관인 뇌를 정복하려 한다.

속도

AI는 프로그래밍되지 않고 학습하여 세상을 이해한다.

인간 교육자는 정기적으로 기계에게 출력값의 정확도와 품질을 피드백한다. 그러면 기계는 '역전파back-propagation'를 거쳐 수정 사항을 받아들인다.

미국에서 보통의 고등학생이 4년만에 졸업하는 반면, AI는 그보다 많은 지식을 4일만에 손쉽게 학습할 수 있다.

보통의 AI 슈퍼 컴퓨터는 이미 인간 뇌보다 1억 2000만배 빠르다.

인간과 기계 모두 지능 훈련을 일단 마치면 일노상 이제 '생각'(추론inference)을 할 수 있다.

인간의 뇌가 정보를 완벽하게 회상하도록 암기하지 않듯이 AI도 훈련 자료로 사용한 원천 데이터에 더는 접근할 필요가 없다.대신 길잡이 역할은 하는 거친 직관만 남게 된다.

모호성

머신러닝으로 훈련된 모델은 인간이 새로운 발견(모델의 출력값)을 알게 해주지만 그 발견이 이루어진 방법(모델의 내부 과정)을 이해하게 허용하지는 않는다.

개인의 역량, 주관적인 이해, 객관적인 진리라는 핵심 요소들은 모두 함께 움직였다. 그런데 인간은 기계의 내부 과정을 제대로 표현할 수조차 없다. 계몽주의적 추론에 따르면 기계의 출력값을 진실로 받아들일 수 없다. 하지만 인류는 이미 AI 출력값 대부분이 진실이라고 받아들였다.

AI 시대엔 인류의 발전이 가로막히고, 우리가 정당성 없는 권위를 수용할 수밖에 없었던 전근대 상태로 회귀하고 말 것인가?

---

바이브 코딩관련해서도 얘기가 많이 나오는데 동일한 얘기인 것 같다. 바이브코딩관련해서는 내 의견이 있고 이게 어느정도 다른 분야에도 통용된다고 생각한다. 하지만 그렇다고 해서 다른 모든 분야에 대해 확정하기는 어려운 것 같다.

---

다양성

AI는 전 분야에 걸쳐 반복되는 작은 변화들에서 비롯된 다양성의 가장 두드러진 사례가 될 수 있다.

규모와 해상도

고유한 조사와 학습 방법으로 AI는 크기(규모)와 정확도(해상도)면에서 비인간적인 업적을 달성하여 인간의 발명이나 인간종 자체와 근본적으로 다른 변화를 촉진할 것이다.

지금까지 AI에게 적용된 '규모의 법칙scaling laws'은 진실로 보이지만, 우리는 매개변수의 수가 기하급수적으로 증가하면 모델이 얼마나 정확한 기량을 끌어올릴지 알 수 없다.

---

이 책에서 얘기한게 맞았다. 규모의 법칙은 더이상 통하지 않는다는 얘기가 나오고 있다.

---

규모의 핵심적인 부작용은 해상도다. 인간은 오랫동안 범위를 넓혀 아주 작은 것과 아주 먼 것을 관찰하고 싶어 했다. 여기서 가장 저평가된 도구가 바로 평범한 펜이다. 글쓰기는 복잡한 정보와 지식을 부호화하고 전파하는 뛰어난 도구고, 그 중에서도 수학은 가장 순수하고 보편적인 인간의 언어로, 다른 언어 없이 수학만으로도 난해한 사상을 전달하고 기술 프로젝트에서 협력을 촉진할 수 있다. 한편 언어는 1바이트라는 용량 안에 담을 수 있는 다양성과 형태의 아름다움이 이례적으로 뛰어나다. 언어는 인류가 발명한 가장 효율적인 데이터 체계다.

관찰 가능한 정보를 생산하기 위해 현실을 확장하거나 축소한 후에도 인간은 두 번째 단계를 수행해야 한다. 즉, 그 정보를 유용하게 만들기 위해 미가공 정보를 추상화해야 한다. 오늘날 AI가 바로 같은 일을 수행한다.

이러한 유사성이 있지만 AI는 인간과 다르다. AI는 규모가 증가함에 따라 더 많은 정보를 동시에 처리하고, 정보의 세부 사항을 불필요하게 희생시키지 않고서도 유용한 분석을 생산할 수 있다.

초기 AI는 이 인터넷의 텍스트로 훈련해서 인류는 알지 못하는 우리에 대한 새로운 지식을 거시적, 미시적으로 모두 밝혀낼 것이다.

동물의 왕국

인간에게 '개념'은 풍부한 의미를 담으며 기쁨이나 슬픔을 심도있게 표현하는 도구다. 이와 반대로 기계의 이해는 가짜처럼 보인다. 그러나 인간의 생물학적 회로도 실리콘 회로만큼 기계적이며, 인간의 뇌가 작동하는 과정은 기계가 작동하는 방식보다 더 특별해보이지 않는다.

AI는 오랫동안 플라톤의 동굴에 갇힌 죄수에 비유되었다. 이 죄수는 다른 것은 알지 못한 채 벽에 드리운 그림자가 현실의 전부라고 믿는다. 진취적인 죄수 한 명이 벽 위의 그림자가 더욱 차원이 많은 더 큰 세상을 나타낼지 모른다고 우연히 추정하기만 하면 된다.

AI에게만 있고 인간은 가진 적이 없는 지식, 특히 물리적 세상에 대한 지식이 출현하면 인간 정신의 상대적인 지위를 재고해야만 한다.

우리는 "인간 > 동물 > 기계" 로 믿고 있었다. 이 존재의 위계를 재편하려고 할 때, 분명 혼란스러운 논쟁이 뒤따를 것이다. 인간이 동물의 소통을 해독하는데 이미 AI모델을 사용하고 있다. 동물-인간-기계의 소통은 복잡한 삼자 협상을 초래한다.

이중역설

이 책의 저자들은 AI가 속도, 다양성, 규모, 해상도에서 인간 뇌를 추월하여 인간이 지금까지 그려온 지능의 위계를 재편할 거라고 확신한다.

만일 우리가 인간 뇌의 역량을 월등히 뛰어넘는 기계를 제작하길 바란다면, 결국 최초의 청사진에서 벗어나야 하지 않을까? 가령 비행기는 새에서 영감을 얻어 발명되었지만 공학적으로 새를 모방하지는 않았다. 따라서 현대의 제트기는 하늘을 지배하는 가장 우수한 생명체보다 더 뛰어나다. 발명의 원천을 완전히 바꾸지 않는다면, 새로운 결과를 달성하리라 기대할 수 없다.

---

발명의 원천을 완전히 바꾸지 않는다면, 새로운 결과를 달성하리라 기대할 수 없다.

성과를 내고 싶으면 실행하라 책에서 "한 번도 달성한 적 없는 목표를 달성하려면, 한 번도 해본 적 없는 행동을 해야 한다." 이런말이 나온다. 그때 인상깊은 구절이라서 기억하고 있었는데 이 책에서도 나왔다. 나도 부족한 부분을 채우기 위해 하는 고정화된 루틴들이 있는데 조금 더 새로운걸 시도해봐야하나? 라는 생각이 든다.

---

우리가 완전히 이해하지 못하는 인간 뇌를 모방하여 더욱 우수한 무언가를 만들려고 노력하는 역설에 직면했다.

만일 우리가 만든 도구가 인간의 지적이고 창의적인 기능을 대체로 반영하지만 인간 정신은 닮지 않는다면, 앞으로 출현할 AI는 신에 대한 인류 고유의 성찰과 더불어 인간이 신과 특별한 관계를 맺었다는 뿌리 깊은 믿음을 위태롭게 만들지 않을까?
혹은 반대로 인간 뇌와 구조가 닮은 뛰어난 기계 지능이 출현하고 인간이 그것에 크게 의존하게 되어, 우리 인간이 신이 되리라 믿는 사람들 또는 신과 구분되지 않게 되리라 믿는 사람들이 등장하지 않을까?

---

기승전결이 완벽한 글이다. 결국 이 말을 하고 싶었구나 라는게 느껴졌다. 나는 사실 AI는 AI일 뿐이라고 생각했었다. 일자리를 뺏고 있는 사실은 부정할 수 없지만 AI가 인간을 지배한다던가 이런건 현실적이지 않다고 생각했다. 근데 뇌의 관점에서 봤을 때는 굉장히 흥미로웠다. 확실히 지금까지 인간의 사고와 완전 다른 방향으로 발전하게 된다면 그건 기술적으로도 철학적으로도 깊게 고민해봐야할 문제다.

---