이것이 생성형 AI다

김명락 지음

슬로디미디어 2025년 02월 15일 출간 국내도서 : 2025년 02월 15일 출간

작품소개

책소개

미래 과학 기술 분야의 주요 트렌드는 기술의 관점에서 결정되지 않습니다. 대중이 기술을 어떻게 이해하고, 어떤 기술에 더욱 열광하고 시장의 자본이 어떤 기술에 더욱 집중되느냐에 따라서 과학 기술 분야의 주요 트렌드가 어떤 방향으로 이어질지가 결정됩니다. 과학 기술 분야의 트렌드는 기술 자체를 다루는 연구자나 엔지니어에 의해서 결정되는 것이 아니라 기술을 이해하고 활용하려고 노력하는 대중에 의해서 결정됩니다. 즉 기술은 언제나 수단일 뿐이고, 대중에 의해서 기술 자체가 앞으로 어떤 방향으로 발전할지가 결정됩니다. 컴퓨터, 인터넷처럼 AI는 다양한 기술 분야에서 유용한 수단으로 활용될 것입니다. AI 기술이 앞으로 어떤 방향으로 발전할 것인지, AI 기술을 수단으로 활용하는 다양한 과학 분야의 향후 트렌드가 어떻게 나타날 것인지는 이 책을 읽고 있는 독자들에게 달려 있습니다.

목차

추천사 . 4

저자 인터뷰 : AI 기업 CEO가 들려주는 AI 7문 7답 . 8

프롤로그 . 22





PART 1 생성형 AI

01 챗GPT와 생성형 AI의 부상 . 31
02 생성형 AI란 무엇인가? . 33
03 생성형 AI의 본질은 대규모 언어 모델 . 37




PART 2 알파고와 챗GPT 사이의 AI 트렌드

01 알파고의 출현으로 시작된 기계학습의 대유행 . 43
02 기계학습이란 무엇인가? . 45
03 클라우드와 AI의 결합 . 48
04 기계학습의 한계는 무엇인가? . 58
05 기계학습의 대안으로 떠오른 초거대 AI . 61
06 초거대 AI란 무엇인가? . 63
07 초거대 AI의 한계는 무엇인가? . 66
08 기계학습과 초거대 AI의 중간에 위치한 대규모 언어 모델 . 68
09 초거대 AI와 대규모 언어 모델 비교 . 73




PART 3 AI 반도체, 전력 소비 문제

01 초거대 AI, 대규모 언어 모델과 AI 반도체의 관계 . 79
02 초거대 AI, 대규모 언어 모델의 전력 소비 문제 . 83
03 초거대 AI, 대규모 언어 모델의 자본주의 . 87



PART 4 대규모 언어 모델의 시작

01 대규모 언어 모델의 시조새 구글 트랜스포머 모델 . 101
02 트랜스포머 모델의 자손 GPT, BERT . 106
03 대규모 언어 모델이란 무엇인가? . 108
04 대규모 언어 모델은 언어 문제에만 쓰인다는 오해 . 112
05 시계열 예측에도 유용한 대규모 언어 모델 . 116



PART 5 전이 학습과 RAG

01 잘 아는 척하는 신입 사원 . 121
02 현장 실습, 전이 학습 . 124
03 정해진 매뉴얼 안에서만 답하기, RAG . 128
04 기계학습과 대규모 언어 모델 비교 . 131



PART 6 대규모 언어 모델 사용의 의미

01 대규모 언어 모델 사용의 효용성 . 141
02 대규모 언어 모델에 의존한 주니어들의 미래 . 143
03 갈릴레이와 대규모 언어 모델 . 147



PART 7 대규모 언어 모델을 어떻게 활용해야 하는가?

01 대규모 언어 모델은 언제 필요한가? . 155
02 대규모 언어 모델을 어떻게 활용해야 하는가? . 162
03 대규모 언어 모델의 미래 . 179


에필로그 : 생성형 AI가 만드는 미래-우리가 알아야 할 것들 . 186


참고문헌 . 190

책 속으로

컴퓨터, 인터넷, 스마트폰, 카카오톡 등의 메신저, 동영상 플랫폼, SNS, 넷플릭스 등의 OTT 서비스가 나타나기 전과 후의 세상이 완전히 다른 것은 아니다. 지금 이 기술과 서비스들을 이용하지 않는 사람들도 있고, 이를 이용하지 않는다고 해서 많은 일들이 불가능한 것은 아니다. 하지만 이 기술과 서비스에 자주 노출되고 사용하면서 자연스럽게 익숙해지면 좀 더 편리해지는 일들이 생긴다. 생성형 AI도 작정하고 긴 시간 동안 배워야 하는 매우 거창하고 어려운 기술이라고 생각하기보다는 우리가 그동안 자연스럽게 받아들였던 기술과 서비스들 중 하나일 뿐이라고 생각하고 접근하는 것이 좋다. (p34)

챗GPT와 기존 AI 서비스들의 근본적인 차이는 챗GPT의 경우 채팅창에서 사용자의 질문을 받은 후 이 질문에 맞는 답변을 생성할 때 대규모 언어 모델이라는 AI 기술을 활용한다는 것이다. 우리가 통칭해서 생성형 AI라고 부르고 있는 AI 기술 또는 서비스의 본질은 대규모 언어 모델이다. (p38)

기계학습과 경쟁하고 있는 AI 기술의 다른 한 분야는 전문가시스템이다. 우리가 언어를 배우는 과정을 예로 들어 설명하겠다. 전문가시스템은 문법 위주로 언어를 가르치는 학원에 등록하여 해당 언어에 능숙한 선생님에게 언어를 배우는 것과 같다. 전문가시스템은 언어 분야에 대한 전문성이 있는 전문가의 지식 체계와 사고방식, 논리를 AI에 심어주는 방식으로 AI를 똑똑하게 만든다. 이런 방식으로 언어를 배우면 매우 빠르게 해당 언어에 대한 기본적인 이해와 능력을 습득할 수 있듯이 전문가시스템으로 AI를 개발하면 처음부터 AI 성능을 기본적인 수준까지 끌어올릴 수 있다는 장점이 있다. 하지만 문제가 있다. 우리가 영어를 어려서부터 어른이 될 때까지 수십 년간 공부해도 쉽사리 능숙해지지 않는 것처럼 전문가시스템으로 AI를 개발하면 시간이 지나도 AI 성능이 높은 수준까지 발전하지 않을 가능성이 크다는 것이다. (p46)

일부에서는 기계학습에 필요한 빅데이터를 클라우드에 저장하면 자체 서버 안에 저장하는 것보다 보안이 더 취약해진다고 오해한다. 자신들에 관한 빅데이터가 다른 회사의 클라우드에 저장되는 상황이 정서적으로 불편하게 느껴질 수 있다. 하지만 보안 사고의 대부분은 내부 직원, 퇴사자, 협력업체 직원 등 내부인과 관련되어 벌어진다는 것을 간과해서는 안 된다. 또한 자체 서버에 기계학습에 필요한 빅데이터를 저장한다고 해서 보안이 더 강력해지는 것은 아니다. (p52)

기계학습에서는 누가, 어떤 문제를 해결하려고 하는지를 먼저 파악하고, 이 문제를 해결하기 위해서 AI 모델이 무엇을 어떤 수준의 성능으로 예측하거나 추천할지를 결정한다. 그다음 목표로 정한 성능에 맞게 AI 모델이 예측과 추천을 할 수 있도록 성능을 기계학습으로 끌어올린다. 10개의 회사가 각각 10개의 문제를 가지고 있다면 10×10=총 100개의 AI 모델이 필요하다. 기계학습을 활용할 때는 문제를 해결하고자 하는 주체에 따라서, 그리고 풀어야 하는 문제에 따라서 매번 다른 AI 모델을 새로 만들어야 한다. 이런 접근의 비효율성을 극복하기 위한 대안이 초거대 AI다. (p64)

AI 학습용 데이터를 확보한 이후에도 기계학습으로 AI 모델을 개발하는 과정이 필요하다. 대규모 언어 모델을 활용하는 것은 AI학습용 데이터를 만들어서 AI 모델을 개발하는 일까지 끝난 모델을 선택해서 활용한다는 의미이기 때문에 기계학습으로 문제를 푸는 것보다 당연히 시간, 비용, 예산을 절감할 수 있다.해결해야 하는 문제가 대규모 언어 모델로 풀 수 없을 만큼 매우 특수한 분야라면 상대적인 비효율을 감수하고 기계학습을 사용해야 하지만, 그렇지 않다면 대규모 언어 모델을 사용하는 것이 현재의 AI 개발 트렌드다. (p72)

대규모 언어 모델을 주기적으로 학습시키고 만들기 위해서는 AI모델을 학습시킬 때 사용되는 AI 반도체가 필요하다. GPT라는 대규모 언어 모델을 사용하여 챗GPT라는 초거대 AI에 해당하는 AI서비스를 만든 사례를 생각해보자. 챗GPT AI 서비스를 만들기 위해서는 챗GPT의 목적에 맞게 GPT라는 대규모 언어 모델을 끊임없이 학습시켜서 성능을 끌어올려야 하고, 이 과정에서 오픈AI는 AI 반도체를 사용했다. (p81)

AI 모델을 학습시키기 위해서는 방대한 데이터를 수집하여 가공해야 하는데, 이 과정에서 필연적으로 개인 정보에 관한 문제가 발생한다. 또한 이런 과정을 통해서 학습된 AI 모델이 인간의 기존 편견을 강화하여 인종차별, 사회적 약자에 대한 차별이나 혐오를 조장하거나 강화하는 데 악용될 수 있다. AI와 관련한 윤리적 이슈에 대해서는 이미 많은 우려와 논의가 진행되고 있다. 이 부분들은 옳고 그름으로만 볼 것이 아니라, AI를 개발하고 활용하는 과정에서 발생하는 사회적 비용으로 볼 필요가 있다. AI를 개발하고 활용하는 주체가 사회적 비용을 부담하고, 궁극적으로 이와 같은 사회적 비용을 최소화하는 방향으로 스스로 노력하도록 유도해야 한다. (p96)

대규모 언어 모델이 결과를 만들어내는 방식은 수많은 동화의 내용들을 적절하게 섞어서 그럴듯한 동화를 만들어내는 것과도 비슷하다. 프로야구 중계 캐스터와 해설자가 3시간이 넘는 시간 동안 말 한 마디마다, 한 단어마다 신중하게 고민하면서 얘기한다면 체력과 집중력이 바닥나서 경기가 끝날 때까지 대화를 이어갈 수 없을 것이다. 중계 캐스터와 해설자가 경기 진행 상황을 실시간으로 보며 그동안의 경험 속에서 연관되는 얘기들을 자연스럽게 끄집어내면서 이야기를 이어나가야 체력과 집중력을 소진하지 않을 수 있다. (p122)

대규모 언어 모델은 책, 논문, 인터넷에 존재하는 웹페이지 등 수많은 언어로 표현된 데이터들을 가리지 않고 수집하여 학습시킨 AI모델이기 때문에 마치 초벌구이가 되어 있는 고기와 같다. 초벌구이가 되어 있기 때문에 어느 정도는 익은 상태이고 바로 먹는 데는 지장이 없다. 그런데 사람마다 고기를 굽는 정도가 다르고, 양념을 바르거나 소금을 뿌리는 등 각자의 기호에 따라 맛을 더하기 위해서 선택적으로 할 수 있는 일들이 다르다. 이처럼 초벌구이가 되어 있는 고기를 가져와서 각자의 취향에 맞게 더 굽거나, 양념이나 소금, 향신료 등을 더하는 과정이 바로 전이 학습(Fine Tuning)이다. (p124)

잘 익은 김치를 촬영한 사진을 모으고, 덜 익은 김치를 촬영한 사진을 모은다. 이렇게 확보한 김치 사진들을 익은 김치 사진과 덜 익은 김치 사진으로 레이블링(분류)한 후 AI 모델을 학습시키는 데 유용하게 활용할 수 있는 형태로 만든다. 이렇게 만든 AI 학습용 데이터로 AI 모델을 반복적으로 학습시킨다. 학습이 완료된 AI 모델에 새로운 김치 사진을 입력하면 익은 김치 또는 덜 익은 김치라는 결괏값을 만들어낸다. 이 결괏값을 가지고 김치냉장고나 일반 냉장고에 넣고 먹어도 되는지, 상온에서 좀 더 익히면 좋은지 알려주는 AI 서비스를 만들면 된다. (p136)

AI 개발자는 대규모 언어 모델을 직접 다루며 만들고, 보통의 사용자들은 대규모 언어 모델을 기반으로 만들어진 AI 서비스를 이용한다. 사용자가 대규모 언어 모델을 사용한다는 것은 정확하게는 대규모 언어 모델을 기반으로 만들어진 AI 서비스를 이용한다는 뜻이지만, 이제부터는 사용자가 대규모 언어 모델을 기반으로 만들어진 AI 서비스를 이용하는 것이 곧 대규모 언어 모델을 이용하는 것과 같다고 전제하겠다. (p143)

정리하면, AI 공급자 입장에서는 자신이 만들려고 하는 AI 서비스에 필요한 AI 모델이 비용을 지불하고 사용할 수 있는 유료 AI 모델 중에는 없고, 초거대 AI를 직접 만들 만큼 자원이 충분하지 않으며 기계학습으로 AI 모델을 만들어야 할 만큼 해결해야 하는 문제가 특수하지 않다면 대규모 언어 모델이 필요하다. (p161)

대규모 언어 모델을 기반으로 만들어진 AI 서비스를 사용하는 입장에서는 프롬프트 엔지니어링을 익히고 연습하는 것이 중요하다. 프롬프트 엔지니어링(Prompt Engineering)에서 말하는 프롬프트는 대규모 언어 모델을 기반으로 만들어진 AI 서비스에 사용자가 연속적으로 하는 질문이나 요청을 말한다. 프롬프트 엔지니어링의 목표는 프롬프트를 구성하는 단어나 문장, 문법, 문맥 등의 다양한 요소를 고려하여 대규모 언어 모델이 질문이나 요청에 더 효과적으로 대답할 수 있도록 최적의 프롬프트를 생성하는 것이다. (p169)

앞으로는 반려동물을 키우는 것처럼 자신만의 대규모 언어 모델을 키운다고 인식하는 사람들이 늘어날 것이다. 특정한 문제를 해결하는 데 최적화된 기계학습으로 만든 AI 모델에 의미나 인격을 부여하기는 어렵지만, 대규모 언어 모델은 기본적으로 인간과 대화할 수 있고, 사용자와 상호작용을 통해서 변화하고 발전하는 것을 체감할 수 있기 때문에 반려동물처럼 의미를 부여하기가 훨씬 용이하다. (p183)

출판사 서평

***** 「이것이 인공지능이다」 과학기술정보통신부 ‘우수과학도서’ 선정 작가!
***** 5년간 독자들이 선택한 인공지능 분야의 최장기 베스트셀러 이은 3번째 책!
***** 기업 ㆍ 기관 ㆍ 학교 선정 올해의 경제 경영 화제의 책!

생성형 AI가 무엇인지,
이 기술을 어떻게 활용하면 좋을지에 대한
이야기를자연스럽고 담백하게 풀어낸 책

생성형 AI에 관해 쉽고 친근하게 풀어내어 일반인도 쉽게 이해할 수 있는 AI 안내서!
컴퓨터, 인터넷, 스마트폰, 카카오톡 등의 메신저, 동영상 플랫폼, SNS, 넷플릭스 등의 OTT 서비스가 나타나기 전과 후의 세상이 완전히 다른 것은 아니다. 지금 이 기술과 서비스들을 이용하지 않는 사람들도 있고, 이를 이용하지 않는다고 해서 많은 일들이 불가능한 것은 아니다. 하지만 이 기술과 서비스에 자주 노출되고 사용하면서 자연스럽게 익숙해지면 좀 더 편리해지는 일들이 생긴다. 생성형 AI도 작정하고 긴 시간 동안 배워야 하는 매우 거창하고 어려운 기술이라고 생각하기보다는 우리가 그동안 자연스럽게 받아들였던 기술과 서비스들 중 하나일 뿐이라고 생각하고 접근하는 것이 좋다. 인터넷이 나름의 역할을 하면서 인간의 삶과 비즈니스를 좀 더 낫게 만든 부분도 있지만, 인터넷이 역할을 할 수 없는 삶과 비즈니스도 있다. 이처럼 생성형 AI가 역할을 할 수 있는 부분도 있고, 그렇지 않은 부분도 존재한다. 인터넷 검색이 보편화되면서 우리의 일상과 일하는 방식이 바뀐 것처럼 생성형 AI는 딱 그 정도의, 또는 그것보다는 좀 더 큰 폭의 변화를 우리에게 선사할 것이다. 당장 챗GPT나 유사한 생성형 AI에 이런저런 말을 걸어보면서 생성형 AI를 일상의 일부로 만들어보자.

작가정보

저자(글) 김명락

초등학생 때부터 컴퓨터게임 프로그래머로 활동했고, 고등학생 때 핵융합에 대한 언론 기사를 읽은 후 이것이 인류의 미래라고 확신하고 서울대학교 원자핵공학과에 입학했다. 컴퓨터공학을 부전공하며 컴퓨터에 대한 관심을 이어갔고, 대학원에서 현재의 딥러닝(Deep Learning) 기술의 전신인 인공 신경망(Neural Network)을 활용하여 핵융합 장치 안 플라스마의 위치와 모양을 파악하는 연구를 했다. 2002년 초에 대학교 과 친구들과 함께 창업하고, 2003년에는 인터넷 음식 주문 서비스 사업, 2004년에는 현재의 SNS와 유사했던 모바일 블로그 사업을 했다. 이후 LS전선, 티엠씨, 삼성물산에서 근무하면서 사회생활과 비즈니스를 배웠다. 핀란드 알토대학교 경영대학원에서 공부하면서 다시 창업하기 위해 준비한 끝에 2015년 7월에 인공지능 회사를 창업하여 현재까지 운영하고 있다. 한국외국어대학교, 연세대학교, 을지대학교에서 겸임교수로서 인공지능에 대해 강의하면서 인공지능의 저변을 넓히기 위해 노력했다. 창업 초기에는 인공지능을 활용하여 유동 인구 데이터를 분석하는 서비스를 개발했으나 현재는 스포츠 분야의 자체 서비스를 개발해서 사업적으로 성공하기 위해 분투하고 있다. 인공지능을 활용한 서비스를 성공시키기 위한 노력과 함께, 다양한 산업과 고객의 많은 문제를 해결하기 위해 인공지능을 활용한 컨설팅 및 개발을 해왔다. 지난 10년간 인공지능 기술의 트렌드가 딥러닝이 중심이된 기계학습에서 흔히 생성형 AI라고 불리는 대규모 언어 모델(LLM)로 이어지는 현장의 한가운데에 있었다. 이 경험을 바탕으로 대중이 인공지능을 더 잘 이해하고 유용하게 활용할 수 있도록 『이것이 인공지능이다』와 『청소년을 위한 이것이 인공지능이다』를 집필했다.