한국어, 코퍼스 그리고 자연언어 처리

황화상 지음

박이정 2023년 09월 15일 출간 종이책 : 2023년 08월 30일 출간

작품소개

책소개

최근 언어 연구의 새로운 흐름은 언어 자원으로서의 코퍼스, 도구로서의 컴퓨터, 방법론으로서의 전산학이 주도해 왔다. 코퍼스 언어학은 이러한 새로운 흐름을 언어 자원으로서의 코퍼스에 주목하여 일컫는 것이다. 그리고 이 흐름을 전산학의 방법론에 초점을 두어 이름한 것이 전산 언어학이다.
이 책의 제2부에서는 명사의 분포와 기능, 의존 명사의 의존성과 조사 결합, 조사의 중첩을 중심으로 코퍼스 언어학을 배경으로 한 한국어 연구에 대해 살펴본다. 제3부에서는 한국어 형태소 분석에서 제기되는 주요 문제들을 중심으로 전산 언어학을 배경으로 한 한국어 자연언어 처리에 대해 살펴본다. 부록은 파이선을 배우고 이 책에서 활용한 프로그램들을 직접 작성해 볼 수 있도록 하기 위한 것이다.
언어 연구에서 코퍼스를 효율적으로 이용하고 컴퓨터로 자연언어를 처리하기 위해서는 프로그래밍(알고리즘 작성 및 코딩)이 필수적이다. 지금은 파이선과 같이 누구나 쉽게 배워서 쓸 수 있는 프로그래밍 언어가 있다. 파이선 코딩의 기초는 [부록1]을 차례대로 따라 해 보면서 파이선의 문법을 이해하고 익히는 것만으로도 충분하다. 언어 처리를 위한 알고리즘의 이해와 작성에 대해서는 [부록2]를 참조할 수 있다.

목차

머리말

제1부 언어와 컴퓨터
1. 기호로서의 언어, 그리고 정보
2. 도구로서의 컴퓨터
3. 언어 자원으로서의 코퍼스

제2부 분포와 빈도에 기반한 한국어 연구
4. 코퍼스 기반 언어 연구의 기초
5. 명사의 분포와 기능
6. 의존 명사의 의존성과 조사 결합
7. 조사의 중첩

제3부 한국어 자연언어 처리
8. 자연언어 처리와 언어 연구
9. 한국어 자연언어 분석의 이해
10. 음절 특성을 활용한 형태소 분리와 원형 복원
11. 공기어 분석에 기반한 형태론적 중의성 해소
12. N-gram과 조합을 이용한 미등록어 분석

부록
1. 파이선 기초
2. 파이선 언어 처리 프로그래밍

참고문헌
찾아보기

작가정보

저자(글) 황화상

고려대학교 국어국문학과를 졸업(1994)하고 같은 대학의 대학원에서 석사 학위(1996)와 박사 학위(2001)를 받았다. 고려대학교 민족문화연구원 기계번역실 연구원으로 있으면서 영한ㆍ한영 기계번역기 개발에 참여했다. 창원대학교 국어국문학과에서 부교수로 있었고, 현재 서강대학교 국어국문학과에서 국어 문법 분야의 강의를 하고 있다.

E-mail: [e-mail]

주요 논저
국어 형태 단위의 의미와 단어 형성(2001)
한국어 전산 형태론(2004)
국어 조사의 문법(2012)
한국어 표준 문법(2018, 공저)
「단어형성 기제로서의 규칙에 대하여」(2010)
「어휘부의 구조, 그리고 단어의 분석과 형성」(2013)
「어근 분리의 공시론과 통시론」(2016)
「접미 한자어의 형태와 의미」(2017)
「접사의 지배적 기능에 대하여」(2018)
「‘하다’ 없이 나타나는 ‘않다’에 대하여」(2021) 등