제     출     문

국립국어원장 귀하

21세기 세종계획 “국어 기초자료 구축”에 관하여 귀 원과 체결한 연구

용역 계약에 의하여 연구 보고서를 작성하여 제출합니다.

2007년  12월  10일

총괄 연구 책임자 : 김흥규(고려대학교)

■ 세부 과제명	: 현대국어 기초 말뭉치 개발

연구 책임자	: 김흥규(고려대학교)

연   구  원	: 강범모 외 1명

연구 보조원	: 김민지 외 9명

보   조  원	: 이회미 외 1명

요     약     문

1. 사업명

국어기초자료 구축

2. 연구의 목적

이 연구는 우리나라의 선진 정보문화의 기본 바탕과 자원을 확충하는 국어정보화 중장기 발전계획의 일환으로 수립되어 10년 간(1998～2007) 3단계에 걸쳐 진행되는 <21세기 세종계획>의 제 3단계 4차년도 사업이다.

2004년부터 시작된 제 3단계 사업에서는 각종 말뭉치 구축 사업을 지속적으로 진행하는 동시에, 그간 구축된 말뭉치의 통합, 조정, 분석 및 서비스를 위한 종합적 연구를 수행하는 것을 목표로 삼는다.

이러한 목표 아래 3단계 사업의 첫 해인 2004년에는 저작권 승인을 받은 현대국어 원시 말뭉치 500만 어절, 형태분석 말뭉치 200만 어절, 형태의미분석 말뭉치 250만 어절, 구문분석 말뭉치 20만 어절을 구축한 바 있다. 2005년에는 기초 말뭉치로 형태분석 말뭉치 300만 어절, 형태의미분석 말뭉치 200만 어절, 구문분석 말뭉치 20만 어절을 구축함과 동시에, 기존에 구축 된 구문분석 말뭉치를 기반으로 작업자의 개입을 최소화할 수 있는 지능형 구문분석 도구를 개발하였다. 2006년에는 현대국어 기초 말뭉치 개발과 현대국어 기초 말뭉치 활용 시스템 개발 사업이 진행되었다. 현대국어 기초 말뭉치 개발에서는 기존에 구축된 말뭉치 중에서 균형성이 확보된 원시 말뭉치 500만 어절, 형태분석 말뭉치 500만 어절, 형태의미분석 말뭉치 500만 어절을 정제했고, 형태의미분석 말뭉치 250만 어절, 구문분석 말뭉치 25만 어절을 구축했다. 또한 현대국어 기초 말뭉치 활용 시스템 개발에서는 원시 말뭉치, 형태분석 말뭉치, 형태의미분석 말뭉치, 구문분석 말뭉치를 통합하여 사용자 요구에 적합한 용례 및 통계정보를 추출할 수 있는 색인 및 검색 도구를 개발하였다.

제 3단계 사업의 4년차인 2007년에는 기구축된 말뭉치 중에서 균형성이 확보된 형태분석 말뭉치 750만 어절, 형태의미분석 말뭉치 750만 어절을 정제함으로써, 말뭉치의 일관성을 확보하고 완성도 높은 말뭉치 활용을 도모하고자 한다.

3. 연구의 필요성

우리의 국어 생활을 과학적 토대 위에서 향상시키고 국어의 특성에 적합한 정보 문화와 새로운 정보 처리 이론 및 기술을 발전시키기 위해서는 그 기반으로서 대규모의 국어 텍스트 말뭉치가 필요하다.

어문 생활과 정보 처리의 선진화 및 효율화를 추구하는 국가들은 모두 자국어를 중심으로 한 기초 언어 자료 데이터베이스를 구축하고 있으며, 이를 통해 언어 정책의 수립과 교육의 효율화는 물론 정보처리의 생산성을 높이는 데 커다란 효과를 얻고 있다. 우리나라에서도 정보화가 국가적 과제로 요구되는 상황에서, 국민들 모두가 우리말로 쉽고 편리하게 정보를 찾고 활용할 수 있게 하기 위해서는 우수한 품질과 대용량의 규모를 갖춘 국가적 언어자료 기반의 지속적 축적이 필수적이다.

아울러, 현대 국어는 국어의 역사적 발전·변화의 산물이며, 공간적으로는 국내 각 지역의 방언을 포함하고, 북한 지역 및 국외에 있는 동포들의 한국어까지를 포용하는 것이다. 이에 대한 심층적 연구와 한민족의 언어적·문화적 통합을 위한 기반을 마련하기 위한 언어 자원의 확보 또한 긴요하다. 특히 각종 언어 정보가 부착된 분석 말뭉치의 개발은 보다 전문적이고 효과적인 언어 정보처리에 기여할 수 있으며, 한국어 연구에도 기여하는 바가 크다.

이와 같이, 국어 정보화를 위해서는 그 자료 기반으로서 대규모의 말뭉치가 필수적이며, 언어 처리를 위한 다양한 정보를 대규모의 말뭉치에서 통계적 방법으로 추출하는 것은 언어 연구와 정보처리 선진화에 필수적인 과제이다. 이를 위해 정밀한 언어 분석 및 이론, 기술 개발의 기반으로 쓰일 수 있도록 기초 말뭉치에 여러 분석 표지를 부착한 분석 말뭉치의 개발이 필요하다.

그런데 대규모의 말뭉치가 오랜 기간에 걸쳐 구축됨에 따라 분석지침에 변화가 있어왔고, 구축 시기에 따라 말뭉치에 적용된 분석기준에는 차이가 있었다. 따라서 이제까지 구축된 말뭉치가 최신의 분석지침에 부합하도록 하며, 말뭉치 전체의 일관성이 확보될 수 있도록 하기 위해서는 이미 구축되어있는 말뭉치의 정제 사업이 필요하다. 이와 같은 사업을 통해, 완성도 높은 말뭉치 활용이 가능하게 될 것이다.

4. 연구 내용 및 결과물

2007년도 세종계획에서는 현대국어 형태분석 말뭉치와 형태의미분석 말뭉치에 대한 정제가 이루어진다. 정제 대상 말뭉치는 장르별 균형을 고려하여 선정되었고, 정제 대상 말뭉치의 규모는 형태분석 말뭉치와 형태의미분석 말뭉치 각 750만 어절이다.

1) 현대국어 기초 말뭉치 정제

가) 구성 : 형태분석 말뭉치 750만 어절, 형태의미분석 말뭉치 750만 어절

나) 오류

- 형태분석 말뭉치: 0.3% 이내

- 형태의미분석 말뭉치: 0.3% 이내

다) 결과물 : 전산 파일(CD-ROM) 10장, 보고서 200부

5. 연구 결과의 활용

본 연구의 성과는 이후의 기초 언어자료 구축 연구에 계속 반영될 것이며, 적절한 과정을 거쳐 전문 연구기관, 학자, 산업체 및 국어 연구 교육 분야에 보급됨으로써 국어 정보화의 전 사회적 역량을 증진하는 데 기여하도록 한다. 보급은 ‘국어정보관리센터’를 통해 자료의 특성과 저작권 등의 사항을 고려하여 이루어지도록 한다.

1) 세종계획 홈페이지

가) 현재 운영되고 있는 세종계획 홈페이지를 통해 국어 정보화 사업인 <21세기 세종계획>의 홍보와 함께 자료들을 공개한다.

나) 홈페이지를 통해 기초자료뿐 아니라 <21세기 세종계획>의 다른 분과의 결과물도 제공된다.

2) 전문기관 연구용 배포

가) 매년 세종계획을 통해 구축되는 자료들은 주관기관(국립국어연구원)이 판단하여 전문기관에 한정적으로 배포하고 있고, 배포된 자료들은 사업의 평가나 <21세기 세종계획> 내 분과 간 협력 등의 목적으로 이용되고 있다.

3) 일반 사용자 배포

가) 저작권자로부터 사용 승인을 얻은 말뭉치 자료와 분석 정보, 각종 분석도구를 일반 연구자와 사용자들에게 배포하여 국가적 자원의 활용도를 높이고 우리 사회 전체의 정보처리 역량을 증진하는 데 기여한다.

6. 참여 연구진

■ 세부 과제명: 현대국어 기초 말뭉치 개발

∙ 연구책임자	김흥규	고려대학교 국어국문학과

∙ 연구원	강범모	고려대학교 언어학과

홍정하	고려대학교 민족문화연구원

∙ 연구보조원	김민지	고려대학교 교육대학원

김보라	고려대학교 국어국문학과

김승우	고려대학교 국어국문학과

김윤희	고려대학교 국어국문학과

김주영	고려대학교 언어학과

여형옥	고려대학교 국어국문학과

정연주	고려대학교 국어국문학과

정우준	고려대학교 언어학과

최민우	고려대학교 언어학과

허영진	고려대학교 국어국문학과

∙ 보조원	이회미	고려대학교 국어국문학과

최혜림	고려대학교 국어국문학과

연구 추진 실적

1. 1단계 연구추진 실적(1998～2000)

구분 연도			1998	1999	2000	합계/비고
말뭉치	세종말뭉치 통합처리		(7,500만 어절 )			(누계 합산 제외)
	현대 국어	기초말뭉치	1,600만 어절	1,600만 어절	800만 어절	4,000만
		형태소분석		150만 어절	200만 어절	350만
개발 규모 합계			1,600만 어절	1,750만 어절	1,000만 어절	4,350만
방법론, 표준화 연구			-어절분석표지 표준화 연구 -병렬말뭉치 구축 기초연구 -말뭉치 구성방법론 연구	-구문분석 방법, 표지 표준 연구	-형태 분석 말뭉치를 이용한 국어의 문법 현상에 대한 계량적 연구
소프트웨어 개발			-각종 기초 도구 -용례추출기	-지능형 형태소 분석기	-말뭉치 통합 응용 시스템
사업 진도 (%)			100	100	100	100
연구비 (천원)			459,000	510,000	376,000	1,345,000 1998, 1999년도 연구비는 구어자료, 역사, 구비, 병렬말뭉치 구축 사업까지 포함한 것임

2. 2단계 연구추진 실적(2001～2003)

구분 연도			2001	2002	2003	합계/비고
말뭉치	현대 국어	기초말뭉치	700만 어절	500만 어절	500만 어절	1,700만 어절
		형태 분석	200만 어절	250만 어절	200만 어절	650만 어절
		형태 의미 분석	150만 어절	200만 어절	200만 어절	550만 어절
		구문 분석	기초 연구	3만 어절	12만 어절	15만 어절
개발 규모 합계			1,050만 어절	953만 어절	912만 어절	2,915만 어절
방법론, 표준화 연구			체언 어절을 구성 하는 형태소의 빈도 (분포별 빈도, 개별 빈도 추출)	국어 연구에서의 말뭉치 활용방법 연구
소프트웨어 개발			구문 태그 부착 말뭉치 구축도구	반자동 구문분석 말뭉치 구축도구 개발	구문분석 말뭉치 종합 관리 도구 개발
사업 진도 (%)			100	100	100	100
연구비 (천원)			410,000	420,000	395,000	1,225,000

3. 3단계 연구추진 실적(2004～2007)

구분 연도			2004	2005	2006	2007	합계 /비고	누적 합계
말뭉치	현대 국어	원시말뭉치	500만 어절	-	-	-	500만 어절	6,200만 어절
		형태분석 말뭉치	200만 어절	300만 어절	-	-	500만 어절	1,500만 어절
		형태의미 분석 말뭉치	250만 어절	200만 어절	250만 어절	-	700만 어절	1,250만 어절
		구문분석 말뭉치	20만 어절	20만 어절	25만 어절	-	65만 어절	80만 어절
개발 규모 합계			970만 어절	520만 어절	275만 어절	-	1,765만 어절	9,030만 어절
말뭉치	정제	원시말뭉치	-	-	500만 어절	-	500만 어절	500만 어절
		형태분석 말뭉치	-	-	500만 어절	750만 어절	1,250만 어절	1,250만 어절
		형태의미 분석 말뭉치	-	-	500만 어절	750만 어절	1,250만 어절	1,250만 어절
		구문분석 말뭉치	-	-	-	-	-	-
소프트웨어 개발			-	지능형 구문 분석 도구 개발	현대국어 말뭉치 활용 시스템 개발	-
사업 진도 (%)			100	100	100	100
연구비 (천원)			335,900	297,000	238,000	147,000	1,017,900

제 1 장

현대국어 말뭉치 정제

제 11 장

현대국어 말뭉치 형태 통계

제 111 장

현대국어 말뭉치 형태의미 통계

부록

형태분석 말뭉치 구축 지침

형태의미분석 말뭉치 구축 지침

원시 말뭉치 구축 지침