국립국어원 공고 제2022-134호

국립국어원 2022년 온라인 게시 자료 수집 및 정제
사업 관련 안내

국립국어원에서는 우리말 인공지능 기술 개발과 국어 연구 등에 활용하고자 온라인 게시 원문 자료를 수집하여 가공하는 ‘2022년 온라인 게시 자료 수집 및 정제’ 사업을 추진하고 있습니다. 우리말 인공지능 기술 발전 등에 기초가 되는 국가적 언어 자료의 수집과 구축 사업에 귀하의 소중한 대화 자료가 유용하게 활용될 수 있도록 많은 관심과 참여를 부탁드립니다.

0000000000000

□ 사업 개요

ㅇ 사업명: 2022년 온라인 게시 자료 수집 및 정제

ㅇ 사업 기간: 2022. 4. 28. ~ 2022. 11. 28.

ㅇ 사업 수행자: 주식회사 버즈메트릭스

ㅇ 주요 사업 내용: 온라인 게시 자료 말뭉치 구축

- 온라인 게시 자료 수집(정제 후 31만 건 이상 분량)

- 구축 대상 자료에 대한 메타 정보 구축

ㅇ 담당자: 국립국어원 언어정보과
학예연구사 서샛별(02-2669-9607)

ㅇ 문의처: ㈜버즈메트릭스 이영희 대표
(02-6244-0732, yhlee@metrix.co.kr)

□ 주요 질의·답변

1. 온라인 게시 자료를 수집하는 목적은?

ㅇ 온라인상에서 자연스럽게 사용하는 언어 자료를 모아 컴퓨터가 읽을 수 있는 형태로 가공한 온라인 게시 자료 말뭉치를 국가적으로 구축하여 우리말 인공지능 개발과 국어 연구 등에 공공 자료로 활용할 수 있도록 하기 위해서입니다.

2. 저작권 이용 허락 범위는?

ㅇ 국립국어원과 국립국어원의 용역 사업 수행자가 귀하의 대화 자료를 말뭉치로 구축하고 배포하기 위하여 아래 일을 할 수 있도록 허락해 주시는 것이 필요합니다.

- 수집 자료를 일정한 형식으로 전자적 기록 매체에 담아 보존하는 일

- 수집 자료를 형태소, 단어, 문장 등의 언어 단위별로 분리하며, 언어적·비언어적 정보를 부착하는 등 자료를 복제하여 변형하여 말뭉치를 구축하는 일

- 구축된 말뭉치를 연구 및 기술 개발용으로 학계·연구기관·산업체 등이 이용할 수 있도록 제공·배포하는 일

ㅇ 학계·연구기관·산업체 등이 국어 연구와 언어 정보 처리 분야 응용 등을 위하여 아래 일을 할 수 있도록 허락해 주시는 것이 필요합니다.

- 우리말 인공지능 기술 개발과 국어 연구용으로 말뭉치를 분석 및 처리하여 사용하도록 하는 일

3. 저작권 이용 허락 기간은?

ㅇ 학계·연구기관·산업체 등이 연구 및 기술 개발에 활용하기 위해서는 충분한 기간 동안 안정적으로 말뭉치를 이용할 수 있는 것이 중요합니다. 예를 들어 1990년대 초반에 영국에서 구축한 BNC(British National Corpus) 말뭉치는 25년이 지난 현재까지도 안정적으로 제공되어 활용되고 있습니다. 국립국어원에서는 귀하의 소중한 대화 자료를 말뭉치로 구축하여 최소 2038년 12월 31일까지는 안정적으로 이용할 수 있도록 허락해 주시기를 바랍니다.

ㅇ 귀하께서 이용 허락 기간이 끝나기 6개월 전부터 1개월 전까지의 기간에 서면으로 이용 허락 갱신 거절 의사를 밝히시면 최소 이용 허락 기간이 끝난 후 이용을 중지할 예정입니다.

4. 온라인 게시 자료 말뭉치는 어떠한 형식으로 구축되는 것인지?

ㅇ 이용을 허락해 주신 분들의 게시판, 누리소통망 등에서 수집한 온라인 게시 언어 자료를 정제하고, 말뭉치의 형식을 갖추기 위한 정보를 부가하여 원시 말뭉치를 구축합니다. 여기에 형태소, 어휘, 문장과 관련된 언어적 정보를 부가하여 분석 말뭉치로 구축할 수 있습니다.

{

"id": "EBRW1903002753",

"metadata": {

"title": "국립국어원 웹 말뭉치 EBRW1903002753",

"creator": "국립국어원",

"distributor": "국립국어원",

"year": "2019",

"category": "웹 > 블로그",

"annotation_level": [

"원시"

],

"sampling": "게시자 모집 후 무작위 추출"

},

"document": [

{

"id": "EBRW1903002753.1",

"metadata": {

"title": "비타민 사기 진짜 어려워..",

"author": "June",

"publisher": "egloos",

"date": "20090531",

"crawl_date": "20190805 15:05:25",

"url": "http://kimmari02.egloos.com/2395370"

},

"paragraph": [

{

"id": "EBRW1903002753.1.1",

"form": "오메가3와 비타민C, 달맞이꽃종자유 등을 사려고 몇 시간을 검색하며 공부했다. 그 결과 오염되지 않은 바다에서 잡힌 먹이사슬의 하단에 있는 생선이 좋다고 들었는데(덩치가 커지면 중금속 오염이 심하다고 함), 미국FDA의 기준도 엄격하지 않고 어쩌고 저쩌구. 아무튼 그 결과 노르웨이에서 만든 노르딕 내추럴사의 오메가3+감마리놀렌산 즉 오메가 우먼을 사려고 한다. 내 성격에 정식통관도 아니고 미국에서 직배송하는 알약을 먹기가 썩 내키는 일은 아니지만 백화점 가서 GNC 비타민제의 인터넷과 매장 가격 차이가 두 배 가까운 걸 보고 마음을 바꿨다. 그 흔한 비타민C도 두 배 차이면 다른 건 안 봐도 뻔한 거 같고.. 원래 수입 물품 두 배 붙이는 건 일도 아니라는 걸 잘 안다. 그렇게 안 하면 장사도 안 되고..",

"original_form": "오메가3와 비타민C, 달맞이꽃종자유 등을 사려고 몇 시간을 검색하며 공부했다. 그 결과 오염되지 않은 바다에서 잡힌 먹이사슬의 하단에 있는 생선이 좋다고 들었는데(덩치가 커지면 중금속 오염이 심하다고 함), 미국FDA의 기준도 엄격하지 않고 어쩌고 저쩌구. 아무튼 그 결과 노르웨이에서 만든 노르딕 내추럴사의 오메가3+감마리놀렌산 즉 오메가 우먼을 사려고 한다. 내 성격에 정식통관도 아니고 미국에서 직배송하는 알약을 먹기가 썩 내키는 일은 아니지만 백화점 가서 GNC 비타민제의 인터넷과 매장 가격 차이가 두 배 가까운 걸 보고 마음을 바꿨다. 그 흔한 비타민C도 두 배 차이면 다른 건 안 봐도 뻔한 거 같고.. 원래 수입 물품 두 배 붙이는 건 일도 아니라는 걸 잘 안다. 그렇게 안 하면 장사도 안 되고.."

},

{

"id": "EBRW1903002753.1.2",

"form": "아무튼 알약 크기도 문제고 해서 일단 질문 해놨으니 답이 오는대로 2~3가지 정도 사서 먹어볼 요량이다. 할 수 있는 건 다 해봐야지. 아우.. 주말인데 뭐 해야 할 게 이리 많은지 마구 피곤하다. 화장품도 다 떨어져서 몇 개씩 샀고 어제 라이크라 셔츠도 샀고. 뭔가 사들이는 것도 일이다.",

"original_form": "아무튼 알약 크기도 문제고 해서 일단 질문 해놨으니 답이 오는대로 2~3가지 정도 사서 먹어볼 요량이다. 할 수 있는 건 다 해봐야지. 아우.. 주말인데 뭐 해야 할 게 이리 많은지 마구 피곤하다. 화장품도 다 떨어져서 몇 개씩 샀고 어제 라이크라 셔츠도 샀고. 뭔가 사들이는 것도 일이다."

}

]

},

5. 개인 정보가 노출될 우려는 없는지?

ㅇ 이름, 전화번호, 주소 등 개인 정보는 알아볼 수 없게 처리합니다.