점검 중

<모두의 말뭉치>
일부 기능 장애로 인하여 해당 신청이 불가능합니다.

최대한 빠르게 복구할 수 있도록 노력하겠습니다.

* 시스템 이용 장애 문의: 051-927-7111

닫기
인공지능(AI)말평>진행 중인 과제>과제 개요

 

※ 이 과제는 2024년 HCLT '인공지능(AI)말평' 활용 연구 우수 논문 선정을 위해 활용되었음



 

과제 개요

표의 일부분에 대한 해석 생성은 자료로부터 텍스트를 생성하는 과제 중 하나로, 주어진 표의 특정 부분을 설명하는 문장을 만드는 과제이다. 위키피디아(Wikipedia) 등 다양한 웹 문서 내에서 핵심적인 정보는 표 형식으로 기술되어 있는 경우가 많다. 이러한 데이터를 인공지능이 잘 이해하기 위해서는 인공지능 언어 처리 기술을 통해 표의 내용을 잘 요약하고 설명할 수 있는지 평가할 필요가 있다.


과제 정의

표의 일부분에 대한 해석 생성과제는 국립국어원의 ‘2022년 유사 문장 생성 말뭉치 연구 및 구축사업을 통해 구축한 자료 중 표 기반 문장 생성 결과물을 활용하여 개발되었다. 이 자료는 해외 표 기반 문장 생성의 대표적인 데이터인 구글의 토토(ToTTo) 데이터 세트를 참조하였다. 데이터 세트는 에이치티엠엘(HTML)로 작성된 표의 형식을 유지하여 제이슨(JSON) 형식으로 변환되었고, 표에 음영으로 표시한 부분을 설명하는 문장 5개로 구성된다.

이 과제의 목표는 표에 음영으로 표시한 부분을 설명하는 문장 한 개를 생성하는 것이다.

 

분류

내용 

예시 

비고 

 

 

 

 

 

 

 

 

 

 

입력

 

 

 

 

 

 

 

 

 

 

표 

 

"input": {

"metadata": {

"title": "4차 산업혁명에 따른 조세환경 변화와 정책 과제",

"table_title": "국제조세 과세원칙 일반 개념",

"date": "2020-06-09",

"publisher": "국회예산정책처",

"url":

https://www.nabo.go.kr/Sub/01Report/01_01_Board.jsp",

"highlighted_cells": [

[

0,

1

],

[

1,

1

],

[

2,

1

]

]

},

"table": [

{

"value": "과세원칙",

"is_header": true,

"col": 0,

"colspan": 1,

"row": 0,

"rowspan": 1

},

{

"value": "특징",

"is_header": true,

"col": 1,

"colspan": 1,

"row": 0,

"rowspan": 1

},

{

"value": "이중과세 조정",

"is_header": true,

"col": 2,

"colspan": 1,

"row": 0,

"rowspan": 1

},

{

"value": "원천지국 과세",

"is_header": false,

"col": 0,

"colspan": 1,

"row": 1,

"rowspan": 1

}, 

{

"value": "소득이 발생한 국가(원천지국)에서 과세관할권 보유",

"is_header": false,

"col": 1,

"colspan": 1,

"row": 1,

"rowspan": 1

},

{

"value": "국외소득면제",

"is_header": false,

"col": 2,

"colspan": 1,

"row": 1,

"rowspan": 1

},

{

"value": "거주지국 과세",

"is_header": false,

"col": 0,

"colspan": 1,

"row": 2,

"rowspan": 1

},

{

"value": "거주자의 전세계 소득에 대해 거주지국에서 과세관할권 보유",

"is_header": false,

"col": 1,

"colspan": 1,

"row": 2,

"rowspan": 1

},

{

"value": "외국납부세액공제",

"is_header": false,

"col": 2,

"colspan": 1,

"row": 2,

"rowspan": 1

}

]

}

 











JSON

 출력

 설명 문장 

 "output": "국제조세 과세원칙의 개념을 살펴보면 원천지국 과세는 소득 원천 국가에서 과세관할권을 보유하기 때문에 국외소득면제를 조정해야 한다." 

 문자열

평가

ROUGE 1, ROUGE-L, BLEU

 

 


데이터 세트의 구성

구분

훈련 

검증 

평가 

문장 수

7,170 

896 

896 

 

평가 지표: ROUGE-1, ROUGE-L, BLEU



기준 모델(베이스라인 모델): KoBART 기반 학습 모델

https://github.com/teddysum/korean_T2T_2023

테이블 데이터 ※ Encoder KoBART Decoder 설명문 협약 사업장의 감축량은 4,571톤, 비협약 사업장의 감축량은 539톤이다.


대회 참가 규정

인공지능의 한국어 능력 평가에 관심 있는 누구나 팀을 구성하여 참가할 수 있다.

팀 구성원은 국립국어원 언어정보나눔터 회원이어야 한다.

참가 팀은 과제를 해결한 결과를 정해진 양식에 맞추어 제출한다.

라이선스에 문제가 없는 모델을 개발하여야 한다.

외부 API를 통해 호출하는 모델(OpenAI API )은 제출할 수 없다.

모두의 말뭉치를 포함한 외부에 공개된 데이터는 사용이 가능하다(저작권 등 책임은 참가 팀에게 있음). 과제 데이터(말뭉치)를 초거대언어모델(LLM) 기반 자동 증강하여 사용할 수 있다.





시스템 사용 방법: 알립니다 → 사용 안내 참고 

문의: 진행 중 과제 문의