-
데이터 변경이력
데이터 변경이력 버전 일자 변경내용 비고 1.2 2021-10-22 데이터 추가 개방 1.1 2021-09-08 데이터 품질 보완 및 추가 개방 1.0 2021-06-30 데이터 최초 개방 데이터 히스토리
데이터 히스토리 일자 변경내용 비고 2022-10-13 신규 샘플데이터 개방 소개
한국인 일반남녀 명령어를 문자로 바꾸어 주는 AI기술을 위한 음성 데이터
구축목적
한국인 일반남여의 음성 명령어를 문자로 바꾸어 주고, 문맥을 이해하는 한국어 음성언어처리 기술 개발을 위한 일반인 명령어 기반 AI 학습용 한국어 음성 DB를 구축함으로써, 국내 음성인식 인공지능 기술을 발전시키고 서비스를 제공하고자 함
-
메타데이터 구조표 데이터 영역 한국어 데이터 유형 오디오 , 텍스트 데이터 형식 데이터 출처 라벨링 유형 라벨링 형식 데이터 활용 서비스 데이터 구축년도/
데이터 구축량2020년/576만 -
구축 내용 및 제공 데이터량
- 데이터 구축 프로세스
- 데이터 설계, 수집, 가공, 검수 및 AI 모델링 수행 - 데이터 구축 규모
- 음성 4,000시간 데이터 구축
- 데이터 구축 프로세스
-
-
AI 모델 상세 설명서 다운로드
AI 모델 다운로드 -
데이터 성능 점수
측정값 (%)기준값 (%)데이터 성능 지표
데이터 성능 지표 번호 측정항목 AI TASK 학습모델 지표명 기준값 점수 측정값 점수 1 학습 성능 (STT 인식률) Speech Recognition Kaldi CER 8 % 1.87 % 2 학습 성능 (STT 인식률) Speech Recognition Kaldi WER 16 % 11.82 %
※ 데이터 성능 지표가 여러 개일 경우 각 항목을 클릭하면 해당 지표의 값이 그래프에 표기됩니다.
※ AI모델 평가 지표에 따라 측정값의 범위, 판단 기준이 달라질 수 있습니다. (ex. 오류율의 경우, 낮을수록 좋은 성능을 내는 것으로 평가됩니다)
-
설명서 및 활용가이드 다운로드
데이터 설명서 다운로드 구축활용가이드 다운로드※ 본 데이터에 포함된 이름, 주소, 전화번호, 상황 등은 모두 창작된 것으로 실제와 어떠한 관련이 없음을 알려드립니다.
데이터 변경이력
데이터 변경이력 버전 일자 변경내용 비고 1.2 2021.10.22 데이터 추가 개방 1.1 2021.09.08 데이터 품질 보완 및 추가 개방 1.0 2021.06.30 데이터 최초 개방 구축 목적
- 한국인 일반남여의 음성 명령어를 문자로 바꾸어 주고, 문맥을 이해하는 한국어 음성언어처리 기술 개발을 위한 일반인 명령어 기반 AI 학습용 한국어 음성 DB를 구축함으로써, 국내 음성인식 인공지능 기술을 발전시키고 서비스를 제공하고자 함
활용 분야
- 음성 서비스를 제공하고자 하는 기업과 기관 및 개인
소개
-
AI 음성 서비스를 위한 음성 데이터를 다양한 환경에서 수집하여 생활 곳곳에서 음성 서비스를 가능하게 함.
-
일반인을 대상으로 구축한 데이터는 AI 음성비서, AI 로봇, 음성인식 키오스크 등에 활용될 수 있음.
구축 내용 및 제공 데이터량
- 데이터 구축 프로세스
- 데이터 설계, 수집, 가공, 검수 및 AI 모델링 수행 - 데이터 구축 규모
- 음성 4,000시간 데이터 구축
대표도면
- 음성 데이터 수집 도구
- 스마트폰, 태블릿, PC 등 다양한 환경에서 크라우드 워커들의 데이터 수집 수행, 문장 단위 데이터 가공의 자동화로 효율적 수집 가능 - 파일명 구조
- 파일명으로 데이터 카테고리, 화자정보, 환경정보 등을 쉽게 구분 - 데이터 검수 도구
- 3단계의 강도 높은 검수를 통해 데이터 품질 확보 - 어노테이션 구조
필요성
- 국내 음성인식 기술의 빠른 발전을 가져올 수 있을 것임. 그동안 음성인식 분야는 선진국에 뒤처져 있었던 것이 사실. 글로벌 기업들은 인공지능 성능을 높이는 데 필수적인 데이터의 확보량이 차이가 났음. 이번 프로젝트로 해외와 국내의 음성인식 기술 격차가 상당히 줄어들 수 있을 것으로 생각됨.
- 해외 엔진 대비 국내 엔진의 경쟁력을 높여줄 수 있을 것임. 인공지능 기술이 선진국이 더 발달한 것이 사실이지만, 데이터에 의존하는 성격이 있는 인공지능 기술은 한글 데이터가 많을수록 국내에서는 경쟁력을 더 발휘할 수 있음. 국내에서 음성과 한글 문장이 더 쌓일수록 성능이 더 높아지기 때문임. 이런 관점에서 국내 엔진의 경쟁력을 높여줄 수 있음.
- 인공지능 기술 중에서도 음성인식 분야가 기술 축적이 오랫동안 이뤄졌으면서도 발전이 급격하지는 않았음. 그것은 음성 서비스는 한 두 번 오인식되면 서비스 사용을 중지하는 사람들이 많기 때문임. 본 사업으로 국내 음성인식 인식률이 높아지면 산업의 성장이 급격히 이뤄질 것으로 보임.
데이터 구조
- 데이터 구성
(1) Wave 파일 : 48kHz(44kHz), 16bit, mono
(2) Json 파일 : Json 포맷 어노테이션 정보 - 데이터 분포
- 일반인용 AI 비서 데이터 분포 (대본 기준) - 어노테이션 포맷
어노테이션 포맷 대분류 속성 표기 의미 타입 필수여부 기본 정보
(DB_Info)Language 언어 String Version 버전 String ApplicationCategory 응용 분야 String NumberOfSpeaker 발성화자 수 String NumberOfUtterance 발화 수 String DataCategory DB종류 String RecordingDate 녹음날짜 String FillingDate 수정날짜 String RevisionHistory 수정기록 String Distributer 수행기관 String 음성 정보
(Wave_Info)SamplingRate 주파수 String NumberOfBit 비트 수 String ByteOrder 바이트정보 String EncodingLaw 인코딩방식 String NumberOfChannel 채널 수 String SignalToNoiseRatio SNR String 전사 정보
(Label_Info)LabelText 텍스트 전사 String Y 화자 정보
(Speaker Info)SpeakerName 화자 이름 String Y Gender 성별 String Y Age 나이 String Y Region 지역 String Y Dialect 방언 String Y 환경 정보
(Environment_Info)RecordingEnviron 녹음 환경 String Y NoiseEnviron 노이즈 환경 String Y RecordingDevices 녹음 장치 String Y 파일 정보
(File_Info)FileCategory 파일 종류 String FileName 파일 이름 String DirectoryPath 파일 위치 String HeaderSize 헤더 크기 String FileLength 파일 길이 String Y FileFormat 파일 포맷 String NumberOfRepeat 반복 차수 String TimeInterval 녹음 주기 String Y Distance 녹음 거리 String 기타 정보
(Miscellaneous_Info)QualityStatus 품질 상태 String - Json 포맷 샘플
-
데이터셋 구축 담당자
수행기관(주관) : 비디
수행기관(주관) 책임자명 전화번호 대표이메일 담당업무 조영진 02-2025-4999 [email protected] · 데이터 구축 총괄 · 응용 서비스 개발 수행기관(참여)
수행기관(참여) 기관명 담당업무 미디어젠㈜ · 데이터 검수
· AI 모델링셀렉트스타 · 비정형 데이터 정제
· 비정형 데이터 검수메트릭스리서치 · 크라우드소싱
· 결과물 정제 및 검수세종대학교 · 데이터 검증 및 연구활동 데이터 관련 문의처
데이터 관련 문의처 담당자명 전화번호 이메일 조영진(비디) 02-2025-4999 [email protected]
-
인터넷과 물리적으로 분리된 온라인·오프라인 공간으로 의료 데이터를 포함하여 보안 조치가 요구되는 데이터를 다운로드 없이 접근하고 분석 가능
* 온라인 안심존 : 보안이 보장된 온라인 네트워크를 통해 집, 연구실, 사무실 등 어디서나 접속하여 데이터에 접근하고 분석
* 오프라인 안심존 : 추가적인 보안이 필요한 데이터를 대상으로 지정된 물리적 공간에서만 접속하여 데이터에 접근하고 분석 -
- AI 허브 접속
신청자 - 안심존
사용신청신청자신청서류 제출* - 심사구축기관
- 승인구축기관
- 데이터 분석 활용신청자
- 분석모델반출신청자
- AI 허브 접속
-
1. 기관생명윤리위원회(IRB) 심의 결과 통지서 [IRB 알아보기] [공용IRB 심의신청 가이드라인]
2. 기관생명윤리위원회(IRB) 승인된 연구계획서
3. 신청자 소속 증빙 서류 (재직증명서, 재학증명서, 근로계약서 등 택1)
4. 안심존 이용 신청서 [다운로드]
5. 보안서약서 [다운로드]
※ 상기 신청서 및 첨부 서류를 완비한 후 신청을 진행하셔야 정상적으로 절차가 이루어집니다. -
신청 및 이용관련 문의는 [email protected] 또는 02-525-7708, 7709로 문의
데이터셋 다운로드 승인이 완료 된 후 API 다운로드 서비스를 이용하실 수 있습니다.
API 다운로드 파일은 분할 압축되어 다운로드 됩니다. 분할 압축 해제를 위해서는 분할 압축 파일들의 병합이 필요하며 리눅스 명령어 사용이 필요합니다.
리눅스 OS 계열에서 다운로드 받으시길 권장하며 윈도우에서 파일 다운로드 시 wsl(리눅스용 윈도우 하위 시스템) 설치가 필요합니다.
※ 파일 병합 리눅스 명령어
find "폴더경로" -name "파일명.zip.part*" -print0 | sort -zt'.' -k2V | xargs -0 cat > "파일명.zip"
- 해당 명령어 실행 시, 실행 경로 위치에 병합 압축 파일이 생성됩니다.
- 병합된 파일 용량이 0일 경우, 제대로 병합이 되지 않은 상태이니 "폴더경로"가 제대로 입력되었는지 확인 부탁드립니다.
※ 데이터셋 소개 페이지에서 다운로드 버튼 클릭하여 승인이 필요합니다.