연구 및 산업-아카데미아 협력
Vol8 : 청각 슬롯 사이트인 및 청각 상실 캡션을위한 웹 기반 문자 해석 시스템 (202541)
연구 및 개발 배경
청각 슬롯 사이트 또는 청각 손실이 이벤트 또는 클래스에 참여할 때 "PC 캐릭터 통역사"는 오디오 자막을 실시간으로 만드는 데 사용됩니다 그러나 음성 인식만으로는 문제가되고 구어체 표현을 읽기가 어렵습니다 따라서 지지자들이 입력하고 채우고 요약 할 수있는 방법이 필요합니다 특히, 일본어는 많은 칸 지와 어휘를 가지고 있으므로 여러 사람이 공동으로 입력하는 "결합 입력"이라는 기술이 사용됩니다 (그림 1)
슬롯 사이트 1 : 연결 입력 개요
전통적인 PC 캐릭터 통역 챌린지
이전 PC 문자 해석 시스템은 주로 특정 OSS에서 실행되는 전용 기본 앱에 의해 개발 및 사용되었습니다 이 앱은 LAN 커뮤니케이션을 사용하고 지지자들은 PC를 슬롯 사이트트로 가져 와서 LAN을 구축해야했습니다 (그림 2) 또한 많은 커뮤니케이션이 암호화되지 않았으며 온라인으로 사용하면 콘텐츠가 도청 될 위험이있었습니다 또한 기본 앱이므로 특정 OS에 의존하므로 다른 OSS, 태블릿 또는 스마트 폰에서 사용하기가 어렵습니다
그림 2 : 기존 전용 응용 프로그램을 사용하여 캐릭터 슬롯 사이트 환경 구축의 예
연구 개발의 목표
캡션 라인은 이러한 과제를 해결하기 위해 개발되었습니다 HTML5 및 JavaScript를 사용하여 웹 앱으로 구현되며 웹 브라우저에서 실행되므로 PC뿐만 아니라 태블릿 및 스마트 폰에서도 사용할 수 있습니다 (그림 3) WebSocket을 사용하여 보안 양방향 통신을 사용하면 안전한 온라인 PC 문자 슬롯 사이트이 가능합니다
그림 3 : 슬롯 사이트 라인 구성 개요
슬롯 사이트 라인 기능
CaptionLine은 전용 앱을 설치할 필요가 없으며 사용자와 지지자는 단순히 URL을 열 수 있습니다 단순히 서버에 액세스하면 PC 문자 슬롯 사이트 환경이 제공되므로 준비 부담이 크게 줄어 듭니다 (그림 4) 입력을 연결하는 것 외에도 음성 인식을 사용하여 지지자가 오해와 중복 부분을 교정하는 스타일로 텍스트를 슬롯 사이트 할 수도 있습니다 (그림 5 (a)) 또한, "하이브리드 자막"기능을 구현하여 다이어그램 및 기타 데이터를 실시간으로 자막에 삽입하여 사용자 이해를 향상시킬 수 있습니다 (그림 5 (b))
슬롯 사이트 4 : CaptionLine Inputter의 페이지 모양
그림 5 : 슬롯 사이트 라인의 독특한 특징
사회적 결과
CaptionLine의 도입으로 Covid-19 Pandemic이 시작되었을 때 온라인 이벤트에서도 PC 캐릭터 해석이 가능해졌으며 사용자 수가 급격히 증가했습니다 (그림 6) 지지자들 슬롯 사이트의 온라인 상호 작용이 만들어졌으며, 지지자가 짧은 지역에서도 텍스트 통역사가 가능합니다 또한, 해외에서 라이브 영어 자막을 생성하도록 요청하는 것과 같은 국제 환경에서는 텍스트 통역사가 가능합니다 또한 자막 및 전사와 관련된 회사와의 공동 연구 및 개발로 이어졌으며 현재 새로운 서비스 및 기능 구현이 제공되고 있습니다
그림 6 : 슬롯 사이트 라인 횟수 변경 분기 별 액세스
CaptionLine은 청각 슬롯 사이트인 및 청각 슬롯 사이트인 및 정보에 더 많이 접근 할 수있는 획기적인 시스템이며 캐릭터 해석과 관련된 사람들을 지원합니다 다양한 상황에서 계속 사용될 것으로 예상됩니다
관련 정보 등
웹 페이지 :https : //captionlineorg
주요 논문 등 :
1) Daisuke Wakatsuki, Tatsuya Arai 및 Takeaki Shionome, 하이브리드 캡션은 청각 슬롯 사이트인 및 청각 슬롯 사이트 학생에 대한 공식 또는 수형, Jaciii, vol25, No2, pp187-194, 2021 (doi : 1020965/jaciii
2) Daisuke Wakatsuki, Nobuko Kato, Takeaki Shionome, Sumihiro Kawano, Tomoyuki Nishioka 및 Ichiro Naito, 웹 기반 원격 Speech-to-Text Industration System Captionline, Jaciii, 슬롯 사이트21, No2, PP310-320, PP310-320의 개발 (doi : 1020965/jaciii2017p0310)
3) Wakatsuki Daisuke, Kato Nobuko, Shionome Tsuyoshi, Kono Jundai, Nishioka Tomoyuki, Naito Ichiro, 청각 슬롯 사이트인을위한 웹 기반 원격 캐릭터 해석 시스템 개발, IEICE Technical Report, vol 114, 아니요 217, WIT2014-32, pp 69-74, 2014 년 9 월
연구원 소개
2003 년, 그는 Niigata University Natural Sciences 대학원에서 박사 과정을 마쳤으며 Niigata University와 Tsukuba 기술 주니어 칼리지에서 근무한 후 2021 년 Tsukuba 기술 대학에서 교수로 임명되었습니다 청각 슬롯 사이트 사이트인과 청력 상실을 가진 사람들 우리는 웹 기반 원격 문자 해석 시스템 "CaptionLine"의 연구 및 개발을 수행하고 있으며 이제 사용할 수 있습니다 이 시스템은 웹 브라우저 만 사용하여 PC 문자 해석을 실시간으로 실현할 수있는 환경을 제공하여 청각 슬롯 사이트 사이트인 및 청력 손실이있는 사람들의 정보 액세스를 개선하는 데 기여합니다 또한 자막과 함께 비디오를 볼 수있는 시스템에 대한 연구를 수행하고 AI를 사용한 청각 슬롯 사이트 사이트 및 청각 손실을 지원합니다
연구원 정보 :https : //researchmapjp/wktkdsk
(Wakatsuki Daisuke, 산업 기술 교수, 산업 기술 학부, 2025 년 4 월 1 일)