국내 연구진이 네덜란드에서 펼쳐진 축구 경기와 벨기에서 진행된 TV토론을 넓은 시야각과 초고화질로 마치 현장에 있는 듯 중계하는데 성공했다. 대륙을 넘어 초실감 영상 서비스를 실시간으로 제공할 수 있는 길이 열릴 전망이다.
한국전자통신연구원(ETRI)은 8K급 360도 가상현실(VR), 울트라와이드비전(UWV) 등 초고화질 실감영상 실황중계 기술을 개발하고, 네덜란드 암스테르담과 대한민국 대전을 잇는 실시간 중계 시험에 성공했다고 밝혔다. 연구진은 TV에서만 보던 운동경기나 음악회 등을 실제 현장에서 보는 듯한 몰입감과 현장감을 느낄 수 있는 서비스가 될 것이라고 소개했다.
ETRI가 개발한 기술은 차별화된 미디어 경험을 제공하는 것을 목표로 인간이 인지 가능한 시야각 범위인 100~110°각도에 최적화된 영상을 만드는 기술이다. 초고선명(UHD) 초고화질을 유지하면서 최대 시야각과 비슷한 UWV영상, 180~360°까지 볼 수 있는 VR영상 콘텐츠를 만들 수 있다. 체험자는 HMD와 같은 단말을 사용하거나 대화면 스크린을 통해 현장감과 몰입감이 극대화된 체감이 가능하다.
핵심 기술은 ‘실시간 모니터링 및 생성기술’이다. 본 기술을 활용하면 여러 대의 초고화질 카메라로 찍은 영상을 하나로 붙여 마치 한 대의 카메라로 촬영한 것처럼 자연스럽고도 시야각이 넓은 초실감 영상을 만들어 낸다. 연구진의 기술을 적용해 촬영한 영상은 세로 폭은 변환 없이 가로 폭 변환 기준으로 UHD 선명도(4Kx2K)의 3배인 12Kx2K UWV 영상과 UHD 선명도의 4배인 8Kx4K급 영상으로 구성된다.
기존에는 대용량 영상정보를 하나로 합치면 부자연스럽게 나타나거나 전송에 문제가 나타났다. 연구진은 실시간 기하 정보 처리를 통해 문제를 해결하며 초실감 영상 통신의 길을 열었다고 설명했다. 지난해 9월 네덜란드에서 펼쳐진 네덜란드-페루 국가대표팀 친선 축구 경기에서 실증 실험 역시 진행한 바 있다. 연구진 기술로 현지 경기를 촬영하고 국제 연구망(KREONET)을 통해 한국으로 전달하는 실시간 중계 시험에 성공한 것이다. 또 올해 4월에는 벨기에 브뤼셀에서 진행된 방송 토론 프로그램 현장에 360°VR 서비스를 적용하기도 했다. 시청자는 360도 전 방향에서 토론에 참여한 패널의 모습을 선택해 볼 수 있다.
연구진은 여기에 더해 인공지능(AI)을 이용해 자동으로 대화 내용을 자막으로 만들고 패널의 감정을 분석해 이모티콘으로 표현해주는 융합기술을 선보여 관심을 불러모았다. 연구진은 콘텐츠 생성부터 음성, 감정인식 등 새로운 콘텐츠를 만들고 네덜란드, 벨기에 등과 국제공동연구를 통해 우리의 방송 및 네트워크 기술에 신뢰를 주는 성과를 내 큰 의미가 있다고 말했다.
현재 방송국, 서비스 제공자들과 기술 이전을 협의 중이다. 이를 통해 스포츠 이벤트 실황 중계 뿐 아니라 음악 콘서트 등 다양한 콘텐츠 분야로 기술이 활용될 전망이다. 연구진의 기술은 내년 네덜란드에서 펼쳐지는 유럽 최대 음악 경연대회인 `유로비전 송 콘테스트(Eurovision Song Contest)'에도 적용할 예정이다. 네덜란드에서 진행된 대회를 암스테르담, 헤이그 등 유럽 주요 도시에 위치한 전용 극장에서 고화질 광시야각 영상으로 감상할 수 있도록 만들 계획이다. 연구진은 향후 5G 및 클라우드 인프라를 이용해 AR, VR 등 초실감 영상을 스트리밍 혀익으로 이용할 수 있는 서비스를 구현하기 위한 후속 연구를 진행하는 동시에, MPEG 국제표준화 노력을 병행할 예정이다. 또 관련 기술을 국내 와이드 영상 제작업체 등에 이전할 계획이다.
ETRI 이현우 미디어연구본부장은 “세계 최초로 초고화질 UWV 영상 실황을 중계하는데 성공했다. 향후에도 차세대 미디어 서비스를 개척할 기술을 개발하기 위해 끊임없이 노력하겠다”고 밝혔다.