비디오 컨퍼런싱을 향상시키기 위한 서버 사이드 AI

표 목차

1. 서론
2. Pexip의 개요
3. Pexip 인프라 기술
   1. 관리노드
   2. 회의노드
   3. 엣지노드
   4. Teams 커넥터 노드
4. Pexip Infinity 기술 스택
5. AI 기술을 통한 비디오 컨퍼런싱 개선
   1. 소음 감소
   2. 회의실 에코 캔슬
   3. 시선 보정
6. Pexip의 연구결과
7. 결론
8. 자주 묻는 질문 (FAQ)

서론

안녕하세요! 저는 Terry Burnley라고 합니다. 저는 Pexip에서 고급 기술자로 근무하고 있으며, 오늘은 Pexip이 서버 사이드 AI를 이용하여 비디오 컨퍼런싱을 개선하고자 한다는 주제로 이야기하려고 합니다. Pexip은 현재 AI 기술을 활용하여 소음 감소, 회의실 에코 캔슬 및 시선 보정과 같은 문제를 해결하는 연구를 진행 중입니다. 이 세 가지 항목에 대해서 자세히 알아보도록 하겠습니다.

Pexip의 개요

Pexip은 2011년에 설립된 회사로, 현재 전 세계 23개 국가에 약 500명의 직원을 보유하고 있습니다. Pexip은 비디오 컨퍼런싱을 개선하기 위해 인프라 기술을 개발하고 있으며, 전 세계 3600개 이상의 고객과 300개 이상의 파트너를 보유하고 있습니다. Pexip은 가장 선도적인 산업 연구 기관인 Wayne House에 의해 2019년 전체적으로 1위로 선정되었으며, 노르웨이의 Oslo Stock Exchange에 상장되어 있습니다.

Pexip 인프라 기술

Pexip의 인프라 기술은 크게 네 가지 주요 구성요소로 이루어져 있습니다. 첫 번째는 "관리노드(Mangement Node)"로, 이는 인프라의 핵심이며 구성, 로깅, 업그레이드, 현재 진행 중인 회의에 대한 모니터링 및 이전 사용 내역에 대한 통계 제공 등을 관리합니다. 두 번째는 "회의노드(Conference Node)"로, 이는 인프라의 주된 역할을 수행하는 부분입니다. 이 노드는 모든 참가자의 오디오 및 비디오 스트림을 디코딩하고 인코딩하여 가상 회의실에 연결시키며, 다른 회의노드와 상호작용하여 다중 회의 연결을 지원합니다. 세 번째는 "엣지노드(Edge Node)"로, 이는 고객의 데이터 센터에 위치한 노드로, 인터넷에서의 공격으로부터 다른 노드를 보호하고 비디오 컨퍼런싱을 위해 필요한 트래픽만 허용합니다. 마지막으로 "Teams 커넥터 노드(Teams Connector Node)"는 Microsoft Teams 회의에 장치에서 접속할 수 있도록 해주는 역할을 합니다.

Pexip Infinity 기술 스택

Pexip Infinity는 Pexip이 비디오 컨퍼런싱을 원활히 진행하기 위해 개발한 기술 스택입니다. 이 기술 스택은 사용자가 매주 최소한 한 번씩 사용하는 비디오 회의에 대해 사용되며, 사용자에게는 간단한 브라우저 링크를 클릭하여 회의에 참석하는 것처럼 보일 수 있습니다. 하지만 이러한 기술 스택은 매우 복잡한 구성요소 집합으로 이루어져 있으며, 사용자가 사용하는 비디오 컨퍼런싱을 가능하게 하는 역할을 수행합니다.

AI 기술을 통한 비디오 컨퍼런싱 개선

Pexip은 현재 AI 기술을 활용하여 비디오 컨퍼런싱의 세 가지 주요 문제인 소음 감소, 회의실 에코 캔슬 및 시선 보정을 연구하고 있습니다. 소음 감소 기술은 자연어 처리, 아바타, 소음 감소, 방 안의 에코 캔슬 및 시선 보정과 같은 다양한 기술을 연구하고 있으며, 이러한 기술이 비디오 컨퍼런싱을 어떻게 개선할 수 있는지 살펴보고 있습니다. 이번 발표에서는 소음 감소, 회의실 에코 캔슬, 시선 보정 중에서 세 가지 핵심 항목에 대해 논의하겠습니다.

소음 감소

비디오 컨퍼런싱 사용자들의 주요 고민 중 하나는 소음입니다. 피아식스는 자연어 처리, 아바타, 소음 감소, 방 안의 에코 캔슬, 시선 보정 등 다양한 AI 기술을 연구하고 있으며, 이러한 기술들이 비디오 컨퍼런싱 환경을 어떻게 개선할 수 있는지 연구하고 있습니다. 소음 감소 기술을 통해 AC 소음, PC 소음, 타인의 소리, 팬 소음, 경찰차나 사이렌 소리 등 회의실에서 발생하는 다양한 소음을 제거할 수 있습니다. 이 기술은 30밀리초의 지연 시간 내에 소음을 제거하며, 이러한 기술의 이점을 활용하기 위해 피아식스는 자체 개발한 인프라에 AI 기술을 통합하고자 합니다. 또한, 소음 제거 강도를 조절할 수 있도록 튜닝한 결과, 회의 참가자들이 소음이 완전히 제거되는 것이 아니라 적정 수준의 소음이 전달되도록 할 계획입니다.

• 장점: 소음 감소를 통해 비디오 컨퍼런스의 음질을 향상시킬 수 있습니다. 소음으로 인한 간섭을 줄여 원활한 대화를 할 수 있습니다.
• 단점: 소음 감소가 너무 과도하면 상대방이 발생하는 소리를 인지하기 어려울 수 있습니다.

회의실 에코 캔슬

비디오 컨퍼런싱 환경에서 회의실의 음향적 문제는 중요한 이슈입니다. Pexip은 비싼 소리 차단 재질로 회의실을 처리하는 것 대신 AI 기술을 활용하여 이 문제를 해결하고자 합니다. 피아식스는 Nvidia Maxine의 회의실 에코 캔슬 모델을 사용하여 AI 기술을 연구하고 있습니다. 이 기술을 통해 회의실에서 발생하는 반향이나 에코를 제거할 수 있습니다. 현재는 프로토 타입 단계로 연구가 진행되고 있으며, 더 나은 결과를 위해 지속적인 개선 작업을 진행할 예정입니다.

• 장점: 회의실 에코를 제거하여 음질을 개선하고 자연스러운 회의 환경을 조성할 수 있습니다.
• 단점: 회의실 사운드 처리에 AI 기술을 사용하기 때문에 추가적인 지원이 필요할 수 있으며, 일부 사용자에게는 지연 시간이 생길 수 있습니다.

시선 보정

비디오 컨퍼런싱에서 말하기와 동시에 상대방의 시선을 집중적으로 받는 것은 어려운 문제입니다. Pexip은 AI 기술을 활용하여 시선 보정 문제에도 착수하고 있습니다. 기존의 방법은 반사 거울이 사용됩니다만, 이는 자연스럽지 않으며 훈련이 필요합니다. 따라서 Pexip은 서버 사이드 AI를 통해 시선 보정 기술을 개발하고자 합니다. 이를 통해 모든 디바이스에서 적절한 시선을 제공할 수 있습니다. 이 기술은 얼굴 특징을 감지한 후 얼굴의 방향과 시선의 방향을 계산하고 보정을 적용합니다. 시선 보정은 현재 추가적인 연구가 필요하지만, 연구 결과는 매우 유망하므로 이를 피아식스 솔루션에 통합하는 방법을 탐색하고 있습니다.

• 장점: 비디오 컨퍼런싱에서 자연스러운 시선 보정을 통해 상대방과 좀 더 원활하게 소통할 수 있습니다.
• 단점: 시선 보정에 대한 추가적인 개발과 튜닝이 필요하며, 일부 사용자에게는 추가 지연이 발생할 수 있습니다.

Pexip의 연구결과

Pexip은 현재 소음 감소 및 회의실 에코 캔슬에 대한 연구 프로토타입을 개발하고 있습니다. 이러한 연구는 개선될 여지가 있으며, 현재는 연구 프로젝트로서 제시된 결과입니다. 시선 보정 기술 역시 계속해서 개발 작업이 진행 중이며, 유망한 결과를 얻고 있습니다. 향후 어떻게 이러한 기술을 피아식스의 솔루션에 통합할지에 대해서도 지속적으로 연구할 예정입니다.

결론

Pexip은 비디오 컨퍼런싱 사용자들의 고민을 해결하기 위해 소음 감소, 회의실 에코 캔슬 및 시선 보정과 같은 AI 기술을 연구하고 있습니다. 현재는 연구 프로토타입 단계이며, 향후 피아식스 솔루션에 통합하여 비디오 컨퍼런싱 환경을 개선할 예정입니다. Pexip에 대해 더 자세히 알고 싶으시다면 "pexip.com"으로 방문하여 문의해 주시기 바랍니다.

자주 묻는 질문 (FAQ)

Q: 피아식스의 AI 기술을 사용하려면 추가 비용이 드나요? A: AI 기술은 현재 연구 단계로 진행 중이므로 추가 비용이 드리지 않습니다. 하지만 향후에는 AI를 활용한 고급 기능을 제공하는 유료 옵션도 있을 수 있습니다.

Q: 피아식스의 AI 기술은 모든 디바이스에서 작동하나요? A: 네, 피아식스의 AI 기술은 모든 디바이스에서 작동하며, PC, Mac, 안드로이드 폰, 아이폰, 태블릿 및 다양한 비디오 컨퍼런싱 시스템에서 사용할 수 있습니다.

Q: 피아식스의 AI 기술은 비디오 컨퍼런싱의 대역폭에 영향을 미치나요? A: 피아식스는 AI 기술을 계속해서 개발하여 대역폭 효율을 최적화하고 있으며, 최소한의 영향을 미치도록 노력하고 있습니다.