Microsoft Teams는 이제 AI를 사용하여 에코, 중단 및 오디오를 개선합니다.

Microsoft는 지난 2년 동안 Teams에 새로운 생산성 기능을 추가했으며 이제 인공 지능 덕분에 기본 작동 방식을 점검하고 있습니다. 우리는 모두 누군가 방의 음향이 좋지 않아 잘 들리지 않는 전화를 받거나 두 사람이 동시에 말하려고 하여 어색한 “아니요, 진행하세요”라는 순간을 만드는 것을 지켜본 적이 있습니다. Microsoft의 새로운 AI 기반 음질 개선은 이러한 일상적인 성가심을 개선하거나 제거해야 합니다.

Microsoft는 이제 기계 학습 모델을 사용하여 동굴에 숨어 있는 것처럼 들리지 않도록 실내 음향을 개선하고 있습니다. “팀에서 정말 좋은 일을 하기 위해 디지털 신호 처리에 최선을 다하는 동안, 우리는 이제 처음으로 기계 학습을 사용하여 모든 다른 장치의 에코를 줄일 수 있는 에코 제거를 구축하기 시작했습니다.”라고 설명합니다. Microsoft의 스마트 대화 및 클라우드 커뮤니케이션 수석 프로그램 관리자인 Robert Eichner는 다음과의 인터뷰에서 모서리.

Microsoft는 Teams 사용자가 에코 감소 및 통화 품질 향상을 인지할 수 있도록 실제 환경에서 모델을 측정하면서 몇 달 동안 이를 테스트해 왔습니다. 이 소프트웨어 제조업체는 30,000시간의 대화를 통해 모델 교육을 지원했으며 Teams 사용자가 자신의 음성을 녹음하고 장치에서 오디오를 재생하는 대가를 받는 크라우드소싱을 통해 수천 대의 장치를 캡처했습니다.

“우리는 또한 약 100,000개의 서로 다른 방을 시뮬레이션합니다…실내 음향은 반향 제거에 큰 역할을 합니다.”라고 Aichner는 말합니다. 그 결과 통화 음질이 크게 향상되어 여러 사람이 동시에 말할 수 있는 에코를 제거합니다. 위의 비디오에서 모든 개선 사항이 실제로 작동하는 것을 볼 수 있습니다.

Teams가 오디오가 방에서 튀거나 울려 얕은 소리가 나는 것을 감지하면 모델은 캡처된 오디오를 변환하고 처리하여 Teams 참가자가 메아리가 아닌 근거리 마이크에 대고 말하는 것처럼 들립니다.

가장 인상적인 부분은 에코로 인해 상대방의 목소리가 들리지 않는 어색한 간섭 없이 지금 Teams 통화에서 사람들이 서로를 방해할 수 있는 기능입니다. Microsoft는 이제 이전에 AI 기반 소음 제거 시스템으로 개선된 사항과 함께 이 모든 작업을 Teams에서 제공하고 있습니다. 모든 처리는 클라우드가 아닌 클라이언트 장치에서 로컬로 수행됩니다.

Aichner는 “클라우드에서 처리되는 모든 호출을 수행하려면 클라우드가 여전히 매우 비싸기 때문에 클라이언트에서 이 작업을 수행하고 싶다고 말했습니다… 그리고 분명히 그 비용을 클라이언트에게 전가해야 할 것입니다.”라고 설명합니다. . 이는 이러한 중요한 Teams 개선 사항이 유료 고객으로 제한된다는 것을 의미할 수 있으며 On-Device Path는 소음 억제와 같은 기능을 Teams를 사용하는 장치의 90%에서 사용할 수 있음을 의미합니다.

모든 새로운 Microsoft Teams 개선 사항은 비디오의 텍스트에 대한 일부 실시간 화면 개선 사항 및 화상 통화 또는 화면 공유 중 대역폭 제한에 대한 AI 기반 개선 사항과 함께 라이브입니다.