딥엘, 사람 목소리에 가장 가까운 음성 번역 AI '오러(Aure)' 공개 딥엘 보이스에 적용된 신규 모델…화자의 어조·감정·말하는 방식 변화에 실시간 대응해 언어가 달라져도 사람의 표현, 뉘앙스 그대로 재현
2026년 11월 12일, 독일 쾰른 – 글로벌 언어 AI 선도 기업 딥엘(DeepL)이 지금까지 선보인 음성 AI 모델 중 가장 생동감 있고 실제 사람의 목소리에 가까운 ‘오러(Aure)’를 공개했다. 신규 모델은 화자의 섬세한 표현을 다른 언어로 실시간 전달하는 기술을 한 단계 발전시켰다. 딥엘의 실시간 AI 음성 번역 제품인 ‘딥엘 보이스(DeepL Voice)’에 적용되는 오러는 어조와 감정부터 강세와 발화 속도까지, 화자의 말하는 방식에 나타나는 변화를 번역 음성에 지속적으로 반영한다. 이를 통해 단순히 말의 내용을 전달하는 것을 넘어, 대화를 자연스럽고 효과적으로 만드는 화자의 개성과 미묘한 뉘앙스, 표현까지 더욱 충실하게 보존한다.
야렉 쿠틸로브스키(Jarek Kutylowski) 딥엘 창업자 겸 CEO는 “목소리는 정체성을 이루는 핵심 요소이면서 감정을 표현하거나 협업하고, 다른 사람과 관계를 맺는 데 중요한 역할을 한다”며, “또한 목소리는 결코 고정돼있지 않다. 우리는 어조와 속도, 비언어적인 표현 방식을 끊임없이 조절하기 때문에 같은 말도 전혀 다르게 받아들여질 수 있다”고 설명했다. 이어 “그동안 서로 다른 언어로 소통할 때는 자신만의 표현법을 온전히 전달하기 어려웠을 것”이라며, “딥엘 보이스는 사람들에게 말하는 방식을 바꾸도록 요구하는 대신, 사람들이 말하는 자연스러운 방식에 맞춰 이 같은 상황을 근본적으로 바꾸고 있다”고 강조했다. 또한 “이제 오러를 통해 표현의 아주 미세한 변화까지 발생하는 순간 바로 포착해, 다른 언어로 번역된 화자의 목소리에 실시간 반영할 수 있게 됐다”며, “이는 언어가 바뀌더라도 말하는 사람의 고유한 특성은 충실히 유지되는 단계로 나아가는 중요한 진전”이라고 말했다.
오러는 딥엘이 최근 발표한 음성 보존 기술을 기반으로 한다. 음성 보존 기술은 획일적인 합성 음성 대신, 화자 본인을 나타내는 고유의 목소리로 언어의 장벽을 허물며 소통하도록 지원한다. 기존 기술이 화자의 ‘음성’ 특성을 보존했다면, 오러는 여기서 한 단계 더 나아가 대화 전반에 걸쳐 ‘목소리가 어떻게 달라지고 반응하는지’를 포착한다. 따라서 실제 대화 중 발생하는 즉흥적이고 생생한 표현을 실시간 번역에 담아낼 수 있다.
실시간 음성 번역에 대한 새로운 접근 방식
이를 구현하기 위해서는 딥엘 음성 AI 모델이 음성을 처리하는 방식부터 근본적으로 달라져야 했다. 기존 딥엘 보이스는 고정된 음성 샘플을 바탕으로 자연스럽고 표현력 있는 음성을 생성할 수 있었지만, 번역 음성의 구현 방식을 결정하는 데에는 대화 초반의 음성에 의존해왔다. 해당 방식은 ‘누가’ 말하는지는 반영했지만, ‘어떻게’ 말하는지를 실시간으로 담아내는 데에는 한계가 있었다. 특정 시점의 음성만으로는 감정이나 강세, 발화 속도 변화를 따라가거나, 비꼬는 말과 같이 발화 내용 자체와는 상반되는 의미를 전달하는 표현 방식을 구현할 수 없기 때문이다.
이제 오러는 더 나아가 입력되는 음성을 지속적으로 분석하고, 번역된 내용과 원본 음성을 함께 활용해 문장을 어떤 방식으로 전달할지 결정한다. 이를 통해 화자가 무엇을 말하는지뿐 아니라 어떻게 표현하는지를 번역 음성에 반영한다.
이 단계에 도달하기까지에는 여러 기술적 과제가 있었다. 실제 대화 환경에는 다양한 소음이 존재하기 때문에, 오러는 배경 소음과 울림, 오디오 왜곡을 걸러내면서 화자의 고유한 음성 특성과 운율을 분리해 추출해야 한다. 또한 동일한 언어 내에서 음성을 구현하는 것보다 다른 언어로 화자의 목소리를 재현하는 것이 훨씬 복잡하다는 점을 고려해야 한다. 특히 악센트를 과장하거나 본연의 목소리를 왜곡하지 않는 것이 중요하다.
딥엘 보이스는 동일한 화자가 여러 언어로 말하는 실제 음성 데이터가 제한적이라는 기술적 과제도 안고 있었다. 보안 규정에 따라 회의 녹취록이나 번역 내용을 시스템상에 저장하지 않으며, 세션이 종료되면 해당 데이터를 메모리에서 삭제하기 때문이다. 따라서 오러는 화자가 한 문장을 마치기도 전에 실시간으로 음성 특성을 파악하고 적응해야 한다. 이 과정에서 화자 고유의 목소리 특성을 인식하는 동시에 대화 상황에 따라 자연스럽게 달라지는 음성의 변화까지 반영해야 한다. 예를 들어 같은 사람이라도 어떤 날은 피곤한 목소리로, 다른 날은 활기찬 목소리로 말하거나 스트레스 상황에서 평소와 다른 말투를 사용할 수 있다. 오러는 이러한 변화를 구분하고, 화자가 말하는 순간의 목소리에 맞춰 번역 음성을 조정한다.
위 과제를 해결하기 위해 딥엘은 화자의 고유한 음성 특성과 운율, 발화 내용을 분리하는 학습 기법을 결합했다. 이를 통해 독립적인 요소들이 다른 언어로 각각 전달될 수 있도록 했다. 강화학습(Reinforcement learning)은 출력 결과를 보다 정교하게 다듬어 정확도 및 음성 품질을 유지하면서도 번역된 언어에서 자연스럽게 들리는 음성을 구현했다. 이 세 가지 기술적 과제를 동시에 해결했다는 점이 오러의 핵심 차별점이다.
다국어 대화에 더 풍부한 의미 전달
목소리는 말만 전달하는 수단이 아니다. 우리는 목소리를 통해 개성을 표현하고, 자신감과 권위를 드러내며, 신뢰를 쌓고 다른 사람과 관계를 맺는다. 중요한 대화에서는 무엇을 말하는지만큼 어떻게 말하는지도 중요할 수 있다.
오러를 통해 딥엘 보이스 사용자는 언어가 달라도 자신의 감정과 표현을 더욱 풍부하게 전달할 수 있다. 중대 발표를 앞두고 잠시 말을 멈추거나, 중요한 협상에서 목소리에 힘을 실어 긴박감을 전달하고, 글로벌 팀에 좋은 소식을 전하며 진지한 말투에서 곧 들뜬 목소리로 바뀌는 상황 등이 대표적이다. 오러는 이처럼 대화 중 달라지는 화자의 표현 방식을 번역 음성에 실시간으로 반영한다. 이제 사용자는 모국어로 대화할 때처럼 자연스럽고 즉흥적으로 소통하면서도 자신만의 개성과 미묘한 뉘앙스를 다른 언어로도 생생하게 전달할 수 있다.
글로벌 기업에게 이러한 개선은 번역 음성이 자연스러워지는 것 이상의 의미를 갖는다. 자신감과 신뢰감, 개성을 담아 소통하는 능력은 고객 관계 구축과 복잡한 협상부터 글로벌 팀 구성에 이르기까지 모든 업무 과정에서 중요하다. 오러는 각자의 목소리를 고유하게 만드는 요소를 더욱 충실하게 보존함으로써, 누구나 어떤 언어로든 모든 대화에 온전히 참여할 수 있는 세상에 한 걸음 가까워지도록 지원한다.
딥엘 보이스에서 오러 체험 가능
오러의 자세한 정보는 관련 웹사이트를 통해 확인할 수 있다.
신규 오러 기능은 별도 추가 설정 없이 ‘딥엘 보이스 포 온라인 미팅(DeepL Voice for Online Meetings)’, ‘딥엘 보이스 포 인퍼슨 컨버세이션(DeepL Voice for In-Person Conversations)’, ‘딥엘 보이스 API(DeepL API for Voice)’에 자동 적용된다. 출시 초기에는 한국어를 비롯해 영어, 독일어, 스페인어, 프랑스어, 이탈리아어, 일본어, 포르투갈어 등 총 8개 언어를 지원한다. 이외 언어에 대해서는 향후 지원 내용을 확대해나갈 방침이며, 기존 음성 모델을 통해 딥엘 보이스가 지원된다.
오러는 딥엘이 그간 추진해 온 딥엘 보이스 기술 고도화의 최신 성과다. 현재 파이오니어 코퍼레이션(Pioneer Corporation), 아라마크(Aramark), 아벤드라 인터내셔널(Avendra International), 이네텀(Inetum) 등 글로벌 선도 기업들이 다국어 소통과 협업을 지원하기 위해 딥엘 보이스를 도입하는 등 기업 시장에서 활용이 확대되고 있다. 한편 딥엘 보이스는 최근 패스트컴퍼니(Fast Company)의 ‘2026년 넥스트 빅 띵즈 인 테크(Next Big Things in Tech)’의 응용 AI(Applied AI) 부문에 선정된 바 있다.
###
[DeepL 소개]
딥엘(DeepL)은 비즈니스를 위한 언어 인프라를 구축하는 글로벌 AI 기업이다. 현재 전 세계 20만 개 이상 기업 조직 및 수백만 명의 개인 사용자가 딥엘의 언어 AI 플랫폼을 통해 실시간으로 소통하고 협업하며 다양한 언어 환경에서 업무를 수행하고 있다. 딥엘은 혁신적인 AI 모델과 엔터프라이즈급 보안 및 프라이버시 결합을 기반으로 기업이 시장과 문화의 경계를 넘어 원활하게 운영될 수 있도록 지원한다. 한편, 2017년 CEO 야렉 쿠틸로브스키(Jarek Kutylowski)에 의해 창업된 딥엘은 현재 900명 이상의 직원이 함께하고 있는 가운데, 벤치마크(Benchmark), IVP, 인덱스 벤처스(Index Ventures) 등 세계적인 투자자들의 지원을 받고 있다. 딥엘에 대한 자세한 내용은 딥엘 웹사이트에서 확인할 수 있다.