로고

AI 기술로 허무는 언어 장벽… 온디바이스 AI 실시간 번역 기술 개발의 주역을 만나다

국민뉴스 | 기사입력 2024/04/28 [00:02]

AI 기술로 허무는 언어 장벽… 온디바이스 AI 실시간 번역 기술 개발의 주역을 만나다

국민뉴스 | 입력 : 2024/04/28 [00:02]

갤럭시 AI가 지원되는 모바일 기기만 있다면 더 많은 나라에서 언어 장벽 없이 자유로운 소통을 누릴 수 있다갤럭시 AI의 온디바이스 AI 실시간 통번역의 지원 언어가 13개에서 16개로 확대되었기 때문이다새롭게 추가된 언어는 아랍어인도네시아어러시아어 등 총 3개이다.

통화 중 실시간 통번역뿐 아니라 다양한 애플리케이션에서 사용할 수 있는 갤럭시 AI 번역 기능은 삼성리서치[1]가 오랜 기간 번역 데이터를 축적하고 AI 기술 노하우를 집약, MX사업부 개발실과 함께 고도화하여 탄생시킨 혁신 기술이다.

온디바이스 AI 번역 기능을 개발한 삼성리서치 글로벌 AI센터 (왼쪽부터) 최윤정, 유용현 프로

▲ 온디바이스 AI 번역 기능을 개발한 삼성리서치 글로벌 AI센터 (왼쪽부터) 최윤정, 유용현 프로

 

온디바이스 AI 기능으로 “개인정보 노출 걱정 없이 마음껏 소통해요”

갤럭시 AI의 실시간 통번역은 온디바이스 AI’ 기능이라는 점이 가장 큰 특징이다온디바이스 AI는 외부 서버나 클라우드의 자원을 이용하는 방식이 아니라기기 자체의 자원만 이용해 서비스를 제공한다번역을 위해서 사용자가 입력한 데이터가 외부 서버로 전송되지 않기 때문에 개인정보 노출을 걱정할 필요가 없다.

삼성리서치 글로벌 AI센터는 자체 개발한 AI 번역 모델에 독자적인 기술을 더해서 온디바이스 AI 모델을 상용화하는 데 기여했다.

삼성리서치 연구팀과 MX사업부 개발팀은 많은 애플리케이션 사용 시나리오를 구상한 후이를 기반으로 필요한 데이터를 확보했다고 한다프로젝트 리더인 최윤정 프로는 통화 중 실시간 통역 기능을 위해 구어체 데이터 수집에 힘썼고여행 중 유용하게 활용될 통역 앱 개발을 위해 여행 관련 데이터도 모았다고 설명했다이어 정확한 번역 기능을 제공하기 위해 채팅에 자주 쓰이는 신조어웹 브라우저에서 사용되는 html 태그 등 다양한 사례를 연구했다고 덧붙였다.

온디바이스 AI 번역 기능 활용 사례. ① 통화 중 실시간 통역, ② 문자·채팅 대화 번역, ③ 노트 앱 번역, ④ 웹 브라우저 번역

▲ 온디바이스 AI 번역 기능 활용 사례. ① 통화 중 실시간 통역, ② 문자·채팅 대화 번역, ③ 노트 앱 번역, ④ 웹 브라우저 번역

 

삼성리서치의 노력으로 발전한 AI 번역 모델… “아이 키우듯 성장시켰죠”

삼성리서치 연구팀의 AI 번역 모델은 데이터로부터 스스로 학습하는 딥러닝(deep learning) 기술을 기반으로 한다. AI 연구 및 개발 담당 유용현 프로는 딥러닝 과정을 아이 키우기와 비슷하다고 설명했다유 프로는 아이를 바르게 키우기 위해 좋은 교육 자료와 양육자가 필요하듯고성능의 AI 번역 모델을 만들기 위해서도 양질의 언어 데이터와 AI를 올바르게 학습시키는 연구원의 역량이 중요하다고 강조했다.

삼성리서치는 양질의 데이터와 AI 학습을 위한 전문가를 모두 보유하고 있다. 2013년부터 사내 번역 서비스를 제공하면서 AI 번역에 대한 연구 개발을 지속적으로 진행해 왔고양질의 데이터도 꾸준히 축적해 왔다.

AI 학습은 딥러닝 분야 전문가로 구성된 삼성리서치 연구원들이 중요한 역할을 했다유 프로는 “연구 개발 과정에서 AI 번역 결과의 품질이 좋지 않으면문제를 파악하고 개선해야 한다연구원의 역량과 경험이 부족하면 문제의 원인을 찾는 데 오랜 시간이 걸리고해결 방안을 찾지 못할 수도 있다우리 연구원들은 전문성과 노하우를 활용하여 문제의 원인을 분석하고개선하는 과정을 빠르게 수행할 수 있다라고 자부심을 내비쳤다.

 

삼성리서치 글로벌 AI센터 유용현 프로

▲ 삼성리서치 글로벌 AI센터 유용현 프로

AI 번역 모델의 번역 성능은 어떻게 검증할까삼성리서치 연구팀은 AI 번역 모델의 성능 검증을 위해서 테스트 세트 기반의 정량 평가와 번역사를 통한 정성 평가를, MX사업부 개발실에서는 다양한 테스트 세트를 구성하여 정성 평가를 진행하고 있다.

또한 세계적 권위의 기계번역 대회에 출전하며 외부 검증도 받고 있다유 프로는 대회 출전에는 많은 시간과 준비가 필요하지만대회에서 우수한 성적을 거두는 것도 연구 개발의 원동력이 될 수 있다 며 팀원 모두가 자유로운 분위기로 토론하고 다양한 아이디어를 시도하면서 좋은 성적을 거둘 수 있었다고 말했다.

 

존댓말, 성조, 문장 기호 등… “언어마다 다른 특징도 세심하게 이해했죠”

언어마다 존댓말성조문장 기호 등 그 문화에만 통용되는 다양한 특징들이 있다. AI 실시간 통번역 기능은 언어적 특징을 최대한 고려해 번역의 완성도를 높였다예를 들어한국어와 일본어처럼 존댓말이 있는 언어는 통역 시 존댓말로 번역하도록 학습시킨 것이다.

해당 언어와 문화를 잘 이해하고 있는 해외 현지 연구소와의 협업도 동시에 진행했다최윤정 프로는 해외 연구소의 연구원언어전문가와 긴밀하게 협력하면서번역의 완성도를 높일 수 있었다고 말했다.

각국의 다양한 언어를 다루기 때문에 종종 시행착오도 따랐다최 프로는 베트남어는 성조가 있는데사용자들이 채팅에서 일상 대화를 할 땐 성조를 생략하는 경우가 많다는 것을 알게 되어 성조가 없는 문장도 번역되게끔 데이터를 추가 구축했다고 일화를 소개했다또한 문장 부호가 없는 태국어를 위한 별도의 문장 분리기를 개발하는 등 삼성리서치 연구팀은 AI 번역 모델의 성능을 향상하고자 세심한 노력을 기울였다.

 

온디바이스 AI 적용 비결? “가볍게 만드는 ‘경량화’ 기술 덕분이죠”

Teacher모델 지식 전이 증류 지식 전이 Student 모델 데이터

삼성리서치는 2019년부터 ‘온디바이스 AI 모델’ 개발을 시작했다유용현 프로는 “온디바이스 AI 모델은 서버 기반 AI 모델과 다르게 사용자의 기기만 이용하여 구동되기 때문에 적은 양의 연산 및 메모리 자원으로도 실행할 수 있도록 모델의 사이즈를 줄이는 경량화 기술이 가장 중요하다고 강조했다. AI 모델 경량화를 위해서 ‘지식 증류(Knowledge Distillation) 방식 ‘양자화(Quantization)’ 기술을 활용했다.

지식 증류는 성능이 좋지만 모델 사이즈가 큰 Teacher 모델로부터 핵심 지식을 뽑아내어 작은 Student 모델로 전달하는 방식이다선생님이 일목요연하게 정리한 내용으로 학생이 공부하면 쉽게 이해할 수 있을 뿐만 아니라 효율적으로 공부할 수 있는 것과 비슷하다.

 

실제 딸기 사진(매우 많은 색상 정보) 양자화 녹색과 빨간색으로 그린 딸기(최소한의 색상 정보)

양자화 기술은 AI 알고리즘을 단순화하여 모델 크기를 줄이고 연산 과정을 효율화하여 응답 속도를 높이는 기술이다유 프로는 양자화 기술을 딸기 그리기에 비유했다. “딸기를 실제와 동일하게 그리기 위해서는 사실상 무수히 많은 색상 정보가 필요하지만 빨간색녹색처럼 간단한 색상으로도 표현할 수 있다며 양자화는 딸기를 그릴 때 필요한 색의 수를 최소화하면서 실제와 가깝게 그리도록 노력하는 과정이라고 쉽게 설명했다.

삼성리서치 글로벌 AI센터 최윤정 프로

▲ 삼성리서치 글로벌 AI센터 최윤정 프로

지식 증류 방식과 양자화 개념은 AI 모델 경량화에서 잘 알려진 방식이지만연구원마다 세부적인 실험 방식이나 요소들이 모두 다르기 때문에 상용화 수준으로 구현하는 것은 결코 쉽지 않다삼성리서치 연구팀은 효율적인 양자화 방식을 찾고 속도 개선 알고리즘을 개발하며 이를 독자적인 기술로 발전시켰다최 프로는 우리도 다양한 실험과 연구를 통해서 가장 적절한 경량화 방법을 찾아냈다고 말했다.

고품질 AI 번역 모델을 압축한 경량화 모델에 응답 속도를 빠르게 만드는 알고리즘까지 적용해 가볍고 빠른 온디바이스 AI 번역 기능이 마침내 탄생한 것이다.

 

“언어를 넘어 문화를 이해하는 완벽한 번역기를 만드는 것이 목표”

온디바이스 AI 분야를 선도하고 있는 삼성리서치 글로벌 AI센터 연구원들의 목표는 무엇일까최윤정 프로는 외국인과 소통할 때 어떠한 거슬림도 없이 매끄럽고 편리하게 대화하도록 돕는 것이 최종 목표라고 말했다유 프로는 완벽한 번역기를 향한 꿈과 열정을 밝혔다그는 언어를 넘어 문화를 이해하고 지식을 갖춘 완벽한 번역기가 언젠가 개발될 것이라며 세상에 아직 등장하지 않은 고도화된 번역기를 만드는 데 도전하고 싶다는 당찬 포부를 드러냈다.

온디바이스 AI 번역 기능을 개발한 삼성리서치 글로벌 AI센터

▲ 온디바이스 AI 번역 기능을 개발한 삼성리서치 글로벌 AI센터

 

모바일 기기 하나만 있으면 인터넷이 없는 곳에서도 누구든지 정보 유출 걱정 없이 자유롭게 소통할 수 있는 온디바이스 AI 번역 기능급변하는 AI 기술 분야에서 언제나 새로운 혁신으로 사용자들에게 편의를 안겨주고 있는 삼성리서치 연구팀의 값진 도전에 응원을 보내며 앞으로의 여정도 기대해 본다.

 

 

  • 도배방지 이미지

광고
광고