오버레이 번역

[CamCyclopedia담당]

이미지 속 외국어, 이제 '그려진 대로' 읽으세요: 오버레이 번역 기술의 세계

안녕하세요, 삼성전자 오버레이 번역 담당자입니다!

해외 여행이나 해외 직구 시 외국어로 된 메뉴판이나 설명서 때문에 불편함을 느끼신 적 있으신가요?
낯선 여행지의 식당 메뉴판 앞에서, 혹은 해외 직구 제품의 복잡한 설명서 앞에서 카메라부터 켜는 여러분을 위해 저희는 오늘도 열일하고 있습니다.
이미지 속 텍스트를 번역하기 위해 이제 텍스트를 일일이 타이핑할 필요가 없습니다.
단순히 글자를 보여주는 것을 넘어, '이미지 속에 원래 한국어가 있었던 것처럼' 자연스럽게 보여주는 갤럭시 오버레이 번역 기술이 여러분의 눈이 되어 드릴게요.

1. 오버레이 번역 기능 소개

"언어의 장벽을 넘어, 더 쉬운 이해를 제공합니다"
갤럭시의 오버레이 번역은 단순한 글자 변환을 넘어, 이미지의 시각적 요소를 그대로 유지한 채 언어만 자연스럽게 변경하는 혁신적인 기술입니다.
이미지 속 외국어를 정확하게 인식하고 번역한 후, 원래 텍스트가 있던 위치에 완벽하게 배치해 줌으로써, 사용자는 원본 이미지의 레이아웃과 디자인을 그대로 유지하면서도 직관적으로 내용을 이해할 수 있습니다.

이전과 이후의 차이를 확인해 보세요!
- 이전: 일본어 메뉴판을 촬영했을 때 글자만 따로 번역되어, 메뉴와 사진이 매칭되지 않아 혼란스러웠던 경험
- 이후: 사진 속 일본어 메뉴가 원래 위치 그대로 한국어로 변경되어, 메뉴 사진과 번역된 글이 완벽하게 매칭되어 쉽게 주문할 수 있는 경험

갤럭시 오버레이 번역으로 더욱 편리하고 스마트한 일상을 경험해 보세요!

2. 오버레이 번역 기술의 핵심 과정

"AI 기술이 만들어낸 놀라운 번역 경험"
겉보기에는 단순해 보이는 오버레이 번역 기능의 내부에서는 삼성의 첨단 AI 기술이 적용된 3단계의 정교한 과정이 진행됩니다.

① 이미지 내 텍스트 인식 (OCR: Optical Character Recognition): 이미지 속 다양한 폰트, 기울기, 복잡한 배경 속에서도 정확하게 텍스트 위치와 내용을 인식합니다.

② 지능형 번역 (NMT: Neural Machine Translation): 인식된 텍스트의 문맥을 분석해 가장 자연스러운 한국어(또는 설정 언어)로 번역합니다.
단순한 단어 대체가 아닌, 상황에 맞는 유연한 번역을 제공합니다.

③ 이미지 재구성 (Renderer: In-painting & Overlay): 가장 핵심적이며 고난이도의 기술입니다.
원본 텍스트를 제거한 후 주변 배경을 분석해 빈 공간을 자연스럽게 채웁니다 (In-painting).
번역된 텍스트를 원본과 유사한 폰트와 색상으로 배치해 이질감 없이 통합합니다.

이 모든 과정이 순식간에 이루어져 사용자에게는 마치 원래부터 해당 언어로 작성된 것 같은 자연스러운 경험을 선사합니다.
삼성의 AI 기술이 만들어낸 진정한 '번역의 마법'을 경험해 보세요.

갤럭시의 오버레이 번역 기능을 뒷받침하는 In-painting 기술은 다음과 같은 세 단계로 진행됩니다.

텍스트 영역 인식 및 마스킹
시스템이 자동으로 이미지 내 번역이 필요한 텍스트 영역을 정확하게 인식합니다. 인식된 텍스트 영역은 마스킹 처리되어 다음 단계를 위해 준비됩니다.

 AI Eraser를 활용한 영역 복원
마스킹 처리된 텍스트 영역이 제거된 후, 삼성의 AI 기술이 주변 배경을 분석합니다. 분석된 데이터를 바탕으로 제거된 영역을 자연스럽게 복원합니다.

번역 텍스트 오버레이 적용
복원된 이미지 위에 번역된 텍스트를 원본과 유사한 스타일로 정확한 위치에 배치합니다. 이를 통해 최종적으로 자연스럽고 조화로운 번역 결과물이 완성됩니다.

이 정교한 In-painting 기술은 사용자에게 마치 원본 이미지에 번역문이 처음부터 존재했던 것 같은 자연스러운 경험을 제공합니다.

※ In-painting 기술은 처리 속도 제약으로 인해 현재 카메라 실시간 번역에서는 지원되지 않으며, 갤러리 사진 번역 기능과 같은 정지 이미지 기반 번역 서비스에서만 활용되고 있습니다.

 3. 갤럭시 오버레이 번역, 이렇게 사용해 보세요!

갤럭시 스마트폰을 사용하시는 분들이라면 별도의 앱 설치 없이 언제 어디서나 간편하게 오버레이 번역 기능을 이용하실 수 있습니다.
오버레이 번역을 사용하기 전에 해당 언어팩이 단말기에 설치되어 있어야 합니다. 언어팩 설치 방법은 다음과 같습니다.

① 설정 > 일반 관리 메뉴를 선택하세요.

② ‘언어팩’ 항목을 선택하세요.

③ 지원 가능한 언어 목록에서 원하는 언어팩을 다운로드해 주세요.

언어팩 설치가 완료되면 바로 오버레이 번역 기능을 사용하실 수 있습니다. 다운로드 파일 크기가 클 수 있으므로 Wi-Fi 환경에서 설치를 진행하시는 것을 권장드립니다.

갤러리, 인터넷 등 다양한 앱에서 오버레이 번역 기능을 활용하실 수 있습니다. 각 앱에서의 간편한 사용 방법은 아래와 같습니다.

갤러리 앱에서 오버레이 번역하기

① 번역이 필요한 이미지를 선택해 주세요.

② 이미지 내 텍스트가 감지되면 자동으로 'T' 버튼이 표시됩니다.

③ 번역' 아이콘을 터치하면 번역이 실행됩니다.
※ 단말기 설정 언어와 다른 언어가 감지된 경우에만 번역 옵션이 나타납니다.

④ 우측 아이콘을 통해 번역 언어를 변경할 수 있습니다.

인터넷 앱에서 오버레이 번역하기

① 번역이 필요한 웹페이지를 열어 주세요.

② 하단 중앙에 위치한 별모양 아이콘을 선택합니다.

③ 번역 메뉴를 선택하면 웹페이지 전체 및 이미지 내 텍스트가 자동으로 번역됩니다.

④ 필요 시 언어 아이콘을 통해 번역 언어를 변경할 수 있습니다.

카메라 앱에서 실시간 번역하기

① 번역이 필요한 글자가 있는 곳을 카메라로 비춰 주세요.

② 프리뷰 화면에서 텍스트가 감지되면 'T' 버튼이 나타나며 이 버튼을 선택합니다.

③ '실시간 번역' 캡슐을 선택합니다.

④ 잠시 후 번역 결과가 오버레이되며 카메라를 이동하면 번역된 텍스트도 함께 이동합니다.

⑤ 언어 변경 아이콘을 통해 번역 언어를 변경할 수 있습니다.

갤럭시의 오버레이 번역 기능으로 더욱 편리한 스마트폰 사용 경험을 누려보세요!
※ 실시간 번역 기능은 Galaxy S26 모델부터 지원되며, 이후 출시될 신제품에도 제공될 예정입니다.

개발자 소감

단순한 글자 변환을 넘어, 여러분의 시야를 넓히는 경험을 제공하고자 합니다. 기존에는 글자가 그림처럼 느껴져 답답했던 순간들을 갤럭시를 통해 '이해의 즐거움'으로 바꾸고자 노력했습니다. 앞으로도 더욱 정교한 배경 복원과 자연스러운 번역 기술로 최상의 사용 경험을 선사할 수 있도록 최선을 다하겠습니다. 사용 중 '이 부분이 더 개선되면 좋겠다'는 소중한 의견이 있으시면 언제든 댓글로 남겨주세요!

여러분의 목소리가 더 나은 서비스를 만드는 힘이 됩니다.

갤럭시 오버레이 번역 개발팀 드림

[오버레이 번역]
지원 모델 : Galaxy S22/S23/S24/S25/S26 시리즈, Galaxy S23/S24/S25 FE, Galaxy Z Fold4/5/6/7, Galaxy Z Flip4/5/6/7, Galaxy Z Fold Special Edition, Galaxy Z TriFold, Galaxy Z Flip7 FE, Galaxy Tab S8/S9/S10/S11 시리즈

[실시간 번역]
지원 모델 : Galaxy S26 시리즈

지원언어

구자라트어 (인도)
네덜란드어
독일어
러시아어
루마니아어
베트남어
스웨덴어
스페인어 (멕시코), 스페인어 (미국), 스페인어 (스페인)
아랍어
영어 (미국), 영어 (영국), 영어 (오스트레일리아), 영어 (인도)
이탈리아어
인도네시아어
일본어
중국어 (대만), 중국어 (중국 본토), 중국어 (홍콩)
태국어
튀르키예어
포르투갈어 (브라질), 포르투갈어 (포르투갈)
폴란드어
프랑스어 (캐나다), 프랑스어 (프랑스), 프랑스어 (필리핀)
한국어
힌디어

※ 지원 언어의 경우 확장될 수 있으며 세부사항은 회사 정책 등에 따라 추후 달라질 수 있습니다.