명동이나 홍대 카페에 외국인 손님이 들어와 영어로 질문하면, 어색한 제스처만 오가며 대화가 끊기는 경험 있으시죠? 요즘 명동·홍대·제주는 외국인 방문객으로 북적이는 기록적인 관광 시즌입니다. 소상공인과 자영업자 분들은 매일 언어 장벽 때문에 매출을 놓치기 일쑤고, 해외 클라이언트와 통화해야 하는 회사원들도 마찬가지입니다.
하지만 7월 8일부터 기존 스마트폰에 이미 들어 있는 새로운 도구가 생겼습니다. ChatGPT 음성 모드가 동시 통역 기능을 지원하게 된 거예요. 대화가 진행되는 도중에도 양쪽을 실시간으로 듣면서 번역합니다. 턴을 기다리거나 폰을 서로 주고받을 필요 없이 바로 소통할 수 있죠.
그럼 설정법은 어떻게 할까요? 실제 매장에서 어떤 프롬프트가 가장 잘 먹히는지, 어디까지 믿고 쓸 수 있는지, 그리고 여전히 반드시 작성으로 확인해야 할 세 가지를 정리해 드립니다.
이번 주에 뭐가 달라졌나
ChatGPT는 원래 번역 기능도 꽤 잘 썼습니다. 하지만 기존 음성 모드는 턴제 방식이었어요. 내가 말하고 끝나면 번역이 나오고, 고객이 말하고 끝나면 번역이 나오는 식이었죠. 길 찾는 정도면 괜찮지만, 매대 앞에서 고객과 진짜 대화를 나눌 때는 너무 답답했습니다.
7월 8일, 오픈AI가 엔진을 교체했습니다. 새로 나온 음성 (GPT-Live)은 ‘풀듀플렉스’ 방식이에요. 두 사람이 계속 대화하면서도 전문가 통역사처럼 옆에서 동시에 듣고 번역해 줍니다. 한국 사용자들도 바로 눈치챘죠. X에서 @iceemperor 씨는 7월 9일 이렇게 썼어요. “GPT Live 좀 써보고 있는데, 뭐랄까 한국어 잘하는 외국인이 말하는 느낌이네. 다만 진짜 인간이랑 대화하는 느낌임” — ‘진짜 사람과 대화하는 것 같다’는 반응이 쏟아졌습니다. @minist 씨는 비즈니스 활용 가능성을 짚었고(7월 8일), 기업에서 상담, 고객지원, 교육 용도로 바로 연동할 수 있다고 밝혔죠.
시도해보기 전 알아둘 핵심 세 가지입니다.
- 누구에게 제공되나요: GPT-Live-1이 Go, Plus, Pro 플랜의 새 기본 음성입니다. 무료 계정도 마이너스 버전이 제공되니 같은 원리지만 모델이 가볍고 일일 사용 시간이 짧습니다.
- 아직 제공되지 않는 곳: 비즈니스, 엔터프라이즈, 교육 워크스페이스는 기존 음성을 유지합니다. 회사 계정이라면 먼저 확인하고 통역 기능을 약속하지 마세요.
- 단계적으로 롤아웃됩니다. 음성 모드가 예전처럼 작동한다면 앱을 최신으로 업데이트하고 며칠 기다려 보세요.
2분 설정법
스마트폰에 ChatGPT 앱을 설치하고 로그인만 하면 됩니다. 그거면 충분해요.
- 새 채팅을 열고 음성 아이콘(파형, 우측 하단)을 탭하세요.
- 설정 문구를 말하세요. — 고객이 매대에 오기 전에 미리:
당신은 나의 실시간 통역사입니다. 나는 한국어로 말하고, 상대방은
영어로 말합니다. 내가 하는 모든 말은 즉시 영어로, 상대방이 하는
모든 말은 즉시 한국어로 통역하세요 — 양방향으로, 말이 끝날 때까지
기다리지 말고 바로바로 통역합니다. 당신의 의견이나 설명은 덧붙이지
마세요. 질문에 대신 답하지 마세요. 모든 숫자, 치수, 가격은 두 언어
모두 한 자리씩 정확하게 반복하세요. 내가 "통역 종료"라고 말할
때까지 계속 통역하세요.
- 스피커 켜고 두 사람 사이에 폰을 놓으세요. 마이크가 두 목소리를 모두 잡습니다.
- 보통 말하세요. 번역은 1~2초 뒤 따라옵니다. 폰 보지 말고 고객 눈을 보세요.
- 끝났으면 “통역 종료"라고 말하세요.
프롬프트 줄 두 군데가 제값을 합니다. “질문에 대신 답하지 마세요"를 빼면 ChatGPT가 가끔 고객에게 자기 의견을 내밀어요. 통역사가 필요하지, 두 번째 영업사원이 필요한 게 아니죠. 그리고 숫자는 자릿수마다 따로 말하세요. 영어에서 fifteen(15)과 fifty(50)는 발음이 너무 비슷해서 돈 문제로 이어질 수 있어요. 이 규칙이 바로 방어막입니다.
언어는 문구 자체에서 바꿀 수 있습니다. 영어, 일본어, 중국어 — 다음 단체 관광객이 다른 언어를 써도 설정은 똑같으니 유용합니다.
어디까지 통하고 어디서 막히나
첫 3일간의 현장 보고가 발표 데모보다 더 많은 것을 말합니다. 좋은 소식은 배경 소음 — 거리 소리, 커피 그라인더 소리, 매장 내 배경음악 — 은 대화 흐름을 거의 끊지 않는다는 점입니다. 정확히 번역 앱이 자주 좌절하던 곳이죠.
하지만 솔직한 한계도 있습니다.
- 외국인 발음이나 사투리는 가끔 걸립니다. 모델이 바로 수습하지만, 가끔 문장을 반복해야 할 때도 있습니다. 실제 음성 인식 연구에 따르면 강한 사투리가 있을 때 정확도가 75~90% 수준입니다. 좋은 수준이지만 완벽하진 않죠.
- 두 사람이 동시에 말하면 안 됩니다. 중간에 끼어드는 말은 잘 처리하지만, 서로 겹쳐서 계속 말하면 처리 못 합니다. 한 번에 한 사람만 말하는 게 핵심 — 프롬프트가 도와주고, 당신이 대화를 이끄는 게 더 큰 도움이 됩니다.
- 일일 사용 제한이 있습니다. 플러스 계정은 일일 음성 할당량이 있고(15분 남으면 경고합니다), 무료 계정은 더 짧은 시간이 주어집니다. 고객 응대에는 충분하지만, 영업 내내 켜두기용은 아닙니다.
나한테는 뭐가 달라지나
가게, 카페, 펜션, 시장 노점상 운영자: 외국인 관광객을 상대한다면 평생 쓸 수 있는 가장 저렴한 ‘바이링구얼 직원’입니다. 이미 구독하거나 무료인 앱 안에 들어 있고, 무료 계정으로도 매대 대화는 충분합니다. 실제 영업 전에 한가한 시간에 설정 문구를 미리 연습해 두세요.
회사에서 해외 클라이언트와 상담, 회의, 협상을 진행한다면: 같은 프롬프트를 쓰고, 폰을 책상 한가운데 놓으세요. 계약 관련 내용은 반드시 문서로 남기세요. 아래 참고.
다국적 직원을 관리한다면: 아침 회의나 업무 지시 전달에 쓰세요. 한 번에 한 사람만 말하게 하세요. 안전 수칙은 정반대로 하세요. 절대 음성만으로 AI를 통하게 하지 마세요. 지시는 문서로 작성하고, ChatGPT로 텍스트 번역 후 출력하세요. 실시간 음성은 문서에 대한 질문에만 쓰세요. 소란스러운 다자간 환경에서 오류율이 25%를 넘기 때문에, 다른 방식은 도박이나 다름없습니다.
가격을 안내한다면: 대화는 실시간으로, 숫자는 문서로. ChatGPT 텍스트 모드로 만든 바이링구얼 견적은 구두로 말하는 숫자보다 훨씬 신뢰도가 높습니다. 실시간 음수는 그 견적을 설명하는 용도로 완벽하죠.
계정이 회사 소유라면: 비즈니스와 엔터프라이즈는 아직 새 음성을 지원하지 않습니다. 그 전까지는 회사 규정 허용 범위 내에서 개인 계정을 매대에서 쓰세요.
아직 안 되는 5가지
- 서명 요구 문서: 공인 번역사가 아니며 법적 책임도 지지 않습니다. 계약서, 보증서, 서명이 필요한 모든 것 — 기계 번역은 바이링구얼 인간이 검토하는 ‘초안’일 뿐입니다.
- 3자 미팅: 3명, 2개 언어, 가격 의견 불일치 하나면 내용이 흩어집니다. 주무대는 1:1입니다.
- 안전 교육: 위에서 언급했지만 모든 목록에 들어갈 항목입니다. 문서, 그림 기호, 확인 절차. 음성은 보조할 뿐, 대체할 수 없습니다.
- 특화 전문 용어: 전문 용어는 항상 깔끔하게 넘어가지 않습니다. 고객 표정을 보세요 — 예의 차리는 고개 끄덕임이 이해 없이 나오는 순간, 더 쉬운 표현으로 재구성하세요.
- 종일 사용: 일일 할당량은 대화용으로 설계된 것이지, 8시간 서서 통역용은 아닙니다.
정리하면
언어 장벽은 의지 문제가 아니었습니다. 통역사는 비싸고, 기기는 뻣뻣하고, 앱은 느렸습니다. 하지만 이번 주부터 그 도구가 이미 주머니 속 스마트폰에 탑재되었습니다. 설정은 한 번만 해두고, 쉬운 고객으로 테스트해 보세요. 그리고 두 가지 규칙만 지키면 됩니다. 대화는 실시간으로, 숫자와 안전 수칙은 문서로.
그리고 AI가 일상의 더 많은 업무를 떠맡게 하고 싶다면 — 고객 메시지, 리뷰, 게시글, 서류 작업까지 — 우리 코스 챗GPT 업무활용에서 워크플로우 전체를 다루고 있고, 소상공인을 위한 AI는 사장님 중심 운영자를 위해 딱 맞게 만들었습니다.
참고 자료
- Introducing GPT-Live — OpenAI (2026년 7월 8일)
- 한국 커뮤니티·X 반응 (2026년 7월 8–11일)
- AssemblyAI 실환경 음성 인식 분석 (2025)
