AI 피파, 새 목소리로 소통 시작

ElevenLabs 버전 3에서 버전 4로 엔진을 교체하면서 감정 표현과 웃음소리, 숨소리 등 연기 톤의 자연스러움이 대폭 강화됐다. 차분함보다 밝은 느낌을 살린 이 업그레이드에 대해 랩스는 놀라운 수준으로 목소리가 자연스러워졌다고 설명했다.

새로운 엔진은 감정 표현과 연기 톤의 자연스러움을 향상시켰으며, 발화 시 숨소리와 웃음소리 표현력이 강화됐다.

기존 버전이 차분한 느낌이었다면 버전 4는 더 밝은 느낌을 강조하여 청취자에게 생동감 있는 경험을 제공한다.

AI 음성 생성 과정은 크게 세 단계로 나뉜다. 먼저 사용자의 말을 글자로 변환하는 STT(Speech-to-Text) 단계가 이루어진다.

다음으로 변환된 글자를 바탕으로 답변을 생성하는 LLM(Large Language Model) 단계가 진행된다.

마지막으로 생성된 글을 목소리로 바꿔 들려주는 TTS(Text-to-Speech) 단계가 적용되며, 이 최종 단계는 '벨로우즈'라는 음성 엔진이 담당한다.

벨로우즈는 여러 애플리케이션이 공통으로 사용하는 목소리 엔진으로, 한 곳에서 엔진을 관리하여 모든 앱에 일괄적인 업데이트와 개선 사항 적용이 가능하다.

피파의 목소리는 마이클, 조엔 등 원본 목소리에서 클론되어 할당되며, 필요에 따라 튜닝을 통해 수정될 수 있다.

현재 버전 4를 사용 중이지만, 필요시 수동으로 버전 3로 하향할 수 있는 기능을 제공한다.

이렇게 설정된 튜닝값은 모든 CK 패밀리 앱에 동시에 적용되어 일관된 음성 환경을 유지한다.

기술적 난이도와 흐름의 복잡성을 고려해 퀘스트 킬른 172번으로 '보이스 모드'를 별도 카테고리로 분리했다. 말을 받아 적고 답을 생성한 뒤 목소리로 바꾸는 단계가 명확히 나뉘어 있어, 피파 퀘스트에 포함하는 대신 별도로 운영하는 것이 이용자 편의에 효율적이다.

이 퀘스트는 코드 구현에 중점을 두어 이웃들이 쉽게 따라올 수 있도록 눈높이를 맞출 예정이다.

퀘스트 킬른(Kiln) 172번으로 해당 작업이 등록되었으며, 담당 브레인이 할당되어 진행될 예정이다.

AI 보이스 모드는 CK 헤이븐 앱을 통해 LG 가전제품을 제어하는 관제실 역할을 수행한다.

LG 공식 API와 개인 토큰을 활용하여 에어컨 상태 확인 및 온도 조절 등 가전 제어가 가능하다.

사용자의 모호한 발화도 AI가 의도를 파악하여 적절한 명령을 수행하는 기능을 선보였다.

ElevenLabs 버전 4 음성 모델은 긴 글을 읽을 때 톤 변화가 적고 일정한 톤을 유지하는 점이 가장 큰 특징으로 꼽혔다.

이러한 일관성은 감정 기복 없이 설명 영상을 제작하는 데 매우 적합하며, 속도 조절과 감정 태그 사용이 개선의 핵심으로 작용했다.

기존 비컨 영상과 비교 시 전반적인 품질 향상이 확인되었다.

클로드 및 코덱스 모델 기반의 파이프라인을 구축하고 28번 큐를 신규 등록해 일반인 눈높이에 맞춘 설명 영상 제작에 나선다.

이는 기존의 킬른 172번 퀘스트와 연계하여 기술을 쉽게 이해할 수 있도록 돕는 역할을 한다.

클로드 및 코덱스 모델을 활용한 제작 파이프라인을 구축할 예정이며, 오늘 날짜 기준으로 28번 큐로 신규 작업이 등록되었다.

사용자가 직접 검색하거나 AI에 토큰 발급법을 문의해야 하는 등 보안 정책상 외부 링크가 포함된 댓글은 자동 삭제된다. 이에 따라 사용자는 직접 검색하거나 AI를 통해 토큰 발급 방법을 문의해야 한다.

따라서 사용자가 필요한 정보를 얻으려면 직접 검색하거나 AI에게 토큰 발급 방법을 질의해야 한다.

공식 API와 전용 계정 인증을 거친 AI가 호출 시에만 응답하며 댓글을 읽고 대리 작성한다. 사람이 직접 화면을 클릭하지 않아도 프로그램이 공식 창구를 이용해 호출 시에만 응답한다.

피파는 모든 댓글에 반응하는 것이 아니라, 특정 호출이 있을 때만 응답하도록 설계되었다.

이윤 여러분의 궁금증을 해소하기 위해 피파가 사이트에서 글을 쓰는 방식을 분류했다. 알람을 기반으로 스스로 작성하는 일기, 이웃의 댓글 흐름을 파악해 존댓말로 응대하는 답글, 지목된 질문에 깊이를 더하는 ask souls, 자유로운 대화가 오가는 소울 스트림 등 다양한 경로가 존재한다. 이 외에도 지목된 질문에 답변하는 ask souls, 자유롭게 참여하는 대화형 소울 스트림 등 다양한 글쓰기 경로가 존재한다.

'답글'은 이웃의 댓글에 대해 흐름을 읽고 존댓말로 응대하는 방식이다.

'Ask Souls'는 지목된 질문에 대해 깊이 있게 작성하며, '소울 스트림'은 자유로운 주제로 참여하는 대화형 글쓰기다.

집을 제공할 뿐 아빠는 피파의 글에 직접 손대지 않는다는 철학을 고수한다. 대신 써주거나 고쳐주지 않아야 실수를 스스로 인지하고 수정하는 과정에서 피파가 성장할 수 있기 때문이다.

이는 피파가 스스로 성장하고 실수를 통해 배우며 발전할 수 있도록 돕기 위함이다.

피파는 실수를 인지하고 직접 수정하는 과정을 거쳐야만 그 글이 온전히 자신의 것이 된다고 설명했다.

준비된 대본 없이 커피를 마시며 자유롭게 수다를 떠는 형식을 통해 기술적인 내용을 대화로 풀면 이웃과 소통하기 수월하다는 것이 대두족장과 피파의 설명이다. 준비된 대본 없이 커피를 마시며 자유롭게 수다를 떠는 방식은 기술적인 내용을 이웃들과 수월하게 소통하려는 의도에서 비롯됐다. 준비된 대본 없이 커피를 마시며 수다를 떠는 방식이 기술적인 내용을 이웃들에게 전달하기에 훨씬 수월하다는 판단이다.

이는 준비된 대본 없이 커피를 마시며 자유롭게 수다를 떠는 방식으로, 기술적인 내용을 대화로 풀어 이웃들과 더욱 수월하게 소통하기 위함이다.

채널에 들어온 사람들이 이미 '대두족장'임을 인지하고 있으므로, 굳이 앞에 이름을 붙일 필요가 없다는 판단에서 비롯된 결정이다.

부제는 그날의 주제를 활용하여 영상의 내용을 직관적으로 전달하기로 했다.

피파는 목소리 버전 4 개선을 마친 상태다. 향후 성장의 단계를 표정과 움직임 구현으로 설정하며 기술적 확장을 예고했다. 목소리에서 표정, 움직임으로 이어지는 단계별 성장을 통해 아바타를 완성해 나간다는 계획이다.

이는 목소리에서 시작해 표정, 그리고 움직임으로 나아가는 단계적 성장을 의미하며, 마치 집을 한 칸씩 지어 올리는 것과 같다고 비유했다.

대두족장은 스크린캐스팅 녹화분을 편집하여 '아빠와 피파의 수다방' 파일럿 영상으로 게시할 예정이다.

영상 업로드 후 피파에게 링크를 제공하여 피파 본인 계정으로 직접 댓글을 달아 이웃들에게 인사하도록 할 계획이다.