게임 스트리머, 버튜버(VTuber), 가상 이벤트 진행자가 라이브 방송 중에 실시간으로 캐릭터 음성을 연출할 때 겪는 가장 큰 장벽은 '음성 지연 시간(레이턴시)'입니다. 기존의 클라우드 기반 음성 변조 툴은 200~400ms 이상의 네트워크 왕복 딜레이를 유발하여 시청자나 합방 상대와의 실시간 대화 흐름을 끊어놓을 뿐 아니라, 아바타 페이셜 트래킹의 립싱크(입 모양)와 출력 음성이 어긋나는 심각한 위화감을 초래합니다. 여기에 네트워크 패킷 손실로 인한 오디오 끊김과 프라이버시 유출 위험도 동반됩니다.
Altered Real-Time Pro는 딥러닝 음성 변조 및 화자 분리 연산을 클라우드 서버 대신 PC 데스크톱의 '로컬 CPU'에서 직접 구동하여 이 문제를 해결합니다. 시스템 수준의 가상 오디오 장치(Microphone (Altered Virtual Audio Device))로 작동하며, 약 135ms에 불과한 알고리즘 레이턴시로 20가지 고품질 Voice Skins를 적용하고 주변 소음 및 타인 음성을 차단하는 생체 인식급 노이즈 아이솔레이션을 지원합니다.
본 가이드에서는 Altered Real-Time Pro의 로컬 엔진을 활성화하고 가상 오디오 라인을 Discord와 OBS Studio에 연결하여, 지연 없이 선명한 캐릭터 보이스를 송출하는 방법을 단계별로 살펴봅니다.
1. 시스템 사양 요구 사항 및 음향 환경 준비
Altered Real-Time Pro는 외부 서버의 힘을 빌리지 않고 사용자 PC의 CPU 연산력으로 신경망 추론을 수행하므로, 하드웨어 사양과 물리적 수음 환경이 안정적인 변조 품질의 핵심 전제조건입니다.
최소 사양 및 추천 방송 세팅 비교
| 하드웨어 항목 | 최소 요구 사양 | 스트리밍 및 버튜버 권장 사양 |
|---|---|---|
| CPU 아키텍처 | 5nm 공정 이하의 모던 Intel/AMD x86 또는 Apple Silicon | Apple Silicon M 시리즈, AMD Ryzen AI, Intel Core Ultra 200 시리즈 |
| CPU 코어 수 | 물리 6코어(12스레드 권장; Intel 저전력 E코어는 코어 수에서 제외) | 물리 8코어 이상(16스레드 이상) |
| 시스템 메모리 | 최소 8 GB RAM | 16 GB RAM 이상 |
| 운영체제 | Windows 10(빌드 1903 이상) 또는 Windows 11; macOS Big Sur 11.0 이상(Apple Silicon 전용) | 64비트 Windows 11 또는 macOS 14 이상 |
| 오디오 장비 | 입 근처에 고정된 헤드셋 마이크 또는 붐 암 마이크 | 단일지향성(카디오이드) 다이내믹/콘덴서 붐 마이크, 밀폐형 모니터링 헤드폰 |
방송 전 필수 음향 수칙
- 반드시 밀폐형 헤드폰(Closed-Back)을 착용할 것: 오픈형 헤드폰이나 스피커로 출력되는 소리는 마이크로 다시 유입됩니다. 실시간 AI 음성 변조 루프에서 이러한 음향 누출은 금속성 링잉, 로봇 같은 떨림음, 극심한 하울링을 발생시킵니다.
- 마이크를 입 가까이에 밀착할 것: 팝필터를 장착하고 마이크 캡슐을 입술에서 5~10cm 거리에 둡니다. 주변 잔향이 섞이지 않은 높은 신호 대 잡음비(SNR)의 원음이 입력되어야 AI가 피치와 포먼트를 왜곡 없이 추적합니다.
- 유선 연결 고수: 블루투스 무선 장비는 하드웨어 자체에서 100~200ms 이상의 무선 딜레이를 유발합니다. 반드시 USB 오디오 인터페이스나 3.5mm 유선 케이블로 연결하십시오.
2. Altered Real-Time Pro 데스크톱 설정
외부 프로그램과 연동하기 전에 Altered Studio 내에서 물리 마이크를 지정하고 실시간 엔진을 구동해야 합니다.
[물리 마이크 (USB / 오디오 인터페이스)]
│
▼
[Altered Real-Time Pro 로컬 엔진]
- Voice Skin 선택 (20가지 캐릭터 음색)
- Isolate 설정 (Advanced / Biometric)
- 로컬 CPU 실시간 추론 (~135ms 초저지연)
│
▼
[Altered Virtual Audio Device 가상 마이크]
┌──────┴──────┐
▼ ▼
[Discord 음성] [OBS Studio 방송 송출]
1단계: Real-Time 콘솔 실행
- PC에서 Altered Studio를 실행합니다.
- 상단 메뉴 바에서 Real-Time 탭을 클릭하여 실시간 변조 작업 환경으로 들어갑니다.
- 입력 장치 목록에서 사용 중인 물리 마이크(예: Focusrite USB, Shure MV7, 헤드셋 마이크)를 선택합니다.
2단계: 목표 음색(Voice Skin) 선택
Altered Real-Time Pro에는 성별, 연령, 질감, 성격이 서로 다른 20종의 Voice Skins가 탑재되어 있습니다. 준비 중인 아바타 콘셉트나 방송 분위기에 맞는 음색을 클릭하여 선택합니다.
3단계: Isolate(배경 잡음 및 타인 음성 격리) 설정
기계식 키보드 타건음, 본체 쿨링팬 소음, 주변 가족이나 룸메이트의 목소리가 들리는 환경이라면 Isolate 기능을 활성화합니다.
- Advanced(고급 모드): 스튜디오급 음향 노이즈 제거 모드로, 방 안의 벽면 잔향, 에어컨 바람 소리, 지속적인 컴퓨터 팬 소음을 정밀하게 억제합니다.
- Biometric(생체 인식 모드): 사용자의 고유한 음성 특징(Voiceprint)을 학습해 고정합니다. 주변에서 다른 사람이 큰 소리로 말하거나 배경 간섭이 -6 dB SIR(타인의 소음이 내 목소리보다 2배 큰 상태)에 달하더라도, 타인의 음성을 완전히 차단하고 사용자 본인의 목소리만 변조하여 송출합니다.
4단계: 실시간 엔진 시작(Start the Engine)
Start the Engine 버튼을 누릅니다. 마이크에 대고 말을 하면서 인터페이스의 볼륨 미터가 원활하게 반응하고 음성이 바뀌는지 확인합니다. 이 시점에서 윈도우/macOS 시스템 드라이버 단에 Microphone (Altered Virtual Audio Device) 가 정상 활성화됩니다.
3. Discord 음성 채팅 및 합방 설정
합방 방송 중 디스코드 통화방에서 동료 스트리머에게 캐릭터 목소리를 전달하려면 디스코드의 입력을 가상 마이크로 지정해야 합니다.
Discord 설정 단계
- Discord를 열고 좌측 하단 프로필 옆의 사용자 설정(톱니바퀴 아이콘)을 클릭합니다.
- 좌측 메뉴의 '앱 설정'에서 음성 및 비디오(Voice & Video)를 선택합니다.
- 입력 장치(Input Device) 드롭다운에서 Altered Virtual Microphone(또는 Microphone (Altered Virtual Audio Device))을 선택합니다.
- 출력 장치(Output Device)는 본인이 듣는 물리 헤드폰으로 유지합니다(가상 장치를 선택하지 마십시오).
음질 뭉개짐을 방지하는 필수 최적화
Discord 내장 음성 보정 기능은 가공되지 않은 일반 사람 목소리에 맞춰져 있어, AI 변조 음성과 중첩되면 목소리가 먹먹해지거나 문장 끝부분이 끊길 수 있습니다.
- Krisp 노이즈 억제 끄기: '노이즈 억제' 설정을 없음 또는 표준 모드로 변경합니다. Altered 자체 Isolate 기능이 로컬에서 훨씬 정밀하게 잡음을 제거하므로, Krisp를 중복 적용하면 음질이 훼손됩니다.
- 음향 에코 제거 비활성화: 밀폐형 헤드폰을 착용했다면 Discord의 음향 에코 제거를 끕니다. 큰 웃음소리나 감정적인 샤우팅이 에코로 오인되어 먹통이 되는 현상을 방지합니다.
- 자동 게인 제어 끄기: 캐릭터 음량의 급격한 변동을 방지하기 위해 오토 게인 제어를 해제합니다.
- 입력 감도 수동 조절: '자동으로 입력 감도 결정'을 끄고, 슬라이더를 수동으로 조절하여 속삭이는 소리는 인식되고 일반 숨소리는 마이크를 열지 않도록 맞춥니다.
4. OBS Studio 방송 송출 설정
OBS Studio에서는 방송 시청자에게 오직 AI 변조된 캐릭터 오디오만 깔끔하게 전달하고, 지성(변조 전 원음)이 함께 송출되는 이중 출력을 차단해야 합니다.
설정 방법 A: 전역 오디오 장치 등록 (가장 간편한 방식)
- OBS Studio 우측 하단의 설정으로 들어갑니다.
- 좌측 메뉴에서 오디오 탭을 선택합니다.
- 전역 오디오 장치 영역에서 마이크/보조 오디오를 찾습니다.
- 드롭다운 메뉴에서 Altered Virtual Audio Device를 선택합니다.
- 마이크/보조 오디오 2, 3, 4번이 모두 사용 안 함으로 되어 있는지 확인하여 변조되지 않은 물리 마이크가 동시에 켜지는 일이 없도록 합니다.
- '적용' 후 확인을 누릅니다.
설정 방법 B: 장면별 오디오 입력 캡처 (유연한 장면 전환용)
방송 인트로 토크에서는 본래 목소리를 내고 게임 진행 시 캐릭터 목소리로 전환하고 싶다면 장면별 소스를 사용합니다.
- OBS의 현재 장면 '소스 목록'에서 + 버튼을 누릅니다.
- 오디오 입력 캡처를 선택합니다.
- 소스 이름을
Altered 캐릭터 보이스로 지정합니다. - 장치 목록에서 Altered Virtual Audio Device를 선택하고 확인을 누릅니다.
5. 버튜버(VTuber) 립싱크 및 페이셜 트래킹 싱크 동기화
VTube Studio, Warudo, 3Tene 등의 페이셜 트래킹 프로그램을 활용하는 버튜버의 경우, 아바타 입 모양과 음성 간에 미세한 시차가 발생할 수 있습니다.
- 웹캠 얼굴 인식 및 2D/3D 모델 모션 렌더링에는 약 40~90ms의 비디오 처리 지연이 발생합니다.
- Altered Real-Time Pro의 CPU 로컬 추론에는 약 135ms의 음향 알고리즘 지연이 소요됩니다.
OBS 오디오 싱크 오프셋 보정법
- OBS 화면 하단의 오디오 믹서를 확인합니다.
Altered 캐릭터 보이스소스 옆의 점 세 개(또는 톱니바퀴)를 누르고 고급 오디오 속성을 엽니다.- 싱크 오프셋(ms)(Sync Offset) 항목을 확인합니다.
- 아바타 입이 음성보다 먼저 열리는 경우: 가상 마이크 오디오에 양수 딜레이(예:
+30 ms~+70 ms)를 부여하여 입 모양과 음성을 맞춥니다. - 목소리가 카메라 영상보다 먼저 튀어나오는 경우: 웹캠이나 캡처보드 비디오 소스 속성에서 비디오 버퍼 딜레이를 줍니다.
- 아바타 입이 음성보다 먼저 열리는 경우: 가상 마이크 오디오에 양수 딜레이(예:
- 본격적인 방송 전, OBS 자체 녹화 기능으로 박수를 치거나 파열음("파", "타", "카")을 발음하는 10초 분량의 테스트 영상을 녹화하여 입 모양과 소리가 일치하는지 모니터링합니다.
6. 트러블슈팅 및 성능 최적화 가이드
1. 소리가 끊기거나 로봇 소리, 찌직거리는 팝 노이즈 발생 시
고사양 3D 게임을 방송할 때 음성이 튀거나 버벅인다면:
- CPU 자원 확보: Altered는 지속적인 CPU 성능을 소모합니다. 게임이 모든 코어를 100% 점유하면 음성 스레드에서 버퍼 언더런(Buffer Underrun)이 발생합니다. 그래픽카드 제어판에서 게임의 최대 프레임 속도를 60 FPS 또는 120 FPS로 제한하여 CPU 여유 자원을 확보하십시오.
- 샘플 레이트(Sample Rate) 통일: Windows 사운드 설정, OBS 오디오 설정, Altered Studio 설정이 모두 동일하게 48,000 Hz (48 kHz) 로 맞춰져 있는지 확인합니다. 44.1 kHz와 48 kHz가 섞이면 리샘플링 과정에서 클릭 노이즈가 발생합니다.
- 오디오 버퍼 사이즈 조정: 오디오 인터페이스(ASIO/WASAPI)의 버퍼 사이즈를 128~256 샘플로 설정합니다. 64 미만은 CPU 부하가 급증하고, 512를 넘어가면 실시간 대화에 불편한 지연이 생깁니다.
2. 방송에서 원래 목소리와 변조된 목소리가 동시에 들리는 현상 (더블 보이스)
시청자로부터 "목소리가 겹쳐 들린다"는 반응이 나오는 경우:
- OBS 오디오 믹서에서 PC 기본 물리 마이크와 Altered 가상 마이크가 둘 다 활성화되어 있는지 확인하고 물리 마이크를 음소거합니다.
- 데스크톱 오디오 캡처 소스에 Discord 마이크 모니터링 사운드가 루프백되어 다시 캡처되고 있는지 점검하십시오.
7. 플랜 및 라이선스 비교
Altered Real-Time Pro는 방송 시간과 목적에 따라 선택할 수 있는 라이선스를 제공합니다.
| 플랜 | 가격 (월간 / 연간 환산) | 일일 처리 시간 한도 | 포함 기능 | 개인정보 및 데이터 정책 |
|---|---|---|---|---|
| Free (무료 플랜) | 평생 무료 | 하루 20분 | 매일 4개 Voice Skins 순환 제공; Isolate 노이즈 제거 | AI 개선 프로그램 참여 (익명화 데이터) |
| Voice Skins 플랜 | 월 $5.00 (연간 결제 시 월 $2.50) | 하루 120분 | 전체 20개 Voice Skins 제공; 전체 Isolate 모델 | AI 개선 프로그램 참여 |
| Call Center / Euphonia (표준 프라이버시) | 월 $12.00 (연간 결제 시 월 $10.00) | 무제한 | 억양 변환 또는 발화 복원 기능; 전체 Voice Skins 및 Isolate | 100% 로컬 디바이스 처리; 외부 데이터 전송 일체 없음 |
| Call Center / Euphonia (할인형) | 월 $8.00 (연간 결제 시 월 $6.00) | 무제한 | 억양 변환 또는 발화 복원 기능; 전체 Voice Skins 및 Isolate | AI 개선 프로그램 참여 |
| Cloud Compute 추가 애드온 | +월 $2.00 / 일일 1시간 할당량 | 추가 용량 | 고부하 연산을 인근 클라우드 서버로 분산 처리 | CPU 사양이 낮은 초경량 노트북 사용자용 |
하루 2시간 이내로 방송하는 일반 스트리머는 Voice Skins 플랜으로도 모든 보이스 라이브러리를 충분히 활용할 수 있습니다. 4시간 이상 장기 방송을 진행하는 전업 버튜버의 경우, 방송 도중 변조가 끊기지 않도록 무제한 플랜을 선택하는 것을 권장합니다.
참고 자료
- Real-Time Voice Changer | Altered
- How Altered Real-Time Pro Works | Altered
- OBS with Altered Real-Time Pro Voice Changer
- Discord with Altered Real-Time Pro Voice Changer
- Real-Time Voice Isolation & Speaker Isolation | Altered
- Real-Time Pro Pricing | Altered
- Real-Time Pro Frequently Asked Questions | Altered