Mossca Audio Technology

샘플레이트 업샘플링

고품질 보간을 통해 원본 PCM 오디오를 더 높은 샘플레이트로 변환한 뒤 DAC로 전달해 재생합니다.

샘플레이트 업샘플링은 일반적으로 Upsampling 또는 Sample Rate Conversion이라고도 부릅니다. 예:

44.1 kHz → 88.2 / 176.4 / 352.8 kHz

또는:

48 kHz → 96 / 192 / 384 kHz

이 과정은 원본 음악을 “더 고해상도”로 만드는 것이 아닙니다.

실제로 하는 일은 다음과 같습니다.

  • 원본 샘플 사이에 새로운 샘플 값을 계산
  • 스펙트럼 이미지를 더 높은 주파수 영역으로 이동
  • 이후 디지털 필터의 동작 조건 변경
  • DAC가 받는 데이터 전송률 변경

따라서 이는 능동적인 디지털 신호 처리에 해당합니다.

왜 샘플레이트를 높일까요?

디지털 오디오는 연속된 파형이 아니라 이산적인 샘플들의 집합입니다.

예를 들어 CD 오디오는 초당 44,100 samples를 포함합니다. 플레이어와 DAC는 이 샘플들을 기반으로 최종적으로 연속적인 아날로그 파형을 재구성해야 합니다.

이 과정에는 본질적으로:

Interpolation + Reconstruction

즉, 보간과 재구성이 필요합니다.

따라서 핵심 질문은 “원본 파일에 이미 샘플이 있는데 왜 더 추가하는가?”가 아니라, “샘플과 샘플 사이의 신호를 어떻게 재구성할 것인가?”입니다.

업샘플링은 실제로 무엇을 하나요?

간단한 예:

44.1 kHz → 176.4 kHz

초당 샘플 수가 4배로 증가한다는 의미입니다.

하지만 하나의 샘플을 단순히 네 번 복사하는 것은 아닙니다.

일반적인 올바른 과정은:

Original PCM → Digital Interpolation Filter → 중간 샘플 계산 → Higher-rate PCM

입니다.

추가된 샘플은 원본 신호를 기반으로 수학적으로 재구성됩니다.

새로운 음악 정보가 추가되나요?

아닙니다.

원본이:

44.1 kHz / 16-bit → 176.4 kHz / 24-bit

로 변환된다고 해도 녹음 과정에서 이미 사라진 정보가 복원되지는 않습니다.

Upsampling으로 새로 생성할 수 없는 것:

  • 새로운 악기 디테일
  • 원래 존재하지 않았던 고주파 정보
  • 더 높은 실제 녹음 해상도

Upsampling은 해상도를 복원하는 기술이 아닙니다.

변하는 것은 이후의 신호 처리 방식이지, 원본 음악 자체가 아닙니다.

그런데 왜 소리가 달라질 수 있나요?

DAC는 단순히 “디지털 데이터를 읽고 바로 출력”하는 장치가 아닙니다.

일반적인 현대 디지털 재생 체인은:

PCM → Digital Filter → Oversampling → DAC Core → Analog Reconstruction Filter → 아날로그 출력

과 같습니다.

플레이어가 미리 일부 업샘플링을 수행하면:

PCM → Mossca SRC → High-rate PCM → DAC

이후 DAC 내부의 디지털 처리 과정이 달라질 수 있습니다.

DAC마다 입력 샘플레이트에 따라 동일한 내부 경로를 사용하지 않을 수 있습니다. 이것이 Software Upsampling이 실제 사운드 차이를 만들 수 있는 핵심 이유입니다.

Nyquist 주파수와 스펙트럼 이미지

44.1 kHz의 Nyquist 주파수는 22.05 kHz입니다.

이론적으로 이 범위 안에서 유효한 오디오 정보를 표현할 수 있습니다. 하지만 디지털 샘플링은 주파수 영역에 주기적인 스펙트럼 이미지를 생성합니다.

DAC는 디지털 필터와 아날로그 필터를 통해 이러한 이미지를 억제해야 합니다.

업샘플링 후에는 무엇이 달라지나요?

44.1 kHz를 176.4 kHz로 변환하면 새로운 Nyquist 주파수는 88.2 kHz가 됩니다.

스펙트럼 이미지가 가청 대역에서 더 멀리 이동합니다.

원래:

20 kHz → 22.05 kHz Nyquist

에서는 필터가 사용할 수 있는 Transition band가 매우 좁습니다.

업샘플링 후:

20 kHz → 88.2 kHz Nyquist

에서는 훨씬 넓은 전이 영역을 확보할 수 있습니다.

필터가 왜 그렇게 중요한가요?

이론적인 이상적 보간에는 sinc filter가 필요하지만, 이상적인 sinc는 무한 길이입니다.

실제 시스템은 유한 길이의 근사만 사용할 수 있습니다.

따라서 필터는 다음 요소 사이에서 절충해야 합니다.

  • Passband flatness
  • Stopband rejection
  • Transition bandwidth
  • Phase response
  • Ringing
  • Latency
  • CPU cost

따라서 두 SRC가 모두 44.1 kHz를 176.4 kHz로 변환하더라도 결과가 완전히 같지 않을 수 있습니다.

보간 필터는 어떻게 소리에 영향을 줄까요?

주로 논의되는 요소는:

  • 주파수 응답
  • 위상 응답
  • Pre-ringing
  • Post-ringing
  • Transition band
  • Alias suppression

입니다.

매우 가파른 Linear Phase 필터는 뛰어난 주파수 응답과 높은 Stopband rejection을 제공할 수 있지만, 더 뚜렷한 대칭형 Ringing을 만들 수도 있습니다.

반대로 일부 필터는 주파수 영역 성능을 조금 양보하면서 다른 시간 영역 특성을 선택할 수 있습니다.

따라서 “몇 kHz까지 올리는가”뿐 아니라 어떤 보간 알고리즘을 사용하는지도 중요합니다.

Pre-ringing과 Post-ringing이란?

디지털 필터가 이론적인 impulse 같은 매우 급격한 트랜지언트를 처리할 때, 트랜지언트 전후에 작은 진동이 나타날 수 있습니다.

Linear Phase FIR은 일반적으로 앞뒤 모두 Ringing이 발생합니다.

Minimum Phase 필터는 Ringing의 더 많은 부분을 트랜지언트 뒤로 이동시킵니다.

이는 수학적인 필터 특성이며 반드시 직접 들을 수 있다는 의미는 아니지만, 시간 영역의 파형 재구성에는 영향을 미칩니다.

왜 고품질 SRC가 필요한가요?

Sample Rate Conversion은 단순한 “2배” 연산이 아닙니다.

필요한 과정은:

1. 보간 2. 필터링 3. 스펙트럼 이미지 억제 4. 정밀도 유지 5. 수치 오차 제어

저품질 SRC는 다음을 발생시킬 수 있습니다.

  • Aliasing
  • Passband attenuation
  • Imaging residue
  • 위상 이상
  • 고주파 왜곡
  • 수치 노이즈

고품질 SRC의 목표는 변환된 고샘플레이트 PCM을 가청 대역에서 가능한 한 원본과 동일하게 유지하고 변환 아티팩트를 최소화하는 것입니다.

정수배 샘플레이트가 흔한 이유

다음은 정수배 변환입니다.

44.1 → 88.2 → 176.4 → 352.8
48 → 96 → 192 → 384

반면:

44.1 → 192

는 비정수 비율의 SRC입니다.

수학적으로는 완전히 가능하지만 Resampling ratio와 필터 설계가 더 복잡해집니다.

그래서 많은 고품질 재생 시스템은 44.1 kHz family와 48 kHz family를 유지하면서 각각의 패밀리 내부에서 업샘플링합니다.

44.1 kHz 패밀리와 48 kHz 패밀리

일반적인 관계:

44.1 → 88.2 → 176.4 → 352.8 → 705.6
48 → 96 → 192 → 384 → 768

이 방식은 두 샘플레이트 패밀리 사이의 불필요한 변환을 줄여줍니다.

DAC 내부에서도 이미 Oversampling을 하지 않나요?

많은 현대 DAC가 그렇습니다.

대표적인 Sigma-Delta DAC 내부 경로:

PCM Input → Digital Filter → Oversampling → Sigma-Delta Modulator → DAC Core

따라서 플레이어가 44.1 kHz PCM을 출력하더라도 DAC 내부에서는 더 높은 처리 주파수로 변환될 수 있습니다.

Software Upsampling의 의미 중 하나는 이러한 보간 및 필터링의 일부를 DAC 내부의 고정 알고리즘에서 플레이어의 소프트웨어 알고리즘으로 옮기는 것입니다.

Software Upsampling과 DAC 내부 Oversampling의 차이

직접 재생:

44.1 kHz PCM → DAC Internal Filter → DAC Internal Oversampling

Software Upsampling:

44.1 kHz PCM → Mossca SRC → 176.4 / 352.8 kHz PCM → DAC

후자의 장점은:

  • 소프트웨어에서 더 복잡한 필터 사용 가능
  • DAC 칩 내부보다 CPU 리소스가 더 풍부한 경우가 많음
  • 알고리즘 업데이트가 쉬움
  • 사용자가 출력 샘플레이트 선택 가능

하지만 이것이 자동으로 더 좋은 소리를 의미하지는 않습니다.

왜 반드시 더 좋지는 않나요?

DAC마다 고샘플레이트 PCM을 처리하는 방식이 다릅니다.

일부 DAC는 높은 샘플레이트 입력을 받으면:

  • 내부 Oversampling ratio를 낮추거나
  • 다른 Filter를 사용하거나
  • Modulator 동작 모드를 변경할 수 있습니다

반면 일부 DAC는 352.8 kHz 입력도 여전히 전체 내부 디지털 처리 경로에 통과시킵니다.

따라서 Software SRC의 실제 의미는 DAC 아키텍처에 따라 달라집니다.

DAC 아키텍처별 차이

Sigma-Delta DAC

현대 Sigma-Delta DAC는 내부 Oversampling, Filtering, Modulation에 크게 의존합니다.

Software Upsampling은 내부 Filter / Oversampling stage가 담당하는 비중을 바꿀 수 있습니다.

R-2R DAC

R-2R / Ladder DAC는 설계에 따라 차이가 더 큽니다.

일부는:

PCM → Digital Filter → Ladder

경로를 사용하고, 다른 제품은:

  • NOS mode
  • OS mode
  • 커스텀 FPGA Oversampling

을 제공합니다.

이러한 DAC는 입력 샘플레이트에 더 뚜렷하게 반응할 수 있습니다.

NOS DAC

NOS는 Non-Oversampling을 의미합니다.

DAC 내부에서 전통적인 디지털 Oversampling을 하지 않는 구조입니다.

PCM이 더 직접적으로 Conversion stage로 들어가기 때문에 Software Upsampling의 의미가 더 커질 수 있습니다.

쉽게 말해, DAC 자체가 Oversampling을 하지 않는다면 플레이어의 SRC가 디지털 보간 방식을 직접 결정할 수 있습니다.

NOS DAC는 디지털 필터링을 줄이지만 다음과 같은 대가가 있습니다.

  • 고주파 이미지가 가청 대역에 더 가까움
  • 아날로그 필터 부담 증가
  • 고주파 응답 감쇄 가능
  • Imaging spectrum이 더 뚜렷함

대표적인 조합:

44.1 kHz → Software High-quality SRC → 352.8 kHz → NOS DAC

이 구성은 디지털 보간을 플레이어에 맡기면서 DAC 내부 디지털 필터를 줄이는 방식입니다.

소리에 어떤 영향이 있을 수 있나요?

기기에 따라 사용자가 느낄 수 있는 차이:

  • 고역의 질감
  • 트랜지언트의 경계
  • 공간감
  • 사운드 밀도
  • 더 부드럽거나 더 직접적인 인상

이 차이는 다음에서 올 수 있습니다.

  • SRC filter
  • DAC internal processing
  • Clocking architecture
  • Analog filter
  • Output stage

Upsampling 자체에는 고정된 “음색”이 없습니다.

샘플레이트는 높을수록 좋은가요?

항상 그렇지는 않습니다.

44.1 → 88.2

만으로도 Transition band를 크게 넓힐 수 있습니다.

더 나아가:

352.8 kHz

까지 높이면 이론적으로 더 많은 디지털 필터 여유를 확보할 수 있습니다.

하지만 동시에:

  • CPU 연산량
  • USB 데이터 전송량
  • 메모리 대역폭
  • DAC input workload

도 증가합니다.

결국 실제 결과는 DAC가 신호를 어떻게 처리하는지에 달려 있습니다.

샘플레이트가 높다고 반드시 더 좋은 소리를 의미하지 않습니다.

Upsampling과 Bit-Perfect의 관계

만약:

44.1 kHz PCM → SRC → 176.4 kHz PCM

이라면 디지털 데이터는 이미 변경된 것입니다.

따라서 Upsampling은 원본 PCM 파일에 대해 Bit-Perfect가 아닙니다.

Bit-Perfect의 목표는:

Source PCM → Sample Data 변경 없음 → DAC

입니다.

Upsampling은:

Source PCM → DSP / SRC → New PCM Stream

이라는 다른 전략입니다.

Bit Depth 증가는 무엇인가요?

때때로:

16-bit / 44.1 kHz → 32-bit / 176.4 kHz

와 같은 표시를 볼 수 있습니다.

Sample Rate와 Bit Depth는 별도로 봐야 합니다.

Bit Depth를 높여도 새로운 원본 정보가 생기지는 않습니다.

하지만 DSP 내부에서 32-bit float 또는 64-bit float를 사용하면:

  • 연산 정밀도
  • Headroom
  • 다단 DSP의 수치 안정성

을 높일 수 있습니다.

내부 고정밀 처리는 원본 파일이 “고해상도”로 바뀐다는 의미가 아닙니다.

실시간 SRC는 왜 높은 연산량이 필요한가요?

고품질 SRC는 일반적으로:

Input PCM → FIR filter → 다량의 multiply-accumulate → High-rate PCM

과정을 사용합니다.

Filter Tap이 많아질수록:

  • Stopband rejection 개선 가능
  • Transition band 축소 가능
  • CPU 사용량 증가
  • Latency 증가 가능

고품질 실시간 SRC는 본질적으로 DSP 연산입니다.

Mossca의 샘플레이트 업샘플링 경로

PCM Source → Decode → High Precision PCM → Sample Rate Converter → Higher-rate PCM → Audio Output → DAC

Sample Rate Converter는 Mossca 자체 개발입니다.

Mossca는 다음 조건에 따라 적절한 PCM 출력 경로를 구성합니다.

  • 원본 샘플레이트
  • 출력 장치
  • DAC 지원 샘플레이트
  • 현재 재생 모드
PCM → DSD와의 차이

Sample Rate Upsampling

PCM → SRC → High-rate PCM → DAC

데이터는 여전히 multi-bit PCM입니다.

PCM → DSD
PCM → Oversampling → Sigma-Delta Modulation → 1-bit DSD → DAC

최종 데이터 형식이 DSD로 변경됩니다.

둘 다 High-rate processing을 포함하지만 목적은 다릅니다.

Upsampling은 PCM의 샘플레이트를 변경합니다.

PCM → DSD는 디지털 인코딩 형식과 DAC 입력 데이터 유형까지 변경합니다.

언제 샘플레이트 업샘플링이 적합할까요?

적합한 경우:

  • 플레이어 측 고품질 SRC를 사용하고 싶은 경우
  • DAC가 고샘플레이트 PCM을 잘 지원하는 경우
  • NOS / R-2R DAC를 사용하는 경우
  • DAC 내부 필터와 Software Filter를 비교하고 싶은 경우
  • 충분한 CPU 및 대역폭이 있는 경우

반드시 필요하지 않은 경우:

  • 원본 파일을 Bit-Perfect로 유지하고 싶은 경우
  • 모바일 기기에서 전력 소모가 중요한 경우
  • 엄격한 Bit-Perfect 재생을 원하는 경우

간단하게 이해하는 방법

원본 PCM 재생은 원래 샘플레이트를 DAC에 전달하고 DAC가 보간과 재구성 방식을 결정하게 합니다.

샘플레이트 업샘플링은 플레이어가 먼저 고품질 디지털 보간을 수행한 뒤 더 높은 샘플레이트 PCM을 DAC에 전달합니다.

달라지는 것은 원본 음악 정보가 아니라 디지털 재구성 작업의 일부를 누가 담당하는가입니다.

FAQ

44.1 kHz를 352.8 kHz로 올리면 실제 디테일이 증가하나요? 아닙니다. SRC가 원본 녹음의 유효 정보를 자동으로 늘려주지는 않습니다.

그런데 왜 다르게 들릴 수 있나요? SRC 알고리즘, DAC 입력 경로, 내부 필터, 아날로그 출력 단계가 달라질 수 있기 때문입니다.

샘플레이트가 높을수록 항상 더 좋은가요? 아닙니다. 일정 수준을 넘으면 효과는 DAC 아키텍처와 시스템 구현에 따라 달라집니다.

Upsampling은 왜곡을 만들지 않나요? 모든 SRC는 수학적 변환을 수행합니다. 고품질 SRC의 목표는 가청 대역 내 오차, Aliasing, 주파수 응답 변화를 매우 낮게 유지하는 것입니다.

Upsampling은 Bit-Perfect인가요? 아닙니다. 샘플레이트가 변경되면 출력 데이터는 원본 파일과 더 이상 동일하지 않습니다.

샘플레이트 업샘플링

고품질 보간을 통해 원본 PCM 오디오를 더 높은 샘플레이트로 변환한 뒤 DAC로 전달해 재생합니다.