공부/음악

[2026.04.03] 화성학 고급 5가지 - 음악 인공지능과 알고리즈믹 작곡 완전 정복 🎵

우주관리자 2026. 4. 3.

컴퓨터가 작곡을 한다고요? 🤖🎵

사실 이건 어제오늘 이야기가 아닙니다. 18세기 모차르트도 주사위로 작곡 게임을 했고, 1950년대부터 컴퓨터가 음악을 만들기 시작했습니다. 그리고 2020년대, AI는 이제 사람이 만든 곡과 구별하기 어려운 음악을 뚝딱 만들어냅니다.

오늘은 이 놀라운 세계 — 음악 인공지능과 알고리즈믹 작곡의 5가지 핵심 개념을 알아보겠습니다.


1️⃣ 알고리즈믹 작곡의 역사 — 주사위에서 딥러닝까지

알고리즈믹 작곡(Algorithmic Composition)이란 규칙이나 절차(알고리즘)를 통해 음악을 만드는 방법입니다. 쉽게 말해, "이런 조건이면 이런 음을 써라"라는 레시피로 곡을 짓는 거죠.

🎲 모차르트의 주사위 게임 (1787)

모차르트의 Musikalisches Würfelspiel은 주사위를 굴려서 미리 작곡해둔 마디를 조합하는 게임이었습니다. 주사위 두 개로 16마디 미뉴에트를 만들면, 가능한 조합이 무려 1.1×10¹⁴개(110조 개!)나 됩니다. 일종의 조합론적 작곡이죠.

이걸 비유하면 레고 블록과 같습니다. 모차르트가 블록(마디)을 미리 깎아놓고, 주사위로 조립 순서를 정하는 겁니다. 블록 하나하나는 완벽하니까, 어떻게 조합해도 그럴싸한 곡이 나오죠.

🖥️ 컴퓨터 음악의 시작 (1950s~)

  • 일리악 모음곡(Illiac Suite, 1957) — 힐러와 아이작슨이 일리노이대 ILLIAC 컴퓨터로 만든 최초의 컴퓨터 작곡 현악 4중주
  • 크세나키스의 확률적 음악(1960s~) — 가우스 분포, 마르코프 체인 등 수학적 확률로 음악 파라미터 결정
  • 데이비드 코프의 EMI(1980s~) — 기존 작곡가 스타일을 분석해서 "그 사람처럼" 작곡하는 프로그램

📌 핵심: 알고리즈믹 작곡은 AI 이전부터 있었습니다. AI는 이 오랜 전통의 최신 챕터일 뿐이에요.


2️⃣ 마르코프 체인과 확률 기반 작곡 — "다음 음은 뭘까?"

마르코프 체인(Markov Chain)"현재 상태만 보고 다음 상태를 확률적으로 결정"하는 수학 모델입니다. 음악에 적용하면? "지금 '도'를 연주했으니, 다음에 '레'가 올 확률 30%, '미'가 올 확률 25%, '솔'이 올 확률 20%…" 이런 식이죠.

🎯 작동 원리

비유를 들어볼게요. 자동완성 키보드를 생각해보세요. "오늘 날씨가" 다음에 "좋다", "춥다", "흐리다"가 각각 다른 확률로 추천되죠? 마르코프 체인 작곡도 똑같습니다.

  1. 학습: 기존 곡들을 분석해서 "도 다음에 레가 올 확률" 같은 전이 확률(Transition Probability)을 계산
  2. 생성: 시작 음을 정하고, 확률 테이블에 따라 주사위를 굴리듯 다음 음 선택
  3. 반복: 원하는 길이까지 계속

📊 1차 vs 고차 마르코프 체인

  • 1차: 바로 직전 음 1개만 참고 → 랜덤해 보이는 결과
  • 2차: 직전 음 2개 참고 → 좀 더 자연스러운 선율
  • 3차 이상: 직전 음 3개 이상 → 원곡과 점점 비슷해짐 (너무 높으면 표절 위험!)

🎵 대표 활용: 데이비드 코프의 EMI(Experiments in Musical Intelligence)는 바흐, 모차르트, 쇼팽 등의 곡을 마르코프 체인으로 분석한 뒤, 해당 작곡가 "스타일"로 새 곡을 생성했습니다. 청중 블라인드 테스트에서 EMI의 "바흐풍 코랄"이 진짜 바흐보다 높은 점수를 받기도 했죠! 🤯


3️⃣ 신경망과 딥러닝 작곡 — AI가 "느끼는" 음악?

딥러닝(Deep Learning)은 인간 뇌의 신경망을 모방한 AI 기술로, 음악 생성에 혁명을 일으켰습니다. 마르코프 체인이 "바로 앞 몇 음"만 보는 근시안이라면, 딥러닝은 곡 전체의 구조와 맥락을 파악합니다.

🧠 주요 아키텍처

① RNN/LSTM (순환 신경망)

시간 순서대로 데이터를 처리하는 네트워크입니다. 비유하면 일기장을 쓰는 사람 — 어제 쓴 내용을 기억하면서 오늘 이어 쓰죠. LSTM(장단기 기억)은 특히 "오래전 주제를 기억했다가 나중에 다시 꺼내는" 능력이 뛰어납니다.

  • Google Magenta의 Music RNN — LSTM으로 멜로디 생성, 실시간 즉흥 연주 가능

② 트랜스포머 (Transformer)

2017년 등장한 트랜스포머는 어텐션(Attention) 메커니즘으로 곡의 어떤 부분이든 한 번에 참조할 수 있습니다. 비유하면 시험 볼 때 오픈북 — 교과서 아무 페이지나 바로 펼쳐볼 수 있는 거죠.

  • Music Transformer (2018) — 곡의 장거리 구조(A-B-A 형식 등) 학습에 탁월
  • MusicLM / MusicGen / Suno / Udio (2023~) — 텍스트 프롬프트로 음악 생성

③ GAN (생성적 적대 신경망)

위조지폐범(Generator)과 경찰(Discriminator)이 서로 경쟁하면서 점점 정교해지는 구조입니다.

  • MuseGAN — 다중 트랙(드럼, 베이스, 기타 등)을 동시에 생성

④ 확산 모델 (Diffusion Model)

소음(노이즈)에서 점점 깨끗한 음악을 "복원"하는 방식입니다. 비유하면 대리석에서 조각상을 깎아내는 과정. 이미지 생성의 Stable Diffusion과 같은 원리!

  • Riffusion — 스펙트로그램(소리의 그림) 이미지를 생성한 뒤 음악으로 변환
  • Stable Audio — Stability AI의 음악 확산 모델

4️⃣ 현대 AI 음악 도구들 — 누구나 작곡가가 되는 시대

2024~2026년, AI 음악 도구는 폭발적으로 발전했습니다. 이제 악기를 못 다뤄도, 악보를 못 읽어도 "슬픈 피아노 발라드"라고 입력하면 곡이 나옵니다.

🎹 주요 AI 음악 플랫폼

플랫폼 특징 방식
Suno 텍스트→완성곡(보컬+반주) 텍스트 프롬프트
Udio 고품질 음악 생성, 장르 다양 텍스트 프롬프트
AIVA 클래식/영화음악 특화, SACEM 등록 작곡가 스타일 선택+커스텀
Google MusicFX 짧은 루프/배경음악 텍스트 프롬프트
Amper(Shutterstock) 영상용 배경음악 무드/장르 선택
Magenta Studio Ableton 플러그인, MIDI 생성/변환 기존 MIDI 입력

🎯 AI 작곡의 3가지 접근법

  1. 텍스트-투-뮤직 (Text-to-Music): "비 오는 카페에서 듣는 재즈" → AI가 곡 생성. Suno, Udio가 대표적
  2. 스타일 트랜스퍼: "이 멜로디를 재즈 스타일로 바꿔줘" — 기존 음악의 스타일 변환
  3. 인터랙티브 작곡: 사람이 시작하면 AI가 이어서, 또는 AI가 제안하면 사람이 선택. Co-pilot 방식

📌 핵심: AI는 작곡가를 대체하는 게 아니라, 작곡가의 도구가 되고 있습니다. 포토샵이 화가를 대체하지 않았듯이, AI 작곡 도구는 음악적 상상력을 실현하는 새로운 붓입니다.


5️⃣ AI 작곡의 철학적 질문과 미래 — "AI가 만든 음악은 예술인가?"

이건 단순한 기술 이야기가 아닙니다. 철학, 법률, 창작의 본질에 대한 근본적인 질문을 던집니다.

🤔 핵심 논쟁들

① 저작권 문제

AI가 만든 곡의 저작권은 누구에게? 현재 대부분의 나라에서 "인간 저자 원칙"을 고수합니다. AI 자체는 저작자가 될 수 없죠. 하지만 AI를 도구로 사용한 인간은? 이 경계가 점점 모호해지고 있습니다.

② 창작의 본질

음악이란 감정의 표현인데, 감정이 없는 AI가 만든 음악이 진정한 예술일까요? 여기서 흥미로운 비유: 카메라가 처음 나왔을 때도 "기계가 찍은 건 예술이 아니다"라는 논쟁이 있었습니다. 지금은? 사진은 당당한 예술 장르죠.

③ 학습 데이터 윤리

AI가 수백만 곡을 학습하는데, 원작자에게 보상은? "스타일을 학습"하는 것과 "표절"의 경계는? 이건 현재 진행형 법적 분쟁입니다.

🔮 미래 전망

  • 실시간 AI 즉흥 연주: 라이브 공연에서 AI가 뮤지션과 실시간 합주 (이미 Google Magenta의 Piano Genie 등에서 시연)
  • 개인화 음악: 당신의 기분, 심박수, 상황에 맞춰 실시간으로 변하는 음악
  • 하이브리드 작곡: 인간의 감성 + AI의 기술적 역량이 결합한 새로운 창작 패러다임
  • 음악 교육: AI가 학생 수준에 맞춰 편곡하고, 실시간 피드백 제공

🎵 결론: AI 작곡은 음악의 "끝"이 아니라 "새로운 시작"입니다. 기타가 류트를 대체하지 않았고, 신시사이저가 오케스트라를 없애지 않았듯이, AI는 음악의 팔레트에 새로운 색을 추가하는 것입니다.


📚 더 깊이 알고 싶다면

  • 추천 도서: 데이비드 코프 《Computer Models of Musical Creativity》, 조지 루이스 《A Power Stronger Than Itself》
  • 추천 다큐: 넷플릭스 "Have a Nice Trip" 시리즈의 AI 음악 에피소드
  • 직접 체험: Google Magenta — 무료 AI 음악 도구 (브라우저에서 바로 실행 가능!)

🎵 화성학 시리즈를 마무리하며

2026년 1월 30일, "화성학이란 무엇인가"로 시작한 이 시리즈가 드디어 마지막 편에 도달했습니다. 기초(음정, 음계, 코드)부터 중급(다이어토닉, 보이싱, 전조)을 거쳐, 고급(세트 이론, 스펙트럼 음악, 신경과학)까지 — 음악 이론의 전체 지도를 함께 그려왔습니다.

하지만 음악 공부에 "끝"이란 없습니다. 오히려 이 시리즈가 여러분만의 음악 탐험을 시작하는 출발점이 되길 바랍니다. 악기를 들어보세요. 곡을 분석해보세요. 그리고 무엇보다 — 많이 들으세요. 🎶

그동안 읽어주셔서 감사합니다! 🙏