introduction to SOUND ART

aRchiePEDIA @ Salon de FACTORY, Hongdae 2011.08.28

LISTENcarefully

SOUND

NOISE

MUSIC{ }_keywordsonic artmusique concrete

soundscape

generative music

ambient music

_softwareaudicity

Ableton LiveSuperCollider / Max5 : generative music & installation

_What is sound art?사운드를 활용한 설치작품, 사운드 오브제 / 텍스트를 이용한 사운드 구성

sound sculpture

sound poetry

sonification

experimental music

noise musicsoundscape

sound installation

circuit bending

acoustic ecology

radio art

_historyfrom futurist

situationist internationalsite-specific art

_music : 송신자(작곡자, 연주자) 중심?

_sound art 는 송신자, 수신자, 환경 함께 고려 (and device/object?)

Sound Stars (1987)Bernhard Leitner건축전공. 오스트리아

사운드-공간-몸의 관계 탐구

Sound Garden (1983)Douglas Hollis 대지예술 / 풍력

Earth Tones (1992)Bill Fontanaacoustic ecology 작업

캘리포니아 Oliver Ranch 대형스피커... 저주파로 대지진동시킴

Moonfield (2002)Steve Roden가가린 목소리를 소스로 만든 ... 8채널 100개의 스피커 설치작업

Fire Oragan (2005)Trimpin 화력 이용

Milch (2000)Alva Notodigital technology + minimal installation

cf. chladniarray pattern

Test Patter (2008) Ryoji Ikeda

Mixing desk (2008)Richard Chartier

WORKS

물체의 진동에 의해 생긴 음파가 “ 귀청” 을 울려 귀에 들리는 것?cf. 골진동은 어떤가?

몸으로 느낄 수 있는 진동... 도 소리 인가?

귀로 못듣는 소리로 작업하는 아티스트도있다...

SOUND?* Modalities of listening 청취양상

David Dunn “Cyberentics, Sound art and the sacred”에서 인용

Environmental Hearing 1

_생존을 위해 물리적 환경과 직접적인 커뮤니케이션을 하기위해 소리 듣기.

cf.동물의 위협

Arithmetical Hearing

_수의 아름다움을 듣는것. 피타고라스 수학적 비 례관계. 현의길이 / 망치무게.. 등으로 실험

Spectral Hearing

_바로크에서 낭만주의 시대 (common practice period)를 지배한 화성구조를 중심으로

한 음악을 듣는것

Technological Hearing _

_Helmholtz 음향학을 기초로 과학적 탐구시작. common practice시대의 조성체계가 무너지기

시작하여 음악의 구성원리에 대한 새로운 시도... 바그너 . 쇤베르그..

Environmental Hearing 2

_사운드스케이프를 음악으로 인식. 노이즈의 해방(노이즈도 즐길수 있다!)

확률과 불확실성. 음악의 탈구조화. 생성음악

*칵테일효과 ... 시끄러워도 듣고싶은 소리는 들린다 의식화한 소리 .. 원래들리는 소리도 관심없으면 안들린다.

vibration - perception - recognition 물리적 전달 전기적 해석 데 이터가 많이 손실 및 왜곡된다.

*왜 소리 /음악을 듣는가?음악을 통해 특정한 정보를 뽑기위해 듣는가? ... 재밌네 ...

소리에서 즐거움을 찾는다 --- 소리 자체의 가치를 찾는다

소리에서 정보를 얻는다 --- 소리로부터 다른 가치를 찾는다(전화벨. 알람... 등)

듣기와... 감상...

physics - acoustics physiology - psycho-acoustics

phonomena perception recognition

달팽이관에서... 액체 진동.. 섬모들이 감지 sensing해서 전기적 신호로.. 바뀌는 상

태 / 나이들수록 바깥쪽부터 섬모hair cell들이 죽어서 특정주파수를 못듣게 되는 것.

particle 매질( medium) 입자/분자의 움직임을 통해 ... wave / sound

소리는 파이므로.. 파장 wavelength와 주파수frequency

소리를시각화하기위해서는 wavelength(m) = speed of sound (m/s) / 주파수

frequency는 초당 압축의 수이고, 음고(pitch)는 주파수와 관련된 지각이다. 진폭

amplitude는 강도, 음강loudness는 개인이 그 강도를 지각하는 것. (진폭과 같지

않다)

낮은음일수록 파장이 길겠지?

저주파는 멀리 전파되고.. 높은 소리는 통과하기 힘들다 / 파장길이랑 관계있는...

**** 벽두께보다 긴파장이면 통과하고...

소리와 빛은 파장으로 해석가능하니깐... 비슷하게.. 해석가능

(개념적으로) 파장으로 나누면

전자기파 가시영역 (빛 ) 소리

|--------------------------------|

파장짧음 파장김

빛은 photon

전자기파는 전자 electron

440Hz는 라(A)

440 * 2Hz는 한옥타브위의 라(A)

Envelope의 표준형태

피아노 사운드를 뒤집으면 전혀 다른 캐릭터의 사운드가 나온다.

신디사이저에서는 Attack - Decay - Sustain - Release 단계에 따라서 악기를 구분할 수 있다

에너지가 가해졌을때의 반응 패턴이 특성을 결정하는 것!

(따라서 사람도 악기에 대입해볼 수 있다?!)

그럼 음색과는 어떻게 다른가?

소리를 뒤집어서 전혀 다른 소리가 나오더라도.. 음색 (스펙트럼 구성) 은 같다.

Envelope은 패턴?

음높이는 주파수와 관계가 있다.. frequency와 Pitch(음계)

내가 찾는 음의 주파수 = 기준주파수 f * 2 의 n/12 승

how to make SOUND?Recording instruments and/or SourceCollecting SurroundingsSynthesizing with computer (coding) /Electronic devices / Software Instrument / Programming

아날로그 데이터를 “ 샘플링 ” 하려면 일정한 간격으로 즉, sampling rate 에

따라 스펙트럼이 결정된다.

& 최대-최소값이 필요하다. bit depth 하나의 샘플이 표현하는 수의 범위

CD는 44,100hz sampling rate & 216 비트해상도가있다.

고급기기는 96,000hz에서 224해상도

.wav .aif(f)는 원리대로 원하는 샘플링할 수 있는 화일이다... but, mp3,

m4a(aac)는 압축방식 (사람들이 못듣는 데이터를 제거하고 저장하는방식임)

이펙터는

시간영역의 이펙터 & 공간영역의 이펙터

검색해볼 용어들

구체음악, musique concrete, 사운드스케이프 soundscape, 생성음악 generative music

앰비언트음악 ambient music, acoustic ecology, found sound, noise pollution, real-world music

Musique Concrete 구체음악 : 자연음을 테이프에 녹음하여 그 소리를 조작, 조합. 새로운 음악을 만들어 내는 것

acousmatic 사운드를 작곡의 재료로 사용하는 것 / 작곡가가 소리재료를 확대하기 위해 전자수단을 사용한 초기시도한 예중의 하나 / 작곡가와 연주자의 역할부담의 탈피 (연주자가 필요없어짐)

Pierre Schaeffer(원래는 엔지니 어출신), Pierre Henry(원래 작곡가), Luc Ferrari, Fancois Bayle, Hugh Le Caine

소리가 지시하는 시각이미지를 없애고 싶어함 (근원을 없애고싶어하는 게 중요한 철학)

피타고라스가 강의할때 얼굴을 가리고 소리만으로 판단하게 하는 것에서 유래

전자음악의 뿌리는 = 프랑스의 구체음악과 독일의 Elektronische Musik에서.. 배경은 기존의 악기의 한계를 극복하고자 함.

미 래주의 예술가인 Ruigi Lussolo의 Art of Noise의 선언에서 시작..

Soundscape 작곡composition

환경. 시간.장소 상황 등 소스가 중요...근원을 없애고 싶어하지는 않는다.

처음 만든 사람은 Murray R. Schafer (캐나다) SFU(Simon Fraser Univ). Noise pollution이라는 것에 관심. acoustic ecology와 연계...

작곡은 개인의 관심사이지만.. 이사람은 소리의 사회학/사회적 의미에 관심이 있었다.

Barry Traux라는 사람과 Hildegard Kampen...... 이라는 사람이 계승해 발전시켰다.

실제소리 real, unprocessed sound와 추상적인소리 abstract, processed sound와의 관계... 그리고 이러한 관계를 이용해서

“ 어떻게 장소, 시간, 상황에 대한 정보를 작곡가와 청자에게 전달할 것인가” 가 중요...

환경에 대한 정보를 전달하지 않은 경우 사운드스케이프 작곡이라 할 수 없다. 즉 document 처름 narrative 가 중요하다...

300개분량의 테잎으로 도시마다 소리를 채집해서... 어쩌구 저쩌구

GENERATIVE MUSIC

“ 생성음악은 원예gardening와 같습니다. 당신이 씨를 뿌리면 그것은 매번 다른 형태로 자라납니다...” (Brian Eno, wired 인터뷰 2001)

CD 형태로 채집되기는 불가능... 이노처럼 플로피와 재생기sw 를 판매할 수 있겠지...

David COPE(거장의 음악을 분석해서.. 그래머를 확률적으로.. 계산해서..shape grammar처럼 style을 내는) ... 까페같은 곳에서는 필요하겠지?

cf aRchie) No licensing music service site 만들수있겠다!!!! 스타일을 정하거나... 아님 , Random service루.. 월정액

생성음악 프로세스

(1)알고리즘 만들기

(2)소리합성 (컴퓨터가 아예 만드는 방법 || 소프트웨어 악기사용 ||| 하드웨어 악기사용 |V 물리적으로 소리내기)

LIVE ---------------------- pd/Max ------------------ Flash

MIDI xml socket

OSX에서는

라이브와 수퍼콜라이더 직접 통신

windows는

pd를 이용해서 통신 PD <---------- MIDI ----------> Live

하드웨어 연결에 케이블이 필요하듯이 .. SW 간에도 포트...가 필요

MIDI Port: OSX(IAC Driver), Windows(Virtual MIDI port)

이경우엔, 생성음악 패턴 알고리즘 (Pd) 소리합성을 SW악기 (live 등)

시각과 청각 중 하나만 선택해야한다면

어떤 감각을 선택할 건가요?

헬렌켈러는 귀도먹고 눈도 멀었는데 , 귀먹은 것이 눈먼것보다 더 나쁘다는 것을 느꼈으며 ,

그 이유는 눈 먼 것은 사물들과 자신을 갈라놓지만,

귀먹는 것은 다른사람들과 자신을 갈라놓기 때문이라고 말했다.

귀가 멀면 주변에서 벌어지는 일을 판단하는데 어려움이 있다.

synesthesiatogether sensation

컴퓨터 예술의 탄생

이론_ 정보 / 예술과 정보미학 / 컴퓨터와 생성미학

실천_ 저자의 실천 / 예술 시뮬레이션 / 컴퓨터 그래픽의 고고학

사상_ 컴퓨터 예술 / 생성예술(인터뷰) / 컴퓨터, 하이데거와 마르크스

지은이 | 가와노 히로시

옮기고 엮고 쓴이 | 진중권

BOOK CONTENTS

Keywords from TechnoAesthetics chapter

디지털 살리에리_ 예술과 과학(기술)은 하나였다. 푸슈킨의 극시 <모짜르트와 살리에리> 수학적분석을 통한 알고리즘 찾기. 1950년대 컴퓨터를 통한 작품분석, 알고리즘,

컴퓨터에 입력 작품생성.

cf) David Cope 거장의 음악 분석, Grammar를 확률적으로 계산. 음악생성 http://arts.ucsc.edu/faculty/cope/ http://arts.ucsc.edu/faculty/cope/mp3page.htm

Brian Eno, Karlheinz Essl, Harold Budd etc

정보미학_ 클로드 섀넌 = 열역학 엔트로피 법칙. 뇌-신체, 개인간, 사회의 연결은 정보의 교환과정. 사회과학 - 인문학 - 미학으로 발전. 학제적 통합 패러다임.

미학으로의 도입은 1960년대초 막스 벤제. 아브라함 몰.

정보_엔트로피(무질서도) : 자연과정은 무질서도의 증가과정. 인공은 반대. 네그엔트로피를 창출하는 과정.

01 질서로서의 정보

02 전언(Message) : 이미 질서가 존재. 무질서하여 예측불가능 할 수록 더 많은 정보를 담는다. ex) 경마. 스포츠 도박. 영화플롯 진행의 불확실성(예측불가능성)이 높을 수록 정

보량이 많다. -> 정보미학은 영화 작품의 질적차이를 양적으로 설명가능하게 해준다. (토론거리) 수용자들은 어떤 엔트로피에서 아름다움/감동을 느끼게되는가?

생성예술_1950년대 인공문학, 인공음악. but 문학과 음악은 선형적 배열. 이는 컴퓨터가 정보처리하는 과정과 일치. 반면, 회화는 공간적 배치. so 이를 컴퓨터처리화하려

면 공간적 배열을 시간적 연속으로 번역해야한다. 미술분야의 컴퓨터 생성실험은 1964년. CG의 3N - 게오르그 네스, 프리더 나케(이상 독일). 마이클 놀(미국)

cf) processing에서 PImage의 변환연산의 어려움

마르코프 체인 Markov Chain_러시아수학자 마르코프(1856~1922) 제안. 선행사건에 속박되는 확률론. 정보이론. 유전자 분석. 검색엔진(구글 페이지랭크) 등에 활용. 푸

슈킨의 극시 분석에 적용해보았음. but모음자음이라는 확률론적 신호열로 단순화하여 . 의미론적 혹은 음향학적 층위는 사라짐. (cf. 정량화의 한계점)

가와노 히로시는 이 원리를 그래픽으로 확장적용 : 인간이 그린 그림 (기본 데이터 도형 unit)을 체인으로 바꾸어, 그것들 사이의 추이확률을 구하고, 유사한 확률특성을 가지는

체인을 새로이 생성시킨 것.

마르코프 체인 Markov Chain & Generative Music

몬테카를로법Monte Carlo method _”우연현상의 경과를 난수를 써서 수치적 모형적으로 실현시켜 그것을 관찰함으로써 문제의 근사해를 얻는 방법”ex) 원주율 구하기

가와노 히로시는, 그래프위에 입력된 확률값에 가까운 점들의 분포를 얻어냄. MCMC(마르코프체인몬테카를로법)

이 방법으로 생성해낸 작품의 확률분포는 데이터 작품의 그것과 완벽하게 일치하지는 않는다. 그것은 근사치일뿐이며 횟수를 거듭함에 따라

점점 더 데이터작품의 확률에 접근해갈 것이다.

시대배경01.현대물리학 : 사물을 입자들의 확률적 분포상태.로 파악. 고전회화가 대상을 재현하는 구상을 지향하는데반해. 현대회화는 형과색의 확

률적 분포를 지향한다. cf) 현대음악도 마찬가지.

02.예술의 오브제화 : 예술과 디자인의 경계가 모호해짐. 대상성을 잃은 회화는 디자인에 가까와진다. 다른 대상을 지시하는 것이 아니라 자

기자신을 가리키는 사물에 가까와 지는 것. ex) 뒤샹 & 다다이스트 일상의 (혹은 디자인된) 사물을 그대로 작품으로 선언.

이러한 경향이 컴퓨터라는 기계로 생성한 그래픽을 작품으로 받아들이는데 유리한 배경.

but 마르코프체인의 한계? 10연이상이 넘어가면 아무리 체인수를 늘여도 더이상 인간의 것에 유사해지지 않는다는 것. 인간의 창작이 확률

론적으로 이루어지지는 않는다는 것을 함축하는 것! “화가의 손은 프린터 처럼 미시적 수준에서 신호열을 구사하는 것이 아니라 거시적 수

준의 모티브를 그린다. 이는 마르코프체인으로 시뮬레이션 할 수있는 일이 아니다”

촘스키Noam Chomsky_확률론적으로만 시뮬레이션이 불가능한 디자인/예술에 대한 새로운 모델. 변형생성문법.언어의 표층구조와 심층구조를 연결하는 문법. 문장생성규

칙을 적용. ex)동일한 낱말을 확률론 연관관계로 생성하는 것 vs 문법적체계로 생성하는 것

해롤드 코엔Harold Cohen_

초기 추상에서 구상화까지 발전시킴. 작화프로그램 Aaron

(토론꺼리) Shape Grammar와 Generative Tree의 한계? 인간이 개입한 분석과정이 생성

된 결과에 어떠한 영향을 줄까?

“우리가 목적으로 삼는 컴퓨터 예술이란, 컴퓨터를 예술 창조의 주체로 삼는 컴퓨터의 예술이며, ... 컴퓨터를 이용하는 인간예

술과는 이념을 달리하는 것이다.”

창작작품의 이미지를 개념적으로 내부전개하는 심층처리계(예술가의 두뇌)와, 거기서 생성되는 도형데이터를 구현하는 표층처리의 작화계(예술가의 손)로 이루어지며, 양자는 온

라인 혹은 오프라인으로 관계하며 전체계를 이룬다.

인간이 컴퓨터와 그래픽 패키지를 사용해 작품을 창작하는 행위는... 무선조종로봇과 비슷한 (목적수행을 위한 제어프로그램의 부재를 수동으로 보충하는) 수동컴퓨터예술이다.

존재론적 question : 메타프로그램으로서 인간의 의도 - 컴퓨터 프로그램 간의 관계 vs 자연(혹은 창조주)의 메타프로그램과 인간의 관계

(다만, 창조주의 레벨 차이에서 비롯되는 차별만큼은 남을 것이다)

컴퓨터의 자율성

인간은 학습을 통해 후천적으로 지성을 증강시킬 수 있다. 컴퓨터에서는 확률적 난수 발생으로...

결국, 인간이 예술창조의 알고리즘을 어디까지 알아낼 수 있느냐.하는 것이 이슈임.

새로운 컴퓨터 기술 (병렬분산형, 신경망 컴퓨팅, 유전자의 단백질 합셩 컴퓨팅 등등) & 새로운 알고리즘과 프로그램 이론에 대한 숙제.

ISSUE 1 - Quotation from 3부 컴퓨터 예술의 사상

컴퓨터예술 vs. 인간예술

“ 전체 구조라는 것은 시작과 끝을 갖고 있어야 한다. 마르코프 체인은... 결코 완전함이 있을수없다. ... 불완전한 그대로도 괜

찮지 않느냐는 게 요즘 나의 생각이다. ... 세계에는 조화와 혼돈의 측면이 모두있다. 따라서 컴퓨터 예술도 구상과 추상의 두 측

면 모두로 발전시키는 것이 좋다고 생각한다.”

“한때 예술과 과학은 하나였다.”

“예술과 기술의 차이는 사람들이 만든 관습적 구별일 뿐.”- Theo Jansen -

What is COMPUTER? - Materializing the Digital by Theo Jansen전기에너지 대신 풍력을 저장하고, 마이크로칩대신 압력센서로 판단을 하는 전기배선용 파이프/페트병/가느다란 비닐튜브로 인공생명체를 만드는 키네틱 아티스트. 테오얀센을

통해.

(1) 컴퓨터 예술의 전제인 컴퓨터의 개념 cf.전기적 컴퓨터와 물리적 컴퓨터 / 에너지원 / 판단 메커니즘 etc

(2) 기계(인공생명)과 인간 cf 환경에 대한 작용 반작용Jansen’s Speech on TEDhttp://www.ted.com/index.php/talks/theo_jansen_creates_new_creatures.html

ISSUE 2

예술 vs 기술/과학

Electromagnetic Spectrum

+100V와 -100V전압을 철봉에다가 번갈아서 제공하면...(+) (-)입자가 계속 변화하면서 (오실레이터 /떠는놈)... 전자기파가... 퍼져나간다.

예) 1초에 2.4 X 10의9승 2.4GHz -> Wi-Fi, Bluetooth 이 쇠봉을 안테나라고 한다...

방해전파오실레이터 (OSC 2.4GHz) - 증폭기 - 쇠봉을 연결해서.... 주파수를 쪼금씩 변형시켜서... 공간에 가져다 놓으면... 무선랜이 안된다?

라디오는 전자기파 센서이다...91.9Mhz 그 전자기파를 찾아내서...

모든 원리는

----| 공기 |---- ++ - - 압력을 전기신호로 바꾸는 것

(0) 1과 0의 조합인 데이터 (1)기준시간이 필요하다... 그래서 오실레이터를 쓰는 것.(2)단어에 대한 정의가 필요하다.

모르스부호

같은 조합이더라도.. 기준시간이 다르면 다른 음악 장르가 된다!

Background on SENSORS 핸드폰은 900MHZ혹은 1.6Ghz 기준시간을 가진다

주파수 분할 ... 싸움 -> 나라에서 배당 받는다.

ex 통신의 근거가된다... 구글... 국제전파기구.. 한국전파연구소

MIDI는 31,250hz

ASCII code가 모두 정의 되어있고...

대부분 표준기관에 의해서 규약으로 정의 되어있다...

Jpeg Mpeg Mp3 등등등 모두다... 설명서만 있으면 모든 것을 만들 수 있다.

ADC <--------> DAC

Analog Digital Converter

마이크로칩에 있는 adc port 를 이용해서,

오디오카드, 카메라.. 모두 adc 다.

Sampling rate는

ex 1bit, 1hz sampling 이면 ,

24bit, 96Khz

빛의 입자만큼의 크기와 속도로 Sampling하면 현실과 구별할 수가 없다.

Hi-Fi DAC는 왜 그렇게 oversamplng하는가?

우리가 사용하는 마이크로 프로세서는 24bit 샘플링을 못하니깐.. “ 한계” 등장

” ADC의 한계”누가 나를 도청하는지를 알아보려면?

소스가 2.4Ghz인데 내가 가진 ADC가 4Khz이면?

Digital Signal Processing[ ADC의 속도는 > 2X보고자하는 속도 ] 가 되어야한다.

cf) 자동차 바퀴살. 무림고수의 절벽 뛰어내리기 .. etc

MP3를 좋은 DAC로 들으면 중간에 빈게 들린다.

요즘 컴터 CPU 가 2.4Ghz 이니깐. 이걸 검사하려면 .. 4.8Ghz짜리 ... 고가이다.. 4천~1억

가속도 센서 Wii 0 ~ 3 Voltage 신호를 낸다.실제는 민감해서 & 반동때문에 스피커 처럼 위아래로 출렁인다..

trade off / filtering procedure 가 발생 (1)아날로그 시그널 프로세싱은...저항 + 커패시터를 달아서 DSP (digital signal processing)

기술의 한계를 컨텐츠의 구성으로... 보완하고 충분히 느낌을 전할 수 있어야한다. 퍼포먼스라면... 안무가 바뀌어야할 수도 있다.

Background on SENSORS 적외선 센서는 외부에서 오작동한다. 적외선 필터를 달아도.. 잘 안된다.

1024단계를 128MIDI value로 매핑한다.

filtering방법

매핑 (즉, 나누기)

40번 ADC한 다음에 평균낸다

쓸데없는 데이터값 무시하기

방법 1.기구설계 2.컴퓨터프로그래밍

lookup table센서캘리브레인션....프로그램하지 않고 내가 만들어 놓은 테이

블로 바로 적용시킨다...

자동차 뒤에있는 것도 초음파 센서

초음파는... 반사성이 확실하다...

cf. 시각장애인중에는 입술로.. 초음파를 만들어내서 위치를 파악

piezo electric sensor

piezo : 세라믹으로 분류되는데 ...전압이 들어오면 진동 . 진동이 들어

오면 전압이 나오는 돌멩이/금속?

전압이나오면 진동.. 이 나오는 것은... 컴퓨터 부팅시 삐하는 부저!

아이팟터치도... 피에조스피커

진동이 전압이 되는 것은... 기타에쓰이는 guitar pickup mic

부루스타키는 것...딱하면 전압이 되는... 오락실에서 코인업할때 쓰이던

소형카메라 초점잡는 것도... 기어모터가 아니라... 피에조이다... piezo

motor

피에조는 결국 양방향성이있는... 전압과 진동으로 왔다갔다 한다.

포토다이오드는 결국 태양열 충전판과 비슷하다.

빛을 받아들여서, 전류로 바꾸어준다.(이것의 반대는 LED)

....

Background on SENSORS