2 पॉइंट द्वारा GN⁺ 2023-08-14 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • Daft Punk के गीतों के उदाहरणों से psychoacoustics की प्रमुख घटनाओं को देखते हुए यह दिखाया गया है कि हम जो ध्वनि सुनते हैं, वह केवल भौतिक सिग्नल से तय नहीं होती
  • श्रवण अनुभव कान की संरचना और मस्तिष्क की प्रोसेसिंग से होकर बनता है, लेकिन बहुत छोटे समय-अंतर या शोर जैसी स्थितियों में मनोवैज्ञानिक भ्रम आसानी से शामिल हो जाते हैं
  • continuity effect और phonemic restoration effect ऐसे प्रभाव हैं जिनमें मस्तिष्क टूटी हुई ध्वनि को भी जुड़ी हुई मानकर भर देता है, और इसे “Harder, Better, Faster, Stronger” की कट प्रोसेसिंग से जोड़ा गया है
  • Deutsch octave illusion में एक octave के अंतर वाले दो स्वरों को दोनों कानों में बारी-बारी से सुनाने पर, handedness के आधार पर स्वर की स्थिति अलग तरह से महसूस हो सकती है
  • “Robot Rock” के guitar chord की तरह वाद्य भी बोलती आवाज़ जैसे सुनाई दे सकते हैं, और संगीत सुनना केवल भौतिक श्रवण नहीं बल्कि भावना और धारणा के साथ काम करने वाला अनुभव है

श्रवण धारणा में psychoacoustics क्या देखती है

  • psychoacoustics ध्वनि-धारणा और audiology को शामिल करती है, और श्रवण घटनाओं पर मानव की मनोवैज्ञानिक प्रतिक्रिया का अध्ययन करने वाला क्षेत्र है
  • इसमें acoustics, psychology, sound·electronic engineering, physics और biology आपस में गहराई से जुड़े हैं, इसलिए इसे केवल sound wave analysis से समझाना कठिन है
  • मानव श्रवण तंत्र pinna से शुरू होकर ear canal, eardrum, ossicles, cochlea, lateral superior olive, medial superior olivary से गुजरते हुए उस प्रक्रिया तक पहुंचता है जिसमें मस्तिष्क हवा के कंपन की व्याख्या करता है
  • श्रवण अनुभव millisecond स्तर की प्रोसेसिंग के भीतर बनता है, और इसी प्रक्रिया में मनोवैज्ञानिक रूप से प्रेरित भ्रम पैदा हो सकते हैं
  • श्रवण पर सांस्कृतिक प्रभाव भी पड़ता है, इसलिए अलग-अलग संस्कृतियों के लोग एक ही ध्वनि को अलग तरह से सुन सकते हैं

Daft Punk के गीतों में सुने जा सकने वाले भ्रम

  • continuity effect और phonemic restoration effect

    • continuity effect वह घटना है जिसमें ध्वनि को बहुत छोटे अंतराल के दौरान पर्याप्त तेज़ शोर से ढक दिया जाए, तो वह वास्तव में टूटी होने पर भी लगातार चलती हुई सुनाई देती है
    • अगर किसी tone में 200ms से कम का gap बनाया जाए और उस gap को किसी खास शोर से भरा जाए, तो मस्तिष्क उस टूटन को छिपाकर उसे लगातार ध्वनि-सिग्नल की तरह ग्रहण करने लगता है
    • phonemic restoration effect में मस्तिष्क गायब ध्वनि-सूचना को पूरा कर देता है, जिससे सूचना अधूरी होने पर भी बोली या ध्वनि अधिक स्पष्ट सुनाई देती है
    • Daft Punk के “Harder, Better, Faster, Stronger” में 2:20 के आसपास से विभिन्न cuts सुने जा सकते हैं, और 2:50 के आसपास यह खास तौर पर उभरता है
  • Deutsch octave illusion

    • octave illusion एक psychoacoustic भ्रम है जिसे Diana Deutsch ने 1973 में पहली बार पहचाना था
    • जब ऊँचा और नीचा स्वर दोनों कानों में बारी-बारी से चलाया जाता है और दोनों स्वरों के बीच एक octave का अंतर होता है, तो यदि switching काफी छोटी हो, ऊँचा स्वर एक कान में और नीचा स्वर दूसरे कान में सुनाई दे सकता है
    • handedness भी धारणा को प्रभावित करती है, और right-handed लोग ऊँचा स्वर दाएँ कान में सुनने की प्रवृत्ति रखते हैं
    • left-handed या ambidextrous लोग वही चीज़ उसी स्थिति में अलग तरह से सुन सकते हैं
    • Daft Punk के “Aerodynamic” में 2:28 से इस उदाहरण को सुना जा सकता है
  • बोलता पियानो और वाद्यों की बोलती ध्वनि

    • Talking Piano ऐसा प्रभाव है जिसमें पियानो या दूसरा वाद्य बोलता हुआ लगने लगता है
    • इंसानी आवाज़ को fundamental frequency में बदलकर फिर उसे piano notes की तरह बजाया जाए, तो बोली की सूक्ष्म संरचना को वाद्य-ध्वनि के रूप में फिर से बनाया जा सकता है
    • संबंधित उदाहरण यहाँ देखा जा सकता है
    • नाम Talking Piano है, लेकिन दूसरे वाद्य भी ऐसा ही प्रभाव दे सकते हैं
    • Daft Punk के “Robot Rock” में guitar chord ऐसे सुनाई देते हैं मानो वे “Robot Rock” के बोल गा रहे हों

संगीत सुनने से उठने वाले सवाल

  • श्रवण भ्रम केवल इन तीन तक सीमित नहीं हैं; वे 40 से भी ज़्यादा हो सकते हैं
  • संभव है कि Daft Punk ने ऐसे भ्रमों को शामिल करने वाले गीत बनाए हों, और श्रवण केवल एक साधारण भौतिक घटना नहीं बल्कि मनोवैज्ञानिक घटना भी है
  • “Instant Crush”, “Veridis Quo”, “Something About Us” जैसे गीत, जो भावनाओं को गहराई से छूते हैं, संगीत और भावना के संबंध पर भी सोचने को मजबूर करते हैं

1 टिप्पणियां

 
GN⁺ 2023-08-14
Hacker News की राय
  • थोड़ा रैंडम और विषय से हटकर बात है, लेकिन मैं कई सालों से गानों, फिल्मों और TV में ऐसे ऑडियो क्लिप इकट्ठा कर रहा/रही हूँ जहाँ ambient sound (आवाज़ें, noise वगैरह) संगीत में बदल जाती है, या इसका उल्टा होता है
    वेब पर मिला सबसे नज़दीकी शब्द “diegetic switch” था, लेकिन वह बिल्कुल सटीक नहीं है
    उदाहरण हैं https://youtu.be/9j9bVl3rfNk?t=29 पर The Defenders में दोहराई जाने वाली piano note का background music में बदलना, https://youtu.be/isZyX1xd1VQ?t=159 पर The Great American Nightmare - Rob Zombie, https://youtu.be/pU_mZ1X69Ho?t=364 पर Out of Control - Miraculix, और Justice League फिल्म में “Everybody Knows” का ambulance siren में बदलना, लेकिन उसका वीडियो नहीं मिला

    • The Brave Little Toaster का “Worthless” https://www.youtube.com/watch?v=-UfsEj7AOGI और The Dark Knight Rises का chant https://www.youtube.com/watch?v=KXxw-zXRqOs&t=130s भी याद आते हैं
      musicals में इसके कई variants होंगे, लेकिन ज़्यादातर शायद साधारण ही होंगे
    • पता नहीं यह इसमें आता है या नहीं, लेकिन मेरी पसंदीदा मिसालों में से एक Pink Floyd का Wish You Were Here https://youtu.be/IXdNnw99-Ic है
    • आपको शायद Chassol पसंद आएगा
      वे एक French composer हैं, जो ambient sounds की contours के इर्द-गिर्द पूरा track बनाते हैं
      Big Sun album से शुरू करें, और ‘Birds, Pt. 1’ सुनेंगे तो तुरंत समझ आ जाएगा
      वे TV scenes के हिसाब से compose किए गए “ultrascores” भी बनाते हैं; The Wire के लिए बनाया गया उदाहरण https://m.youtube.com/watch?v=bV1lY1UsEng&pp=ygUQQ2hhc3NvbCB... पर है
    • वीडियो गेम है, लेकिन Yoshi's Island की title screen (https://www.youtube.com/watch?v=ZkbxyPl83yI) में sound effects का धीरे-धीरे music theme में fade होने वाला structure है
      noise रुकने के बाद instruments जुड़ते हैं; लगता है इसे SNES के 8 audio channels की limit में बहुत चतुराई से फिट किया गया था, जहाँ शायद sea spray, bird sounds और overlapping xylophone/melody lines को एक साथ play नहीं किया जा सकता था
    • Pink Floyd - Alan's Psychedelic Breakfast (1970) https://www.youtube.com/watch?v=_7pkOZ5n6PQ और John Cage - 4'33" https://www.youtube.com/watch?v=JTEFKFiXSx4 याद आते हैं
  • Aerodynamic में 2:28 पर किस note की बात हो रही है, यह मुझे ठीक से समझ नहीं आया
    उस हिस्से में overlapping high/low pairs कुछ हैं, और कौन-सा octave है या कौन-सी संबंधित frequency है, यह साफ़ नहीं है
    एक में high note बाईं तरफ ज़्यादा लगती है, लेकिन headphones के left speaker को साफ़-साफ़ follow करती है, और बाकी काफी strong right-handed होने के बावजूद इधर-उधर हिलती हुई सुनाई देती हैं
    https://en.wikipedia.org/wiki/Octave_illusion पढ़कर सुनने पर भी मुझे पूरी तरह confusion है कि लेख या Wikipedia क्या समझा रहे हैं
    क्या लोग इस तरह सुनते हैं कि left ear में high note, right ear में कुछ नहीं, फिर low note… या कुछ और? समझ नहीं आता
    मुझे आम तौर पर left/center/right में high-low-low, फिर low-low-high दोहराता हुआ सुनाई देता है, और जब दूसरी तरफ high note सुनाई देती है तब भी low note साथ में सुनाई देती है
    मूल रूप से लगता है कि center में low note लगातार चल रही है, और high note दोनों तरफों के बीच साफ़-साफ़ move करती है
    पिछले एक साल के भीतर मैंने hearing test कराया था और वह लगभग पूरी तरह balanced था, इसलिए नहीं लगता कि एक तरफ की pitch-perception problem से reception imbalance बन रहा है
    मुझे लगता है कि यह illusion शायद बस hearing damage की वजह से भी हो सकता है, और right-handed/left-handed अंतर इस बात से भी जुड़ सकता है कि एक ear कितना ज़्यादा noisy environment या कम protection के exposure में रहा है
    left-handed लोगों को right-handed tools की वजह से दोनों तरफों को ज़्यादा balanced तरीके से use करने पर मजबूर होना पड़ता है, तो उनका bias कम होना भी समझाया जा सकता है

    • असली note के पीछे Shepard tone effect चलता है, जिससे note ऊपर जा रही है जैसा हल्का illusion बनता है, लेकिन असल में ऐसा नहीं है
      फिर भी pitch ऊपर-नीचे move करती है, इसलिए यह बहुत अच्छा example नहीं है
      छोटे लेख में लगता है author ने कुछ चीज़ें मिला दी हैं, और “talking piano” effect भी बस standard vocoding है, इसलिए लगता है कि यह field उनके लिए काफी नई है और वे expert तो नहीं हैं
      असली talking piano https://youtu.be/muCPjK4nGY4 है
    • मुझे भी वैसे ही सिर्फ high note उछलती-कूदती सुनाई देती है
      इस illusion के लिए https://www.youtube.com/watch?v=IMMsK9rjBWo बेहतर वीडियो है
      मैंने सुना है कि brain high overtones से low note synthesize कर लेता है; शायद इसलिए low note दोनों ears में साथ-साथ सुनाई देती है
    • लोग जो सुनते हैं वह साथ-साथ बजती दो notes हैं: एक low और एक high, जिसमें low note left में और high note right में होती है
      यह एक-एक note का left-right panning नहीं है; वे साथ में सुनाई देती हैं, या जब दूसरे techniques के साथ mix होती हैं तो कुछ milliseconds के gap में
      इसे समझने पर left-right को उलटने का concept भी ज़्यादा समझ में आता है, और वहाँ से high/low और left/right को creatively mix करने तक बात बढ़ सकती है
  • ऑक्टेव इल्यूजन के लिए यह वीडियो बेहतर डेमो है
    लेख क्या कह रहा था, इसका मुझे बिल्कुल अंदाज़ा नहीं लगा था, लेकिन इसे सुनकर समझ आया: https://www.youtube.com/watch?v=IMMsK9rjBWo
    हालांकि मुझे निचला सुर सिर के बीच में सुनाई दिया और ऊंचा सुर बाएं-दाएं उछलता हुआ, लेख में बताए गए “एक तरफ लो नोट, दूसरी तरफ हाई नोट” जैसा नहीं
    यह काफी दिलचस्प है कि वही गाना सुनकर भी लोग बिल्कुल अलग तरह से सुन सकते हैं

    • अजीब बात है कि मुझे कोई इल्यूजन बिल्कुल सुनाई नहीं दिया, और दोनों तरफ बारी-बारी से आना बहुत साफ महसूस हुआ
  • Mixing engineers बहुत इस्तेमाल करते हैं, लेकिन लेख में छूटा हुआ एक और प्रभाव Haas effect है
    बाएं और दाएं चैनल के बीच बहुत छोटा delay डालकर single sound source को stereo feel देने की तकनीक है

  • मुझे Daft Punk बहुत पसंद है और मैंने ये गाने अनगिनत बार सुने हैं, लेकिन यह व्याख्या मानना मुश्किल है
    talking piano effect के बारे में पता है, लेकिन wiki page [0] तक इसे vocoder कहता है, और वह बिल्कुल अलग चीज़ है
    दूसरे comment [1] की तरह मुझे भी octave effect में बताया गया pattern सुनाई नहीं देता
    [0] https://en.m.wikipedia.org/wiki/Robot_Rock_(song)https://en....
    [1] https://news.ycombinator.com/item?id=37104083

    • Switched on Pop ने Daft Punk[1] पर बात करते हुए Daft Punk की robot voice को साफ तौर पर vocoder के रूप में पहचाना था
      असल में ज्यादातर robot voices ऐसी ही होती हैं
      [1] https://open.spotify.com/episode/52t5WCspFuFkow374P88wA है और episode 1 और 3 भी संबंधित हैं
    • यह vocoder नहीं है; Robot Rock जैसा जो सुनाई देता है वह guitar riff है
  • Synthesizer के सामने हजारों घंटे बिताने वाले या electronic music/beat बनाने वाले लोगों ने ऐसे कई illusion खोजे होंगे, लेकिन वे शायद इन्हें खास “रोचक चीज़” नहीं मानेंगे
    वे इसे कुछ ऐसा मानते होंगे कि “अच्छा, ऐसा करने पर यह थोड़ा वैसा सुनाई देता है”, और शायद तकनीकों की पूरी list मौजूद होगी

    • ऐसी चीज़ें हमेशा होती रहती हैं
      मेरे साथ सबसे आम यह होता है कि synthesizer पर patch बनाते समय गलती से formant से मेल खाती frequency मिल जाती है, जो लेख में बताए Robot Rock effect जैसी होती है
      कल मैं bass drum beat पर काम कर रहा था, फिर उसके ऊपर synthesizer जोड़ा और bass drum में echo सुनाई देने लगा
      पहले लगा कि synthesizer set करते समय मैंने गलती से reverb या echo effect चालू कर दिया है, लेकिन जांचने पर ऐसा नहीं था, और tracks अलग करने पर भी bass drum वैसा ही था जैसा इरादा था
      आखिर लगा कि synthesizer और drum के बीच कोई अजीब illusion उसे echo जैसा सुना रहा था, और यह जानने के बाद भी कि असल में echo नहीं है, एक बार सुन लेने पर उसे हटाया नहीं जा सकता
      इस मामले में मैंने वापस जाकर drums में थोड़ा echo डालकर effect को जानबूझकर बना दिया और result अच्छा आया, लेकिन कभी-कभी illusion को real बनाने की कोशिश करने पर वही effect नहीं आता
    • 14 साल की उम्र में मैंने नोटिस किया था कि pure sawtooth wave तेज transients को “whish” जैसी आवाज़ में बदल सकती है
      कुछ सेकंड तक pure sawtooth sound को तेज volume पर चलाएं (headphones के साथ), फिर keyboard key दबाएं या उंगली चटकाएं या कोई तेज transient वाली आवाज़ करें, तो वह अब अचानक कटने वाली आवाज़ नहीं रहती, बल्कि “whish” करके गुजरती है
      समझाना मुश्किल है, लेकिन इसमें किसी तरह के flanger effect जैसा एहसास होता है
      इस phenomenon का भी कोई scientific नाम होगा, लेकिन मुझे नहीं पता
    • ऐसी चीज़ों पर पूरी-पूरी books, blog posts और YouTube channels हैं
      Music production अंततः space बनाने का काम है, और producer का बहुत-सा काम यह illusion बनाना है कि sound किसी खास जगह से आ रही है या किसी “बड़े” source से आ रही है
      एक आम technique यह है कि synthesizer को एक तरफ pan करें और दूसरी तरफ कुछ milliseconds का बहुत छोटा delay लगाएं, तो यह दूर से आती बहुत बड़ी sound जैसा लगता है
      इसी तरह, थोड़ा-थोड़ा detune किए हुए कई oscillators को stack करने से sound ऐसी लगती है मानो एक source नहीं बल्कि कई sources साथ बज रहे हों, जिससे sound “बड़ी” हो जाती है
      सिर्फ reverb का इस्तेमाल भी बड़े, गूंजदार space में होने का illusion बनाता है
      हालांकि ज्यादातर producers शायद इसे illusion बनाना नहीं, बल्कि “cool” sound बनाना मानेंगे
  • काश कोई लेखक को tweet करके बता दे कि YouTube URL में इच्छित seconds डालकर &t=0s जोड़ने से video को किसी खास point से शुरू किया जा सकता है
    जिस व्यक्ति के blog में contact का तरीका सिर्फ “Contact Follow me at Twitter: @ugu_rs” है, उससे संपर्क करने के लिए मैं नया Twitter account नहीं बनाना चाहता

    • 1m2s format भी इस्तेमाल किया जा सकता है
  • Robot Rock example में लेखक को साफ करना चाहिए था कि वह असली rock. robot rock voice part की बात नहीं कर रहे, बल्कि उस हिस्से की बात कर रहे हैं जहां guitar chords वैसे सुनाई देते हैं
    linked video में लगभग 1:50 पर जाएं तो robot voice सुन सकते हैं, और फिर 2:00 के बाद सिर्फ guitar chords सुनें तो समझ आएगा कि वह rock. robot rock. कहती robot voice से कितने मिलते-जुलते हैं

    • मैं शर्त लगा सकता हूं कि उस section में normal guitar से करीब 18dB कम level पर vocoded guitar भी बिछी हुई है
      यह resonant filter से भी गुजरी लगती है, शायद MS-20 होगा, और शायद normal guitar की तुलना में formants को बोलते हुए जैसा सुनाने में मदद करता है
    • उस खास example में ऐसा लगता है कि guitar ने voice जैसी sound नहीं निकाली, बल्कि वह electronically generated है
      यह भी स्पष्ट नहीं कि voice guitar sound से निकली है; असल में यह effect लगी हुई साधारण voice जैसी लगती है
      यह Mark Rober के talking piano के उलट है
    • सही है
      वह हिस्सा थोड़ा ambiguous लगता है, इसलिए update करूंगा
    • और लेखक को यह भी साफ करना चाहिए था कि यह Daft Punk track 1980s के single से लिया गया है: https://www.youtube.com/watch?v=5b0jWlPtP5o
  • https://youtu.be/1oD2DWf4CjQ
    Com Truise - Fairlight
    इसे भ्रम कहने के बजाय मैं इसे एक दिलचस्प effect कहना चाहूँगा
    अच्छे headphones लगाकर intro को ठीक-ठाक तेज़ volume पर सुनें, तो कोई भिनभिनाती-सी ध्वनि सिर के अंदर या यहाँ तक कि गले के अंदर से निकलती हुई जैसे resonate करती महसूस होती है

  • Brainstorm/Green-Needle auditory illusion ज़्यादा साफ़ दिखता है: https://www.youtube.com/watch?v=g88BXUhR2a4

    • जब मेरी मंगेतर ने मुझे यह दिखाया, तो जो side शुरुआत में सुनाई नहीं दे रही थी उसे सुन पाने तक मुझे इसे लगभग दस से ज़्यादा बार देखना पड़ा
      मुझे पक्का याद नहीं कि पहले कौन-सी side सुनी थी, लेकिन शायद मुझे सिर्फ़ ऊँची pitch वाला “green needle” ही सुनाई दिया था, और उसे block करके निचली ध्वनि पर focus करते हुए बोलचाल जैसी आवाज़ पहचानने के लिए काफ़ी concentration चाहिए था
      अगर मेरी याद सही है, तो यह थोड़ा ironic है कि मैं निचली ध्वनि ठीक से नहीं सुन पाया, क्योंकि मैं bass बजाता हूँ और अपनी पसंदीदा bass parts अक्सर अपनी मंगेतर को point out करने की कोशिश करता हूँ
      हालांकि मेरी मंगेतर ने कभी music training नहीं ली है, और जिन गानों में guitar और keyboard tracks बहुत होते हैं और bass drum भी strong होता है, उनमें वह कभी-कभी उतनी साफ़ तरह से नहीं पहचान पाती कि कौन-सा हिस्सा bass है, जितना मैं पहचान पाता हूँ