Speakz - 7 साल की बच्ची के साथ विदेशी भाषा के वीडियो देखने के लिए बनाया गया AI डबिंग टूल

 (speakz.ai)
9 पॉइंट द्वारा GN⁺ 2024-02-29 | 1 टिप्पणियां | WhatsApp पर शेयर करें

Speakz: बहुभाषी मीडिया अनुवाद सेवा

  • एक भाषा में बने वीडियो का दूसरी भाषा में अनुवाद करके नया ऑडियो ट्रैक बनाता है
  • मूल आवाज़, अन्य ध्वनियाँ या बैकग्राउंड म्यूज़िक को सुरक्षित रखते हुए अर्थ, व्यक्तित्व और टाइमिंग को संतुलित कर स्वाभाविक और प्रामाणिक अनुवाद प्रदान करता है
  • डेवलपर, जो स्वयं जर्मन हैं, ने यह टूल अपने और अपनी 7 साल की बेटी के लिए बनाया ताकि वे YouTube कंटेंट को जर्मन में आनंद ले सकें

समर्थित भाषाएँ और अनुवाद की गति

  • आउटपुट भाषाएँ: English, Chinese, Spanish, Arabic, French, Russian, German, Italian, Korean, Polish, Dutch को सपोर्ट करता है
  • इनपुट भाषाएँ: इसके अलावा Hindi, Bengali, Portuguese समेत कई भाषाओं को सपोर्ट करता है
  • 30 मिनट के वीडियो का अनुवाद करने में लगभग 1 घंटा लगता है, और रियल-टाइम अनुवाद व स्ट्रीमिंग की दिशा में आगे बढ़ने की संभावना है

क्रिएटर्स और सामान्य उपयोगकर्ताओं के लिए उपयोग

  • क्रिएटर्स Speakz का उपयोग करके अपने मौजूदा कंटेंट से अधिक ऑडियंस तक पहुँच सकते हैं
  • YouTube वीडियो में कई ऑडियो ट्रैक जोड़ने का समर्थन करता है, इसलिए Speakz के जरिए अलग-अलग भाषाओं के ऑडियो ट्रैक अपने आप जोड़े जा सकते हैं
  • सामान्य उपयोगकर्ता भी private beta में शामिल होकर अपनी पसंद के वीडियो का अनुवाद कर सकते हैं

कीमत और private beta में भागीदारी

  • कीमत अभी तय नहीं हुई है, लेकिन अनुमान है कि यह प्रति भाषा प्रति घंटा लगभग $5 हो सकती है
  • एक ही वीडियो को कई भाषाओं में अनुवाद करने पर या क्रिएटर्स के लिए bulk discount हो सकता है
  • private beta में शामिल होने के इच्छुक उपयोगकर्ता वेबसाइट के माध्यम से आवेदन कर सकते हैं

GN⁺ की राय

  • Speakz उन उपयोगकर्ताओं के लिए उपयोगी टूल है जो बहुभाषी कंटेंट देखना चाहते हैं, और उन क्रिएटर्स के लिए भी जो वैश्विक बाज़ार को लक्षित करते हैं
  • रियल-टाइम अनुवाद फीचर में live streaming या real-time events में भाषा की बाधा को कम करने की क्षमता है
  • इसी तरह की सुविधा देने वाली अन्य सेवाओं में Google का automatic subtitles फीचर या Amara जैसे community-based translation platforms शामिल हैं
  • Speakz अपनाते समय अनुवाद की सटीकता और सांस्कृतिक बारीकियों को ध्यान में रखना चाहिए
  • इस तकनीक को चुनने का प्रमुख लाभ भाषा बाधा के बिना कंटेंट तक पहुँच है, लेकिन लागत और अनुवाद गुणवत्ता पर विचार करना ज़रूरी है

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2024-02-29
Hacker News राय
  • जर्मनी में ज़्यादातर वीडियो डब किए जाते हैं, लेकिन एक राय यह है कि 7 साल का बच्चा भी सबटाइटल पढ़ सकता है, और यह अंग्रेज़ी सीखने का अच्छा तरीका हो सकता है। कहा गया कि स्वीडन में स्कूल शुरू होने से पहले ज़्यादातर बच्चे इसी तरीके से अंग्रेज़ी सीखते हैं। साथ ही यह दावा भी किया गया कि जिन देशों में डबिंग आम है, वहाँ औसत अंग्रेज़ी दक्षता कम होने की मज़बूत सहसंबंध प्रवृत्ति दिखती है.
    • वेबसाइट का सैंपल प्रभावशाली है, और इस पर सवाल उठाया गया कि speaker separation और voice cloning कैसे किया जाता है। अनुमान लगाया गया कि इसमें speech recognition और time cues का उपयोग करके सामग्री को वाक्य इकाइयों में बाँटना, translation engine से कई अनुवाद विकल्प बनाना, भाषा की परवाह किए बिना मूल आवाज़ को clone करना, और समय के हिसाब से सबसे उपयुक्त अनुवाद चुनना शामिल हो सकता है.
  • simple English को output language option के रूप में जोड़ने का अनुरोध किया गया। इससे भाषा की जटिलता बच्चों के स्तर के अनुसार रखी जा सकेगी और धीरे-धीरे सहायता कम की जा सकेगी.
  • एक रूसी-भाषी उपयोगकर्ता ने Lex सैंपल की डबिंग की तारीफ़ करते हुए कहा कि यह वास्तविक आवाज़ से बहुत मिलती-जुलती है। यह पेशेवर डबिंग स्तर की नहीं है, लेकिन बहुत अच्छी है, और Lex तथा Elon की आवाज़ों के भी काफ़ी क़रीब लगती है.
  • automatic subtitle generation solution विकसित कर चुके एक उपयोगकर्ता ने automatic dubbing प्रोजेक्ट की प्रशंसा की। उन्होंने समझाया कि दर्शकों के लिए सहज परिणाम पाने के लिए automatic dubbing में manual adjustment की ज़रूरत होती है, और उनका फोकस ऐसा advanced editor देने पर है जिससे editing software में वापस जाए बिना भी dubbing को fine-tune किया जा सके.
  • प्रोजेक्ट के लिए प्रशंसा के साथ यह राय भी आई कि लोग हर वीडियो के लिए अलग से भुगतान करने को तैयार हो सकते हैं। पेज feedback में यह समस्या बताई गई कि वीडियो लगातार चलता रहता है, जिससे एक ही हिस्से की अलग-अलग भाषाओं में तुलना करना मुश्किल होता है। साथ ही translation errors और timing issues का भी ज़िक्र किया गया, और यह भी कि कभी-कभी मूल audio के कुछ हिस्से अनूदित ही नहीं होते.
  • यह राय दी गई कि डच dubbing अब तक केवल बच्चों के TV में ही अनुभव की गई है, लेकिन Dutch model में सुधार की ज़रूरत है। खास तौर पर ताइवान डॉक्यूमेंट्री की dubbing को समझना मुश्किल बताया गया। यह भी पूछा गया कि Dutch को शामिल क्यों किया गया, क्योंकि ज़्यादातर Dutch speakers अंग्रेज़ी समझ लेते हैं.
  • ग्रीस जैसे कई देशों में, जहाँ फ़िल्में और TV कार्यक्रम डब नहीं किए जाते, दृष्टिबाधा या उम्र के कारण कमज़ोर नज़र वाले लोग अगर अंग्रेज़ी अच्छी तरह नहीं जानते, तो वे सिर्फ़ स्थानीय रूप से बनी फ़िल्में और कार्यक्रम ही देख पाते हैं। इसे ऐसी समस्या का समाधान करने वाला प्रोजेक्ट बताया गया.
  • audio timing के तरीके को चतुर बताया गया और यह पूछा गया कि इसमें कौन-से model इस्तेमाल हो रहे हैं.
  • एक राय यह भी थी कि जर्मन content देखते समय कभी-कभी यह शक हुआ कि अंग्रेज़ी सबटाइटल AI ने बनाए हैं या नहीं। कहा गया कि कई बार सबटाइटल जर्मन से भी ज़्यादा उलझाऊ लगते हैं, और वे ऐसे दिखाई देते हैं मानो किसी वास्तविक अनुवादक की बजाय, जो context clues आदि का उपयोग करता, उन्हें स्वचालित रूप से तैयार किया गया हो.