Subs AI - OpenAI Whisper के साथ वीडियो के लिए सबटाइटल अपने-आप बनाएं
(github.com/abdeladim-s)- पूरी तरह ऑफलाइन चलने वाला ऑटोमैटिक सबटाइटल जनरेटर
- Linux/Mac/Windows
- कई Whisper implementations का समर्थन: whisper-timestamped, whisper.cpp, faster-whisper, whisperX
- सबटाइटल एडिटिंग फीचर
dl-translateका उपयोग करके अनुवाद फीचर उपलब्ध (Facebook M2M model)- Web-UI + CLI + Python package
- CLI के जरिए batch processing, और Python package से अपनी खुद की scripts विकसित करना संभव
- SubRip(SRT), WebVTT, MicroDVD, MPL2, TMP आदि सबटाइटल formats का समर्थन
5 टिप्पणियां
इसी तरह की सुविधा वाला एक Mac ऐप भी है। यह Mac से आने वाले audio output को लेकर टेक्स्ट output देता है, और Google Translate/DeepL API जोड़कर अनुवाद भी कर सकता है.
https://apps.apple.com/us/app/id6450404233
मैंने भी WhisperMate इस्तेमाल किया है, और यह काफ़ी साफ़-सुथरा लगा। Mac पर यह अच्छा विकल्प लगता है.
उम्मीद है Windows के लिए भी यह इसी तरह साफ़-सुथरा आए।
YouTube पर उपलब्ध ऑटो-जनरेटेड captions किस तरह बनाए जाते होंगे? Whisper वाकई कमाल है। ChatGPT ऐप में जिन चीज़ों पर मुझे सबसे ज़्यादा हैरानी होती है, उनमें एक यह भी है कि ChatGPT के जवाब तो प्रभावशाली हैं ही, लेकिन उसका voice recognition input भी सचमुच ग़ज़ब का है। हर बार इस्तेमाल करने पर हैरानी होती है...
इसे और आज अपलोड हुए deepl को साथ में इस्तेमाल करें तो गज़ब हो जाएगा
मैंने इसे Windows पर Docker के साथ चलाकर देखा, और यह अच्छी तरह चलता है.
आप अलग-अलग models बदलकर recognition भी आज़मा सकते हैं, और यह subtitles भी अच्छी तरह बना देता है.
अंग्रेज़ी के लिए यह बहुत शानदार काम करता है, लेकिन Korean में थोड़ी errors हैं.
Translation performance खास नहीं है, इसलिए बेहतर होगा कि इसे सिर्फ़ English में बनाएं और कोई दूसरा translator इस्तेमाल करें.