यह खबर है कि Hugging Face ने llama.cpp और GGML इंजन के मुख्य डेवलपर Georgi Gerganov को अपने साथ शामिल कर लिया है.

मुख्य बातें: llama.cpp (लोकल LLM चलाने के लिए वास्तविक मानक इंजन) और GGML-आधारित तकनीक अब Hugging Face के तहत आ गई हैं, जिससे ओपन सोर्स लोकल AI ecosystem के दो प्रमुख स्तंभ एक हो गए हैं.
llama.cpp अब भी 100% ओपन सोर्स रहेगा और performance-केंद्रित रूप में बनाए रखा जाएगा.

संभावित बड़े बदलाव:

  • transformers लाइब्रेरी में GGUF फ़ॉर्मैट मॉडल के लिए लगभग one-click स्तर का automatic conversion और support
  • नए मॉडल आने पर manual optimization के बिना ही तुरंत लोकल high-performance execution संभव
  • लोकल AI tools और user environment में बड़े पैमाने पर सुधार की दिशा

महत्व: केंद्रीय सर्वर पर निर्भर हुए बिना व्यक्ति और कंपनियां उच्च-गुणवत्ता वाले LLM को लोकल स्तर पर स्वतंत्र रूप से चला सकेंगी, और इसके लिए बुनियादी ढांचा और मजबूत होगा.

अभी कोई टिप्पणी नहीं है.

अभी कोई टिप्पणी नहीं है.