Open-Interface: LLM से कंप्यूटर को नियंत्रित करना

• OpenAI API key का उपयोग करके कंप्यूटर को नियंत्रित किया जा सकता है.
  • चाहें तो किसी दूसरे LLM का भी उपयोग किया जा सकता है. LiteLLM की मदद भी ली जा सकती है.
• LLM के साथ संचार कर सकता है और उसके निर्देशों (माउस/कीबोर्ड इनपुट) की नकल कर सकता है.
• उदाहरण:
  • "आज की शब्द-पहेली हल कर दो."
  • "Google Docs खोलकर मेरे लिए दोपहर के खाने का मेनू बना दो."
  • "मेरे लिए एक web application कोड कर दो."
• ऐसे निर्देश जो गड़बड़ी पैदा कर सकते हैं:
  • spatial reasoning
    • spreadsheet में हेरफेर
  • जटिल GUI application जहाँ mouse cursor अनिवार्य हो
• आगे की योजना:
  • "Garage Band में bass guitar का एक sample बना दो."
  • "Sportify में मेरे दोस्तों की music taste पता करके आज रात की पार्टी के लिए playlist बना दो."
• LLM के अनुसार लगभग $0.0005 - $0.002 की लागत आने का अनुमान है.
• 'Stop' बटन दबाकर या cursor को स्क्रीन के कोने में ले जाकर इसे रोका जा सकता है.
• अगर multi-monitor सेटअप है, तो यह केवल मुख्य स्क्रीन के भीतर ही काम कर सकता है.