HyperDX - ClickHouse में logs और traces के लिए open source Kibana विकल्प

 (github.com/hyperdxio)
1 पॉइंट द्वारा GN⁺ 2024-11-15 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • HyperDX एक ऐसा टूल है जो engineers को production समस्याओं को जल्दी हल करने में मदद करता है, और Clickhouse cluster पर logs और traces को search तथा visualize करने देता है।
  • यह Kibana जैसा है, लेकिन Clickhouse के लिए optimized features प्रदान करता है।
  • मुख्य सुविधाएँ
    • logs और traces को एक ही जगह पर search और correlation analysis किया जा सकता है।
    • मौजूदा Clickhouse schema के साथ compatible है और schema पर निर्भर नहीं है।
    • तेज search और visualization सुविधाएँ प्रदान करता है।
    • intuitive full-text search और property search syntax को support करता है।
    • event delta के ज़रिए anomaly trends का analysis किया जा सकता है।
    • जटिल query language के बिना high-cardinality event dashboards प्रदान करता है।
    • JSON string query को support करता है।
    • logs और traces सुविधाएँ, जिनसे latest events को real time में देखा जा सकता है।
    • OpenTelemetry का native support।
    • HTTP requests से लेकर DB queries तक health status और performance monitoring संभव।
  • HyperDX शुरू करना
    • HyperDX v2 अभी local mode में beta version के रूप में उपलब्ध है।
    • local container चलाकर OpenTelemetry collector, Clickhouse, और HyperDX UI को चलाया जा सकता है।
    • Safari और Brave browser में CORS समस्या के कारण Clickhouse connection कठिन हो सकता है।
    • कम से कम 1GB RAM और 1 CPU core की आवश्यकता है।
  • Cloud service
    • HyperDX cloud service के रूप में भी उपलब्ध है, और free account के ज़रिए data को जल्दी भेजा जा सकता है।
  • App instrumentation
    • HyperDX में logs, metrics, traces, session replay आदि भेजने के लिए app को instrument करना होगा।
    • यह विभिन्न SDKs और integration options प्रदान करता है, जिससे आसानी से शुरुआत की जा सकती है।
    • OpenTelemetry के साथ compatible है, और कई languages तथा platforms को support करता है।
  • Open source vs cloud
    • HyperDX एक open core है और इसकी अधिकांश सुविधाएँ MIT license के तहत उपलब्ध हैं।
    • cloud-hosted version अतिरिक्त सुविधाएँ प्रदान करता है और एक sustainable business के लिए मौजूद है।

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2024-11-15
Hacker News टिप्पणियाँ

  • यह सवाल है कि logs की full-text search, Loki की तरह सभी logs को linearly search करती है या speed बढ़ाने के लिए index का इस्तेमाल कर सकती है

    • Loki index का इस्तेमाल नहीं करता, इसलिए TB आकार के logs में results ढूँढने में समय लगता है
    • index-आधारित log search की समस्या हल करने के लिए Quickwit.io को integrate करने पर विचार किया जा रहा है

  • यह सवाल है कि क्या HyperDX, दूसरे backend support जोड़कर "Grafana for logs" समाधान बनने की योजना रखता है

    • VictoriaLogs support जोड़ने से HyperDX में efficient UX बनाने में मदद मिलेगी

  • HyperDX में browser और Linux VM logging सफलतापूर्वक सेट की गई, लेकिन Azure Functions के साथ OTel logging में कठिनाई हो रही है

    • नया "Flex Consumption" feature OTel को native रूप से support करता है, इसलिए यह HyperDX के साथ काम करता है

  • HyperDX का उपयोग करने वाला एक ग्राहक संतुष्टि जताता है; यह Datadog से सस्ता है और setup करना आसान है

    • UI intuitive है और built-in dashboards शानदार हैं

  • DataDog को replace करने के लिए open source alternative की तलाश है और HyperDX पर migrate करने का तरीका खोजा जा रहा है

    • Cloudflare Workers में OTel का उपयोग करके observability बेहतर करना चाहते हैं, और documentation update की ज़रूरत है

  • एक राय है कि यह Kibana के विकल्प के रूप में अपेक्षा से अलग है

    • Kibana non-technical users के लिए उपयुक्त है, और आशा है कि HyperDX अपने स्पष्ट target audience को खोज लेगा

  • HyperDX बहुत शानदार है, single-page UI के रूप में काम करता है और slow नहीं है

    • system.text_log table से connect करके बिना किसी समस्या के तेज़ी से setup हो गया

  • एक राय है कि project में 'Kibana के साथ तुलना' section होना चाहिए

    • यह समझाना चाहिए कि Kibana इस्तेमाल कर रहे users को HyperDX पर क्यों switch करना चाहिए

  • HyperDX का उपयोग करके observability बेहतर हुई है, और इसकी search functionality Google के observability products की तुलना में कहीं बेहतर है

  • यह सवाल है कि क्या v2 branding का मतलब अधिक "full-featured" observability product का गायब होना है, या इसे ClickHouse के ऊपर फिर से बनाया जा रहा है