ეს სახელმძღვანელო გაზიარება
გადახედვა
Apache Superset არის თანამედროვე, საწარმოსთვის მზა ბიზნეს ინტელექტისა და მონაცემთა შესწავლის პლატფორმა, რომელიც ყველა დონის მომხმარებლისთვის ამარტივებს მონაცემების შესწავლასა და ვიზუალიზაციას. თავდაპირველად შემუშავებული Airbnb-ის მიერ და ამჟამად Apache Software Foundation-ის უმაღლესი დონის პროექტი, Superset გვთავაზობს მდიდარ, ინტუიციურ ინტერფეისს დეშბორდების, დიაგრამებისა და მონაცემთა ანალიტიკური აპლიკაციების შესაქმნელად SQL-ის ცოდნის ან პროგრამირების უნარების გარეშე.
თავის არსში Superset აგებულია ძლიერ სემანტიკურ ფენაზე, რომელიც უკავშირდება თითქმის ნებისმიერ SQL-ზე მომუშავე მონაცემთა ბაზას ან მონაცემთა საწყობს. მხარდაჭერა მოიცავს PostgreSQL-ს, MySQL-ს, SQLite-ს, Oracle-ს, Microsoft SQL Server-ს, Amazon Redshift-ს, Google BigQuery-სა და Snowflake-ს, აგრეთვე Apache Drill-ს, Apache Druid-ს, Apache Hive-ს, Presto-ს, ClickHouse-ს და კიდევ ათობით სხვას SQLAlchemy კონექტორების მეშვეობით. ეს უნივერსალური კავშირი ორგანიზაციებს საშუალებას აძლევს, ანალიტიკა გააერთიანონ სხვადასხვა მონაცემთა წყაროებში ერთი ინტერფეისით.
პლატფორმა მოიცავს ვრცელ ვიზუალიზაციის ბიბლიოთეკას 40-ზე მეტი წინასწარ აგებული დიაგრამის ტიპით, მათ შორის დროითი მწკრივების დიაგრამებით, ბარის დიაგრამებით, წრიული დიაგრამებით, გეოგრაფიული რუკებით, heatmap-ებით, pivot ცხრილებითა და მოწინავე ვიზუალიზაციებით, როგორებიცაა Sankey დიაგრამები და sunburst დიაგრამები. თითოეული ვიზუალიზაციის ტიპი ინტუიციური UI-ით ძალიან მოქნილად კონფიგურირდება, რაც ანალიტიკოსებს საშუალებას აძლევს კოდის წერის გარეშე მოარგონ პრეზენტაციები კონკრეტულ ბიზნეს მოთხოვნებს.
Superset-ის SQL Lab გვთავაზობს მძლავრ IDE-ს მონაცემთა შესწავლისთვის, მოთხოვნების ისტორიით, შენახული მოთხოვნებით, მოთხოვნების დაგეგმვით, მრავალი ჩანართით და ჩაშენებული მონაცემთა გადახედვით. Jinja თარგმანის მხარდაჭერა მოთხოვნებში საშუალებას იძლევა დინამიური SQL-ის გენერირებისა დეშბორდის ფილტრების მიხედვით, რაც ქმნის ინტერაქტიულ ანალიტიკურ გამოცდილებას. მოთხოვნების შედეგები შეიძლება CSV-ში ექსპორტირდეს შემდგომი ანალიზისთვის ან გაზიარებისთვის.
VPS ჰოსტინგის გარემოსთვის Superset წარმოადგენს საკუთარი ჰოსტინგის ალტერნატივას კომერციული BI პლატფორმებისთვის, როგორებიცაა Tableau, Looker ან Power BI, და გთავაზობთ ექვივალენტურ ფუნქციონალს მომხმარებელზე ლიცენზიის ხარჯებისა და ვენდორზე დამოკიდებულების გარეშე. პლატფორმის არქიტექტურა ჰორიზონტალურ მასშტაბირებას უჭერს მხარს დატვირთვის ბალანსირების მეშვეობით და შეუძლია საწარმოო მასშტაბის დატვირთვების დამუშავება ათასობით ერთდროული მომხმარებლითა და მილიონობით მწკრივის მონაცემით.
უსაფრთხოებისა და მართვის ფუნქციები მოიცავს როლებზე დაფუძნებულ წვდომის კონტროლს (RBAC), მონაცემთა ნაკრების და მწკრივის დონის უსაფრთხოებას, OAuth პროვაიდერებთან (Google, GitHub, Okta) ინტეგრაციას, LDAP ავთენტიფიკაციას და ყოვლისმომცველ აუდიტის ლოგირებას. მრავალმომხმარებლიანობა იძლევა იზოლირებულ სამუშაო სივრცეებს განყოფილებებისთვის ან კლიენტებისთვის ერთ Superset ინსტალაციაში.
პლატფორმის გაფართოებადობა მძლავრი პლაგინების არქიტექტურით საშუალებას აძლევს დეველოპერებს შექმნან მორგებული ვიზუალიზაციები, მონაცემთა ბაზების კონექტორები და დეშბორდის კომპონენტები. ზრდადი საზოგადოება ამატებს პლაგინებსა და გაფართოებებს, რაც მუდმივად ავსებს Superset-ის შესაძლებლობებსა და ინტეგრაციების ეკოსისტემას.
ძირითადი ფუნქციები
უნივერსალური მონაცემთა ბაზების კავშირი
40-ზე მეტი მონაცემთა ბაზის ნატიური მხარდაჭერა SQLAlchemy-ით, მათ შორის PostgreSQL, MySQL, BigQuery, Snowflake, Redshift, Druid, ClickHouse და Presto, ერთიანი ანალიტიკისთვის.
ვიზუალიზაციის მდიდარი ბიბლიოთეკა
40-ზე მეტი წინასწარ აგებული დიაგრამის ტიპი, მათ შორის დროითი მწკრივები, გეოსივრცული რუკები, pivot ცხრილები, Sankey დიაგრამები და მოწინავე ვიზუალიზაციები ვრცელი მორგების შესაძლებლობებით.
SQL Lab IDE
მძლავრი SQL რედაქტორი მოთხოვნების ისტორიით, შენახული მოთხოვნებით, მრავალჩანართიანი ინტერფეისით, Jinja თარგმანით, მოთხოვნების დაგეგმვით და ჩაშენებული მონაცემთა გადახედვით შესწავლისთვის.
საწარმოს უსაფრთხოება და მართვა
როლებზე დაფუძნებული წვდომის კონტროლი, მწკრივის დონის უსაფრთხოება, მონაცემთა ნაკრების უფლებები, OAuth/LDAP ინტეგრაცია, ყოვლისმომცველი აუდიტის ლოგები და მრავალმომხმარებლიანობის მხარდაჭერა.
ინტერაქტიული დეშბორდები
დეშბორდის ვიზუალური ბილდერი გადმოთრევით (drag-and-drop), ჯვრული ფილტრაციით, drill-down შესაძლებლობებით, ადაპტური განლაგებებითა და მონაცემების რეალურ დროში განახლებით დინამიური ანალიტიკისთვის.
მასშტაბირებადი არქიტექტურა
ჰორიზონტალურად მასშტაბირებადი დიზაინი, რომელიც უზრუნველყოფს დატვირთვის ბალანსირებას, ქეშირების ფენებს (Redis), ასინქრონულ მოთხოვნების შესრულებას (Celery) და საწარმოო მასშტაბის ერთდროულ მომხმარებლებს.
გამოყენების შემთხვევები
- ბიზნეს ინტელექტის დეშბორდები: შექმენით ხელმძღვანელობის დეშბორდები, KPI მონიტორინგი, გაყიდვების ანალიტიკა და ოპერაციული ანგარიშგება მონაცემებზე დაფუძნებული გადაწყვეტილებებისთვის
- მონაცემების შესწავლა და ანალიზი: მისცეთ ანალიტიკოსებს საშუალება, შეისწავლონ მონაცემთა ნაკრებები, შექმნან ad-hoc მოთხოვნები და ვიზუალიზაციები ინჟინერიის მხარდაჭერის გარეშე
- მომხმარებელთა ანალიტიკის პორტალები: ააგეთ ჩაშენებული ანალიტიკა SaaS აპლიკაციებში, რომელიც მომხმარებლებს აძლევს ინფორმაციას მათი გამოყენების, წარმადობისა და ტენდენციების შესახებ
- რეალურ დროში მონიტორინგი: აკონტროლეთ აპლიკაციის მეტრიკები, სისტემის წარმადობა, IoT სენსორების მონაცემები და ბიზნეს მოვლენები ავტომატურად განახლებადი დეშბორდებით
- თვითმომსახურების BI პლატფორმა: მიეცით ბიზნეს მომხმარებლებს სხვადასხვა განყოფილებებში საშუალება, თავად შექმნან ანგარიშები და ვიზუალიზაციები კონტროლირებადი მონაცემთა ნაკრებებიდან
- მრავალმომხმარებლიანი ანალიტიკა: უზრუნველყავით იზოლირებული ანალიტიკური გარემოები სხვადასხვა კლიენტის, განყოფილების ან ბიზნეს ერთეულისთვის მწკრივის დონის უსაფრთხოებით
დაყენების სახელმძღვანელო
Apache Superset-ის დასაყენებლად Ubuntu VPS-ზე გამოიყენეთ pip Python ვირტუალურ გარემოში. შექმენით გამოყოფილი მონაცემთა ბაზა Superset-ის მეტამონაცემებისთვის (რეკომენდებულია PostgreSQL). დააყენეთ Redis ქეშირებისა და ასინქრონული მოთხოვნების მხარდასაჭერად.
შექმენით ვირტუალური გარემო python3 -m venv venv ბრძანებით, გააქტიურეთ ის და დააყენეთ superset პაკეტი pip install apache-superset ბრძანებით. მონაცემთა ბაზა ინიციალიზაცია გაუკეთეთ superset db upgrade-ით და შექმენით ადმინისტრატორი superset fab create-admin ბრძანებით.
ჩატვირთეთ სამაგალითო მონაცემები და ინიციალიზაცია გაუკეთეთ Superset-ს superset init ბრძანებით. superset_config.py დააკონფიგურირეთ SECRET_KEY-ით, მონაცემთა ბაზის კავშირის სტრიქონებით და Redis ქეშის პარამეტრებით. დიდ მონაცემთა ნაკრებებზე ასინქრონული მოთხოვნებისთვის დააყენეთ Celery worker-ები.
საწარმოო განთავსებისთვის დააკონფიგურირეთ ვებ სერვერი (Gunicorn) და საპირისპირო პროქსი (Nginx). ჩართეთ HTTPS Let's Encrypt სერტიფიკატებით. დააყენეთ systemd სერვისები Superset-ის ვებ სერვერისა და Celery worker-ებისთვის ავტომატური გაშვებისა და მონიტორინგისთვის.
მაღალი ხელმისაწვდომობის განთავსებებისთვის გაუშვით რამდენიმე Superset ვებ სერვერის ინსტანცია დატვირთვის ბალანსერის უკან, დააკონფიგურირეთ საერთო მეტამონაცემების მონაცემთა ბაზა და Redis ქეში და განათავსეთ ცალკე Celery worker-ების პული მოთხოვნების შესასრულებლად. წარმადობა აკონტროლეთ და worker-ების რაოდენობა მოთხოვნების დატვირთვის მიხედვით მოარგეთ.
კონფიგურაციის რჩევები
Superset-ის კონფიგურაცია იმართება PYTHONPATH-ში არსებული superset_config.py ფაილით. დააკონფიგურირეთ SECRET_KEY სესიის დასაშიფრად (გენერირება: openssl rand -base64 42), SQLALCHEMY_DATABASE_URI მეტამონაცემების შესანახად და CACHE_CONFIG Redis ქეშირებისთვის.
მონაცემთა ბაზის კავშირები დააყენეთ UI-ით ან superset set_database_uri ბრძანებით. დააკონფიგურირეთ მწკრივის დონის უსაფრთხოება (RLS) SQL ფილტრებით, რომლებიც მონაცემთა ნაკრებებზე გამოიყენება მომხმარებლის როლების მიხედვით. გარე გაზიარებისთვის ჩართეთ საჯარო დეშბორდები PUBLIC_ROLE_LIKE = "Gamma" პარამეტრით.
ავთენტიფიკაცია მოარგეთ AUTH_TYPE-ის (DATABASE, OAUTH, LDAP ან REMOTE_USER) და შესაბამისი AUTH_CONFIG პარამეტრების კონფიგურაციით. ინტეგრირდით OAuth პროვაიდერებთან (Google, GitHub, Okta) ან საწარმოს LDAP/Active Directory-თან SSO-სთვის.
საუკეთესო პრაქტიკები მოიცავს CSRF დაცვის ჩართვას, CORS-ის კონფიგურაციას ჩაშენებული დეშბორდებისთვის, მოთხოვნების დროის ლიმიტების დაყენებას გრძელი მოთხოვნების თავიდან ასაცილებლად, მოთხოვნის ღირებულების შეფასების ჩართვას რესურსების მართვისთვის, ელფოსტის გაფრთხილებების კონფიგურაციას დაგეგმილი ანგარიშებისთვის და მეტამონაცემთა ბაზის სარეზერვო ასლის სტრატეგიის დანერგვას. საიდუმლო მონაცემებისთვის გამოიყენეთ გარემოს ცვლადები და არა კონფიგურაციის ფაილში ჩაწერა.
ტექნიკური მოთხოვნები
სისტემური მოთხოვნებიName
- მეხსიერება: 2048RAM მეგაბაიტი