ማጠቃለያ
Apache Superset ዘመናዊ፣ ለድርጅት ዝግጁ የቢዝነስ ኢንተሊጀንስና የመረጃ ፍለጋ መድረክ ሲሆን ለሁሉም የክህሎት ደረጃ ላሉ ተጠቃሚዎች ዳታቸውን ቀላል ያደርግላቸዋል። መጀመሪያ በ Airbnb የተሰራና አሁን የ Apache Software Foundation ከፍተኛ-ደረጃ ፕሮጀክት የሆነው Superset ሰፊ SQL ዕውቀትም ሆነ የፕሮግራም ችሎታ ሳይጠይቅ ዳሽቦርዶችን፣ ገበታዎችንና የመረጃ ትንተና መተግበሪያዎችን ለመገንባት የበለጸገና ቀላል በይነገጽ ይሰጣል።
በመሠረቱ Superset ከማንኛውም SQL-የሚናገር የመረጃ ቋት ወይም የመረጃ መጋዘን ጋር የሚገናኝ ኃይለኛ semantic layer ላይ የተገነባ ነው። ድጋፉ PostgreSQL፣ MySQL፣ SQLite፣ Oracle፣ Microsoft SQL Server፣ Amazon Redshift፣ Google BigQuery፣ Snowflake፣ Apache Drill፣ Apache Druid፣ Apache Hive፣ Presto፣ ClickHouse እና በ SQLAlchemy connectors በኩል ሌሎችም ብዙ ያካትታል። ይህ ሁለገብ ግንኙነት ድርጅቶች በአንድ በይነገጽ በተለያዩ የመረጃ ምንጮች ላይ ትንታኔን እንዲያዋህዱ ያስችላቸዋል።
መድረኩ ከ40 በላይ ቅድመ-የተሰሩ የገበታ ዓይነቶችን ያካተተ ሰፊ የምስል ቤተ-መጽሐፍት አለው፤ ይህም የጊዜ-ተከታታይ ገበታዎች፣ የባር ገበታዎች፣ ፓይ ገበታዎች፣ የጂኦግራፊ ካርታዎች፣ heatmaps፣ pivot tables፣ እንዲሁም እንደ Sankey diagrams እና sunburst ገበታዎች ያሉ የላቁ ምስሎችን ይጨምራል። እያንዳንዱ የምስል ዓይነት በሚታወቅ UI አማካይነት ከፍተኛ ማበጀት ያለው ሲሆን ተንታኞች ያለ ኮድ መጻፍ ለተወሰኑ የንግድ መስፈርቶች አቀራረቦችን እንዲያበጁ ያስችላቸዋል።
የ Superset SQL Lab ለመረጃ ፍለጋ ኃይለኛ IDE ያቀርባል፤ ከባህሪያቱም የጥያቄ ታሪክ፣ የተቀመጡ ጥያቄዎች፣ የጥያቄ መርሐ-ግብር፣ ባለብዙ ትሮችና የተዋሃዱ የመረጃ ቅድመ-እይታዎች ይገኙበታል። በጥያቄዎች ውስጥ ለ Jinja templating ድጋፍ በዳሽቦርድ ማጣሪያዎች ላይ ተመስርቶ ተለዋዋጭ SQL እንዲፈጠር ያስችላል፤ ይህም በይነተገናኝ የትንተና ልምዶችን ይፈጥራል። የጥያቄ ውጤቶች ለተጨማሪ ትንተናም ሆነ ለማጋራት ወደ CSV ሊላኩ ይችላሉ።
ለ VPS ማስተናገጃ አካባቢዎች Superset እንደ Tableau፣ Looker ወይም Power BI ላሉ የንግድ BI መድረኮች በራስ-ማስተናገድ አማራጭ ሆኖ ያገለግላል፤ ለተጠቃሚ ፍቃድ ክፍያና ለአቅራቢ ጥገኝነት ሳይኖር ተመሳሳይ ተግባር ይሰጣል። የመድረኩ አርክቴክቸር በሎድ ባላንሰሮች አማካይነት አግድም መስፋትን ይደግፋል፤ በሺዎች በአንድ ጊዜ ተጠቃሚዎችና በሚሊዮኖች የረድፍ ዳታ ያለውን የድርጅት ደረጃ የስራ ጭነት ማስተናገድ ይችላል።
የደህንነትና የአስተዳደር ባህሪያት በሚና-ተኮር የመዳረሻ ቁጥጥር (RBAC)፣ በዳታሴት ደረጃና በረድፍ ደረጃ ደህንነት፣ ከ OAuth አቅራቢዎች (Google፣ GitHub፣ Okta) ጋር ውህደት፣ LDAP ማረጋገጥ እና ሰፊ የኦዲት ምዝግብ ማስታወሻን ያካትታሉ። ባለብዙ-ተከራይ ድጋፍ በአንድ Superset ጭነት ውስጥ ለተለያዩ ክፍሎች ወይም ደንበኞች የተለዩ የስራ ቦታዎችን ያስችላል።
የመድረኩ ማራዘሚያነት በጠንካራ የፕለጊን አርክቴክቸር ገንቢዎች ብጁ ምስሎችን፣ የመረጃ ቋት ማገናኛዎችንና የዳሽቦርድ አካላትን እንዲፈጥሩ ያስችላቸዋል። እያደገ ያለ ማህበረሰብ ፕለጊኖችንና ቅጥያዎችን ያበረክታል፤ ይህም የ Superset ችሎታዎችንና የውህደት ስነ-ምህዳርን ያለማቋረጥ ያሰፋል።
የቁልፍ ባህሪያት
ሁለንተናዊ የመረጃ ቋት ግንኙነት
በ SQLAlchemy በኩል ከ40 በላይ የመረጃ ቋቶችን በተፈጥሮ ይደግፋል፤ PostgreSQL፣ MySQL፣ BigQuery፣ Snowflake፣ Redshift፣ Druid፣ ClickHouse እና Presto ን ጨምሮ ለተዋሃደ ትንተና።
ሰፊ የምስል ቤተ-መጽሐፍት
ከ40 በላይ ቅድመ-የተሰሩ የገበታ ዓይነቶች የጊዜ-ተከታታይ፣ የጂኦስፔሻል ካርታዎች፣ pivot tables፣ Sankey diagrams እና የላቁ ምስሎችን ከሰፊ ማበጀት ጋር ያካትታሉ።
የ SQL Lab IDE
ከጥያቄ ታሪክ፣ ከተቀመጡ ጥያቄዎች፣ ከባለብዙ-ትር በይነገጽ፣ ከ Jinja templating፣ ከጥያቄ መርሐ-ግብር እና ለፍለጋ ከተዋሃዱ የመረጃ ቅድመ-እይታዎች ጋር ኃይለኛ SQL አርታኢ።
የድርጅት ደህንነትና አስተዳደር
በሚና-ተኮር የመዳረሻ ቁጥጥር፣ በረድፍ ደረጃ ደህንነት፣ በዳታሴት ፈቃዶች፣ OAuth/LDAP ውህደት፣ ሰፊ የኦዲት ምዝግብ ማስታወሻዎችና ባለብዙ-ተከራይ ድጋፍ።
ጠያቂ ዳሽቦርዶች
በድርጊት-ጎትት-መጣል የዳሽቦርድ ገንቢ ከመስቀል-ማጣሪያ፣ ከዝርዝር ትንተና (drill-down) ችሎታዎች፣ ምላሽ ሰጪ አቀማመጦችና ለተለዋዋጭ ትንተና የቅጽበታዊ ዳታ ማደስ ጋር።
የሚሰፋ አርክቴክቸር
አግድም ሊሰፋ የሚችል ዲዛይን የሎድ ባላንስን፣ የመሸጎጫ ንብርቦችን (Redis)፣ ያልተመሳሰለ የጥያቄ ማስፈጸሚያን (Celery) እና የድርጅት ደረጃ ተጓዳኝ ተጠቃሚዎችን ይደግፋል።
ሁኔታዎች ይጠቀሙ
- የቢዝነስ ኢንተሊጀንስ ዳሽቦርዶች: ለመረጃ-ተኮር ውሳኔ አሰጣጥ ስራ አስፈጻሚ ዳሽቦርዶችን፣ የKPI ክትትልን፣ የሽያጭ ትንተናንና የኦፐሬሽን ሪፖርትን ይፍጠሩ
- የመረጃ ፍለጋና ትንተና: ተንታኞች ዳታሴቶችን እንዲቃኙ፣ ad-hoc ጥያቄዎችን እንዲገነቡና ያለ የምህንድስና ድጋፍ ምስሎችን እንዲፈጥሩ ያስችሏቸው
- የደንበኛ ትንተና ፖርታሎች: ለደንበኞች ስለ አጠቃቀማቸው፣ አፈጻጸማቸውና አዝማሚያዎቻቸው ግንዛቤ የሚሰጥ የተካተተ ትንተና በ SaaS መተግበሪያዎች ውስጥ ይገንቡ
- ቅጽበታዊ ክትትል: በራስ-የሚታደሱ ዳሽቦርዶች የመተግበሪያ መለኪያዎችን፣ የስርዓት አፈጻጸምን፣ የ IoT ሴንሰር መረጃንና የቢዝነስ ክስተቶችን ይከታተሉ
- ራስ-አገልግሎት BI መድረክ: ከተቆጣጠሩ ዳታሴቶች የራሳቸውን ሪፖርቶችና ምስሎች እንዲፈጥሩ በመምሪያዎች ያሉ የንግድ ተጠቃሚዎችን ያበረታቱ
- ባለብዙ-ተከራይ ትንተና: በረድፍ ደረጃ ደህንነት ለተለያዩ ደንበኞች፣ ክፍሎች ወይም የንግድ ክፍሎች የተለዩ የትንተና አካባቢዎችን ያቅርቡ
የመጫን መመሪያ
Apache Superset ን በ Ubuntu VPS ላይ በ Python ምናባዊ አካባቢ pip በመጠቀም ይጫኑ። ለ Superset ሜታዳታ ማከማቻ የተለየ የመረጃ ቋት ይፍጠሩ (PostgreSQL ይመከራል)። ለመሸጎጫና ለ async ጥያቄ ድጋፍ Redis ይጫኑ።
በ python3 -m venv venv ምናባዊ አካባቢ ይፍጠሩ፣ ያንቁትና superset ጥቅሉን በ pip install apache-superset ይጫኑ። የመረጃ ቋቱን በ superset db upgrade ያስጀምሩ እና የአስተዳዳሪ ተጠቃሚ በ superset fab create-admin ይፍጠሩ።
ምሳሌ ዳታ ጫኑና Superset ን በ superset init ትዕዛዝ ያስጀምሩ። superset_config.py ን ከ SECRET_KEY፣ ከመረጃ ቋት ግንኙነት ሕብረቁምፊዎችና ከ Redis መሸጎጫ ቅንብሮች ጋር ያዋቅሩ። በትላልቅ ዳታሴቶች ላይ ያልተመሳሰለ ጥያቄ ማስፈጸሚያ Celery workers ያዋቅሩ።
ለፕሮዳክሽን ማሰማራት የድር ሰርቨር (Gunicorn) እና reverse proxy (Nginx) ያዋቅሩ። በ Let's Encrypt ሰርቲፊኬቶች HTTPS ያንቁ። ለ Superset ድር ሰርቨርና ለ Celery workers በራስ-ሰር ለመጀመርና ለመከታተል systemd አገልግሎቶችን ያዋቅሩ።
ለከፍተኛ ተገኝነት ማሰማራቶች ከሎድ ባላንሰር ጀርባ ብዙ የ Superset ድር ሰርቨር ምሳሌዎችን ያሂዱ፣ የተጋራ የሜታዳታ መረጃ ቋትና Redis መሸጎጫ ያዋቅሩ፣ እና ለጥያቄ ማስፈጸሚያ የተለየ Celery worker ገንዳ ያሰማሩ። አፈጻጸምን ይከታተሉ እና workers ን በጥያቄ ጭነት መሠረት ያሰፉ።
የቀን መቁጠሪያ አዶዎች
የ Superset ውቅር በ PYTHONPATH ውስጥ ባለ superset_config.py ፋይል ይተዳደራል። ለክፍለ-ጊዜ ምስጠራ SECRET_KEY (በ openssl rand -base64 42 ይፍጠሩ)፣ ለሜታዳታ ማከማቻ SQLALCHEMY_DATABASE_URI እና ለ Redis መሸጎጫ CACHE_CONFIG ያዋቅሩ።
የመረጃ ቋት ግንኙነቶችን በ UI ወይም በ superset set_database_uri ትዕዛዝ ያዋቅሩ። የረድፍ ደረጃ ደህንነትን (RLS) በተጠቃሚ ሚናዎች ላይ ተመስርተው ለዳታሴቶች በሚተገበሩ SQL ማጣሪያዎች ያዋቅሩ። ለውጫዊ ማጋራት PUBLIC_ROLE_LIKE = "Gamma" በመጠቀም ይፋዊ ዳሽቦርዶችን ያንቁ።
AUTH_TYPE (DATABASE፣ OAUTH፣ LDAP ወይም REMOTE_USER) እና ተጓዳኝ AUTH_CONFIG ቅንብሮችን በማዋቀር ማረጋገጥን ያብጁ። ለ SSO ከ OAuth አቅራቢዎች (Google፣ GitHub፣ Okta) ወይም ከድርጅት LDAP/Active Directory ጋር ያዋህዱ።
ምርጥ ልምዶች የ CSRF ጥበቃን ማንቃት፣ ለተካተቱ ዳሽቦርዶች CORS ማዋቀር፣ ረጅም ጊዜ የሚወስዱ ጥያቄዎችን ለመከላከል የጥያቄ ጊዜ ማብቂያዎችን ማዘጋጀት፣ ለሃብት አስተዳደር የጥያቄ ወጪ ግምትን ማንቃት፣ ለመርሐ-ግብር የተያዙ ሪፖርቶች የኢሜይል ማንቂያዎችን ማዋቀር፣ እና ለሜታዳታ መረጃ ቋቱ የምትኬ ስትራቴጂ መተግበርን ያካትታሉ። ስሱ ምስክርነቶችን በውቅረት ፋይል ውስጥ ከመፃፍ ይልቅ የአካባቢ ተለዋዋጮችን ይጠቀሙ።