‫Apache Druid

הצפנה של תנועה ברשת

מומלץ להצפין את תעבורת הנתונים ברשת בין אפליקציית Looker לבין מסד הנתונים. כדאי לשקול אחת מהאפשרויות שמתוארות בדף הפעלת גישה מאובטחת למסד נתונים.

הגדרת אשכול Apache Druid שלך

<DRUID_BASE_DIR> מתייחס לספריית הבסיס שבה מותקן אשכול Apache Druid בשרת.

הפעלת SQL

כדי להפעיל SQL במסד הנתונים של Druid, הוסף שורה זו ל-broker/runtime.properties קובץ תצורה:

<DRUID_BASE_DIR>/conf/druid/broker/runtime.properties

druid.sql.enable=true

כיבוי קירוב של COUNT DISTINCT (אופציונלי)

כברירת מחדל, דרואיד קירוב ל-COUNT DISTINCT. לקבלת תוצאות מדויקות, הוסף שורה זו ל-broker/runtime.properties קובץ תצורה:

<DRUID_BASE_DIR>/conf/druid/broker/runtime.properties

`druid.sql.planner.useApproximateCountDistinct=false`

יצירת חיבור Looker למסד הנתונים

בקטע ניהול ב-Looker, בוחרים באפשרות חיבורים ואז לוחצים על הוספת חיבור.

ממלאים את פרטי החיבור. רוב ההגדרות משותפות לרוב הניבים של מסדי הנתונים. מידע נוסף זמין בדף חיבור Looker למסד הנתונים. בהמשך מפורטות חלק מההגדרות:

  • שם: השם של החיבור.
  • דיאלקט: Apache Druid,‏ Apache Druid 0.13+‎ (Apache Druide 0.13.x - 0.17.x) או Apache Druid 0.18+‎.

  • מארח: כתובת DNS או IP של מתווך האשכול. אתה יכול למצוא את זה אצלךbroker/runtime.properties קוֹבֶץ.

  • יציאה: היציאה של הברוקר. הפורט המוגדר כברירת מחדל הוא 8082. אם האשכול מאובטח באמצעות SSL, יציאת ברירת המחדל היא 8182.

  • מסד נתונים: השם של מסד הנתונים. ערך ברירת המחדל הוא druid.

  • שם משתמש: שם המשתמש של מסד הנתונים אם אשכול Apache Druid שלך מוגדר להשתמש ב-Druid Basic Security. אם לא, אפשר לציין מחרוזת כלשהי.

  • סיסמה: סיסמת המשתמש. אם האשכול לא מוגדר לשימוש ב-Druid Basic Security, אפשר לציין כל מחרוזת.

  • סכימה: סכימת ברירת המחדל לשימוש כשלא מצוינת סכימה. הזנת סכימה היא אופציונלית.

  • פרמטרים נוספים של JDBC: מופרדים באמצעות נקודה-פסיק פרמטרים נוספים של JDBC של Avatica. רשימת הפרמטרים ש-Looker תומך בהם מופיעה בקטע פרמטרים נתמכים של JDBC בדף הזה.

    • ניתן להגדיר מאפיינים אלה כמאפייני חיבור:
      • useApproximateCountDistinct
      • useApproximateTopN
      • useFallback
      • sqlTimeZone

    לדוגמה: none useApproximateCountDistinct=false;truststore=/path/to/truststore.jks;truststore_password=changeit

  • לוח זמנים לתחזוקה: ביטוי cron שמציין מתי Looker צריך לבדוק קבוצות נתונים וטבלאות נגזרות קבועות. מידע נוסף על ההגדרה הזו זמין במסמכי התיעוד בנושא תזמון תחזוקה.

  • SSL: בודקים אם אשכול Apache Druid מוגדר לשימוש ב-Druid TLS.

  • אמת SSL: סמן כדי לאכוף אימות קפדני של שם המארח.

  • מספר החיבורים המקסימלי לכל צומת: ברירת המחדל היא 25. אפשר להשאיר את ההגדרה הזו על ערך ברירת המחדל בהתחלה. מידע נוסף זמין בדף חיבור Looker למסד הנתונים.

  • זמן קצוב לתפוגה של מאגר חיבורים: ברירת המחדל היא 120 שניות.

  • SQL Runner Precache: כדי ש-SQL Runner לא יטען מראש את פרטי הטבלה, אלא יטען אותם רק כשבוחרים טבלה, צריך לבטל את הסימון של האפשרות הזו. מידע נוסף על ההגדרה הזו זמין במאמר SQL Runner Precache.

  • אזור הזמן של מסד הנתונים: אזור הזמן של מסד הנתונים. נתמך ב-Apache Druid 0.13+ ו-Apache Druid 0.18+.

כדי לוודא שהחיבור בוצע בהצלחה, לוחצים על הלחצן בדיקת החיבור בקטע פרטי הסטטוס בחלק התחתון של הדף הגדרות החיבורים.

‫Looker מריץ שאילתת SELECT 1 כדי לאמת חיבור בסיסי ולבצע בדיקת שאילתה. זה לא מאמת את קיומו של שילוב הקטלוג והסכימה או שלמשתמש יש את הגישה הנדרשת לסכימה זו.

אם ב-Looker מוצגת ההודעה Can Connect (אפשר להתחבר), לוחצים על Connect (התחברות) כדי ליצור את החיבור.

החיבור למסד הנתונים יתווסף לרשימה בדף Connections Admin ב-Looker.

בודקים את החיבור ב-SQL Runner. עוברים אל SQL Runner, בוחרים את החיבור והסכימה, ואז בודקים אם אפשר לראות את טבלאות מסד הנתונים.

פרמטרים נתמכים של JDBC

ב-Apache Druid, ‏ Looker תומך בפרמטרים הבאים של JDBC בשדה Additional JDBC parameters (פרמטרים נוספים של JDBC) בחיבור. מידע על הפרמטרים האלה זמין במסמכי התיעוד של מסד הנתונים.

  • authentication
  • avatica_password
  • avatica_user
  • serialization
  • sqlTimeZone
  • timeZone
  • useApproximateCountDistinct
  • useApproximateTopN
  • useFallback
  • url

תמיכה בתכונות

כדי ש-Looker יתמוך בתכונות מסוימות, הדיאלקט של מסד הנתונים צריך לתמוך בהן גם כן.

Apache Druid

‫Apache Druid תומך בתכונות הבאות החל מ-Looker 26.16:

תכונה נתמך?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סיכומי ביניים
פרמטרים נוספים של JDBC
תלוי רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים לניתוח נתונים במסד הנתונים
יומנים בהתאמה אישית

‫Apache Druid 0.13.x - 0.17.x

‫Apache Druid 0.13.x - 0.17.x תומך בתכונות הבאות החל מ-Looker 26.16:

תכונה נתמך?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סיכומי ביניים
פרמטרים נוספים של JDBC
תלוי רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים לניתוח נתונים במסד הנתונים
יומנים בהתאמה אישית

‫Apache Druid 0.18 ואילך

הגרסה Apache Druid 0.18 ואילך תומכת בתכונות הבאות החל מ-Looker 26.16:

תכונה נתמך?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סיכומי ביניים
פרמטרים נוספים של JDBC
תלוי רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים לניתוח נתונים במסד הנתונים
יומנים בהתאמה אישית

השלבים הבאים

אחרי שמסיימים את הקישור למסד הנתונים, מגדירים את אפשרויות האימות.