‫Apache Druid

הצפנה של תנועה ברשת

מומלץ להצפין את תעבורת הנתונים ברשת בין אפליקציית Looker לבין מסד הנתונים. כדאי לשקול אחת מהאפשרויות שמתוארות בדף הפעלת גישה מאובטחת למסד נתונים.

הגדרת אשכול Apache Druid

‫<DRUID_BASE_DIR> מתייחס לספריית הבסיס שבה מותקן אשכול Apache Druid בשרת.

הפעלת SQL

כדי להפעיל SQL במסד הנתונים של Druid, מוסיפים את השורה הזו לקובץ התצורה broker/runtime.properties:

<DRUID_BASE_DIR>/conf/druid/broker/runtime.properties

druid.sql.enable=true

השבתת ההערכה המשוערת של COUNT DISTINCT (אופציונלי)

כברירת מחדל, Druid מבצע קירוב של COUNT DISTINCT. כדי לקבל תוצאות מדויקות, מוסיפים את השורה הזו לקובץ ההגדרות broker/runtime.properties:

<DRUID_BASE_DIR>/conf/druid/broker/runtime.properties

`druid.sql.planner.useApproximateCountDistinct=false`

יצירת חיבור Looker למסד הנתונים

בקטע Admin (ניהול) ב-Looker, בוחרים באפשרות Connections (חיבורים) ואז לוחצים על Add Connection (הוספת חיבור).

ממלאים את פרטי החיבור. רוב ההגדרות משותפות לרוב הניבים של מסדי הנתונים. מידע נוסף זמין בדף חיבור Looker למסד הנתונים. בהמשך מפורטות חלק מההגדרות:

  • שם: השם של החיבור.

  • דיאלקט: Apache Druid,‏ Apache Druid 0.13+‎ (Apache Druide 0.13.x - 0.17.x) או Apache Druid 0.18+‎.

  • מארח: DNS או כתובת IP של אשכול Broker. אפשר למצוא את המידע הזה בקובץ broker/runtime.properties.

  • יציאה: היציאה של הברוקר. יציאת ברירת המחדל היא 8082. אם האשכול מאובטח באמצעות SSL, יציאת ברירת המחדל היא 8182.

  • מסד נתונים: השם של מסד הנתונים. ערך ברירת המחדל הוא druid.

  • שם משתמש: שם המשתמש במסד הנתונים אם אשכול Apache Druid מוגדר לשימוש ב-Druid Basic Security. אם לא, אפשר לציין מחרוזת כלשהי.

  • סיסמה: סיסמת המשתמש. אם האשכול לא מוגדר לשימוש ב-Druid Basic Security, אפשר לציין כל מחרוזת.

  • סכימה: סכימת ברירת המחדל לשימוש כשלא מצוינת סכימה. הזנת סכימה היא אופציונלית.

  • פרמטרים נוספים של JDBC: פרמטרים של Avatica JDBC מופרדים באמצעות נקודה ופסיק. רשימת הפרמטרים ש-Looker תומך בהם מופיעה בקטע פרמטרים נתמכים של JDBC בדף הזה.

    • אפשר להגדיר את המאפיינים האלה כמאפייני חיבור:
      • useApproximateCountDistinct
      • useApproximateTopN
      • useFallback
      • sqlTimeZone

    לדוגמה: none useApproximateCountDistinct=false;truststore=/path/to/truststore.jks;truststore_password=changeit

  • לוח זמנים לתחזוקה: ביטוי cron שמציין מתי Looker צריך לבדוק קבוצות נתונים וטבלאות נגזרות קבועות. מידע נוסף על ההגדרה הזו זמין במסמכי התיעוד בנושא תזמון תחזוקה.

  • ‫SSL: בודקים אם אשכול Apache Druid מוגדר לשימוש ב-Druid TLS.

  • אימות SSL: מסמנים את התיבה כדי לאכוף אימות קפדני של שם המארח.

  • מספר החיבורים המקסימלי לכל צומת: ברירת המחדל היא 25. אפשר להשאיר את ההגדרה הזו על ערך ברירת המחדל בהתחלה. מידע נוסף זמין בדף חיבור Looker למסד הנתונים.

  • הזמן הקצוב לתפוגה של מאגר החיבורים: ברירת המחדל היא 120 שניות.

  • SQL Runner Precache: כדי ש-SQL Runner לא יטען מראש את פרטי הטבלה, אלא יטען אותם רק כשבוחרים טבלה, צריך לבטל את הסימון של האפשרות הזו. מידע נוסף על ההגדרה הזו זמין במאמר SQL Runner Precache.

  • אזור הזמן של מסד הנתונים: אזור הזמן של מסד הנתונים. התמיכה קיימת ב-Apache Druid גרסה 0.13 ואילך וב-Apache Druid גרסה 0.18 ואילך.

כדי לוודא שהחיבור בוצע בהצלחה, לוחצים על בדיקה. מידע לפתרון בעיות זמין בדף בנושא בדיקת הקישוריות למסד הנתונים.

‫Looker מריץ שאילתת SELECT 1 כדי לאמת חיבור בסיסי ולבצע בדיקת שאילתה. הכלי לא בודק אם השילוב של הקטלוג והסכימה קיים או אם למשתמש יש את הגישה הנדרשת לסכימה הזו.

אם נתקלתם בבעיות, כדאי לעיין בתיעוד בנושא בדיקת חיבורים.

כדי לשמור את ההגדרות האלה, לוחצים על Connect (חיבור).

בודקים את החיבור ב-SQL Runner. עוברים אל SQL Runner, בוחרים את החיבור והסכימה, ואז בודקים אם אפשר לראות את טבלאות מסד הנתונים.

פרמטרים נתמכים של JDBC

ב-Apache Druid, ‏ Looker תומך בפרמטרים הבאים של JDBC בשדה Additional JDBC parameters (פרמטרים נוספים של JDBC) לחיבור. מידע על הפרמטרים האלה זמין במסמכי התיעוד של מסד הנתונים.

  • authentication
  • avatica_password
  • avatica_user
  • serialization
  • sqlTimeZone
  • timeZone
  • useApproximateCountDistinct
  • useApproximateTopN
  • useFallback
  • url

תמיכה בתכונות

כדי ש-Looker יתמוך בתכונות מסוימות, הדיאלקט של מסד הנתונים שלכם צריך לתמוך בהן גם כן.

‫Apache Druid

התכונות הבאות נתמכות ב-Apache Druid החל מ-Looker 26.10:

תכונה האם יש תמיכה?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סכומי ביניים
פרמטרים נוספים של JDBC
תלוי אותיות רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים אנליטיים בתוך מסד הנתונים
יומנים בהתאמה אישית

‫Apache Druid 0.13.x - 0.17.x

‫Apache Druid 0.13.x - 0.17.x תומך בתכונות הבאות החל מ-Looker 26.10:

תכונה האם יש תמיכה?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סכומי ביניים
פרמטרים נוספים של JDBC
תלוי אותיות רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים אנליטיים בתוך מסד הנתונים
יומנים בהתאמה אישית

‫Apache Druid 0.18 ואילך

‫Apache Druid 0.18 ואילך תומך בתכונות הבאות החל מ-Looker 26.10:

תכונה האם יש תמיכה?
Looker (Google Cloud core)‎
צבירה סימטרית
טבלאות נגזרות
טבלאות נגזרות מתמידות שמבוססות על SQL
טבלאות נגזרות מתמידות מבוססות LookML
תצוגות יציבות
ביטול שאילתה
טבלאות ציר שמבוססות על SQL
אזורי זמן
SSL
סכומי ביניים
פרמטרים נוספים של JDBC
תלוי אותיות רישיות
סוג מיקום
סוג הרשימה
מאון
אחוזון נפרד
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
מספר הפעמים שהופעל SQL Runner
SQL Explain
פרטי כניסה של OAuth 2.0
תגובות להוספת הקשר
איגום חיבורים
רישומים מסוג HLL
מודעות מצטברת
המרות מצטברות של PDT
אלפיות שנייה
מיקרו-שניות
תצוגות מהותיות
מדדים של השוואה בין תקופות שונות
ספירה משוערת של ערכים ייחודיים
מודלים אנליטיים בתוך מסד הנתונים
יומנים בהתאמה אישית

השלבים הבאים

אחרי שמסיימים את הקישור למסד הנתונים, מגדירים את אפשרויות האימות.