Apache Spark

Questa pagina contiene informazioni sulla connessione di Looker ad Apache Spark 3.

Looker si connette ad Apache Spark 3+ tramite una connessione JDBC al server Spark Thrift.

Crittografia del traffico di rete

È una best practice criptare il traffico di rete tra l'applicazione Looker e il tuo database. Valuta una delle opzioni descritte nella pagina della documentazione Abilita l'accesso sicuro ai database.

Creazione della connessione di Looker al tuo database

Nella sezione Admin (Amministratore) di Looker, seleziona Connections (Connessioni) e poi fai clic su Add Connection (Aggiungi connessione).

Compila i dettagli della connessione. La maggior parte delle impostazioni è comune alla maggioranza dei dialetti di database. Per informazioni, consulta la pagina della documentazione Connessione di Looker al tuo database. Alcune delle impostazioni sono descritte di seguito:

  • Nome: il nome della connessione. Questo è il modo in cui verrà fatto riferimento alla connessione nel modello LookML.
  • Dialetto: seleziona Apache Spark 3+.
  • Host: l'host del server Thrift.
  • Port (Porta): la porta del server Thrift (10000 per impostazione predefinita).
  • Database: lo schema o il database predefinito che verrà modellato. Se non viene specificato alcun database per una tabella, verrà utilizzato questo.
  • Nome utente: l'utente con cui Looker eseguirà l'autenticazione.
  • Password: la password facoltativa per l'utente Looker.
  • Abilita PDT: utilizza questo pulsante di attivazione/disattivazione per abilitare le tabelle derivate permanenti. Quando le PDT sono abilitate, la finestra Connessione mostra impostazioni PDT aggiuntive e la sezione Override PDT.
  • Database temporaneo: uno schema o un database temporaneo per l'archiviazione delle PDT. Deve essere creato in precedenza, con un'istruzione come CREATE SCHEMA looker_scratch;.
  • Parametri JDBC aggiuntivi: aggiungi eventuali parametri JDBC aggiuntivi. Per un elenco dei parametri supportati, consulta la sezione Parametri JDBC supportati in questa pagina.
  • SSL: lascia questa opzione deselezionata.
  • Fuso orario database: il fuso orario dei dati archiviati in Spark. In genere, questo campo può essere lasciato vuoto o impostato su UTC.
  • Fuso orario query: il fuso orario per visualizzare i dati sottoposti a query in Looker.

Per verificare che la connessione sia riuscita, fai clic sul pulsante Test Connection (Verifica connessione) nella sezione Status details (Dettagli stato) in fondo alla pagina Connections Settings (Impostazioni connessioni).

Se Looker visualizza Can Connect (Connessione possibile), premi Connect (Connetti) per creare la connessione.

La connessione al tuo database viene quindi aggiunta all'elenco della pagina Connections (Connessioni) di Admin (Amministrazione) di Looker.

Parametri JDBC supportati

Per Apache Spark, Looker supporta i seguenti parametri JDBC nel campo Parametri JDBC aggiuntivi per la connessione. Per informazioni su questi parametri, consulta la documentazione del tuo database.

  • batchsize
  • cascadeTruncate
  • connectionProvider
  • createTableColumnTypes
  • createTableOptions
  • customSchema
  • dbtable
  • fetchsize
  • isolationLevel
  • keytab
  • lowerBound
  • numPartitions
  • oracle.jdbc.mapDateToTimestamp
  • partitionColumn
  • password
  • preferTimestampNTZ
  • prepareQuery
  • principal
  • pushDownAggregate
  • pushDownLimit
  • pushDownOffset
  • pushDownPredicate
  • pushDownTableSample
  • query
  • queryTimeout
  • sessionInitStatement
  • truncate
  • upperBound
  • url
  • user

Funzionalità supportate

Affinché Looker supporti alcune funzionalità, anche il dialetto del database deve supportarle.

Apache Spark 3+

A partire da Looker 26.22, Apache Spark 3+ supporta le seguenti funzionalità:

Funzionalità Supportata?
Looker (Google Cloud core)
Aggregati simmetrici
Tabelle derivate
Tabelle derivate SQL permanenti
Tabelle derivate permanenti native
Visualizzazioni stabili
Interruzione delle query
Pivot basati su SQL
Fusi orari
SSL
Subtotali
Parametri JDBC aggiuntivi
Sensibile alle maiuscole
Tipo di località
Tipo di elenco
Percentile
Percentile valori distinti
SQL Runner Show Processes
SQL Runner Describe Table
SQL Runner Show Indexes
SQL Runner Select 10
SQL Runner Count
Spiegazione SQL
Credenziali OAuth 2.0
Commenti sul contesto
Pool di connessioni
Sketch HLL
Riconoscimento degli aggregati
PDT incrementali
Millisecondi
Microsecondi
Viste materializzate
Misure in base al periodo
Conteggio approssimato valori distinti
Modelli di analisi nel database
Calendari personalizzati

Passaggi successivi

Dopo aver creato la connessione, imposta le opzioni di autenticazione.