Guia de Estudo para Spark com Databricks
Usaremos Spark SQL, Scala e PySpark
-
Seleção de Colunas. Principais tópicos:
select - selectExpr - expr
. -
Filtros Simples. Principais tópicos:
filter - where
. -
Ordenação. Principais tópicos:
orderBy - sort
. -
Adição de Colunas. Principais tópicos:
withColumn - split
. -
Strings - Parte 1. Principais tópicos:
initcap - lower - upper - trim - regexp_replace
. -
Strings - Parte 2. Principais tópicos:
substring - concat - regexp_extract - translate - lit
.