Delta Lake - Time Travel vs Change Data Feed (CDF) - O que você precisa saber
Nesse post você irá conhecer as particularidades do Time Travel e o Change Data Feed do Delta Lake.
top of page
Topo
Buscar
Reginaldo Silva
29 de mai. de 20239 min de leitura
Databricks - Delta Lake - Versões, Protocolos, Features, Upgrade e mais
Entenda mais sobre o comportamento e versões da sua tabela Delta.
Reginaldo Silva
22 de mai. de 20235 min de leitura
Databricks - Deletion Vectors - Otimizando seu Storage
Deletion Vector - Essa feature pode otimizar seu custo com Storage.
Reginaldo Silva
15 de mai. de 20233 min de leitura
Databricks - Documentando seus notebooks
Dicas para documentar seus notebooks like a boss.
Reginaldo Silva
8 de mai. de 20236 min de leitura
Databricks - Count(*) vs Count(1)? Como um Count em 100 Bilhões roda em menos de 1 segundo?
Já ouviu a lenda do COUNT(*) vs COUNT(1)? Nesse post vamos ir no deep dive.
Reginaldo Silva
3 de mai. de 20233 min de leitura
Databricks - 4 dicas de como parametrizar seu Notebook para rodar em diferentes ambientes(Dev\Prod)
Dicas de como parametrizar seus notebooks para rodarem em diferentes ambientes, como DEV e PROD.
Reginaldo Silva
23 de abr. de 20237 min de leitura
Databricks - TablesSize&Vacuum - Monitore e reduza custos do seu Delta lake
Você possui rotina de manutenção no seu Delta Lake? Essa rotina pode diminuir seus custos com storage e te dar um monitoramento proativo.
Reginaldo Silva
16 de abr. de 20239 min de leitura
Backup de Data Lake, isso existe? Salvando vidas e empregos
Já ouviu falar em Backup de Data Lake? De fato, esse tema não é tão falado assim, mas existem maneiras de se proteger contra incidentes.
Reginaldo Silva
10 de abr. de 202310 min de leitura
Databricks - Certificações e por onde estudar?
Como estudar Databricks, por onde estudar, por qual curso começar?
Reginaldo Silva
2 de abr. de 20232 min de leitura
Databricks - Como identificar de qual arquivo veio um determinado registro?
Já precisou rastrear de qual arquivo veio um determinado registro? Neste post veremos como fazer isso.
Reginaldo Silva
26 de mar. de 20234 min de leitura
Databricks - Casos de suporte - Você sabe a diferença entre %run e dbutils.notebook.run()?
Você sabe a diferença entre o %run e o notebook.run()?
Reginaldo Silva
20 de mar. de 20232 min de leitura
Databricks - Spark Confs
Sabe como ver todas as Spark Confs no seu cluster Databricks?
Reginaldo Silva
13 de mar. de 20233 min de leitura
Databricks: Como funciona o Column Mapping (Rename e Drop columns)
Ja precisou renomear ou dropar uma coluna em uma tabela Delta? Vamos entender como isso funciona.
![Databricks 0 a 100 - [3] - Clusters Configs - Parte 1 - Desmistificando Nomenclaturas](https://static.wixstatic.com/media/a794bc_d12a7b7283a24165920fa83b4a3b5dc5~mv2.png/v1/fill/w_1228,h_922,fp_0.50_0.50,q_95,enc_auto/a794bc_d12a7b7283a24165920fa83b4a3b5dc5~mv2.png)
Reginaldo Silva
8 de mar. de 20232 min de leitura
Databricks 0 a 100 - [3] - Clusters Configs - Parte 1 - Desmistificando Nomenclaturas
Ja precisou criar um cluster no Databricks e se deparou com uma séries de configurações que você não conhecia? Então veja esse vídeo.
Reginaldo Silva
6 de mar. de 20232 min de leitura
Databricks: Where date = current_date (Cade meus dados?) Cuidado com o UTC
Já teve problemas com datas, timestamp, timezone no Databricks? Esse post é para voce.
Reginaldo Silva
26 de fev. de 20234 min de leitura
Databricks - Parametrizando seus notebooks "like a boss" usando Widgets
Aprenda a parametrizar seus notebooks de forma prática usando Databricks Widgets.
Reginaldo Silva
22 de fev. de 20231 min de leitura
Quanto custa o Databricks? Da para salvar dinheiro depois desse vídeo?
Como precificar um ambiente de Databricks? Como fazer saving no ambiente com as informações desse video?
Reginaldo Silva
20 de fev. de 20232 min de leitura
(DBUTILS.FS.LS + Recursividade -> Dataframe) Transforme o resultado do Dbutils em Dataframe
Converta o resultado do dbutils.fs.ls() em Dataframe e leia pastas de forma recursiva.
Reginaldo Silva
11 de fev. de 20233 min de leitura
Databricks APIs - Clusters (List, Create e Delete)
Databricks: Veja como listar seus clusters para utilizar em diversos reports.
![Databricks [1] - Clouds, como o Databricks roda e suas curiosidades no Azure](https://static.wixstatic.com/media/a794bc_87ecd53d237746efa6be04dcd33505a8~mv2.jpg/v1/fill/w_1054,h_792,fp_0.50_0.50,q_90,enc_auto/a794bc_87ecd53d237746efa6be04dcd33505a8~mv2.jpg)
Reginaldo Silva
8 de fev. de 20231 min de leitura
Databricks [1] - Clouds, como o Databricks roda e suas curiosidades no Azure
Curiosidades como:
- Data Plane vs Control Plane
- Containers?!
- Você sabia que os dados do Display() vai para conta da Databricks?
bottom of page