Fala dataholics, estou iniciando uma série de vídeos sobre Databricks Unity Catalog, será imersão do básico ao avançado de tudo que você precisa saber.
Nesse novo vídeo da série Databricks 0 a 100, mergulharemos fundo no Unity Catalog, será uma série de 4 vídeos com um conteúdo imersivo sobre Unity Catalog que você sair ninja no tema.
No primeiro vídeo veremos na prática como funciona a gestão de acesso aos dados sem UC, quais as formas de acesso e algumas particularidades.
No vídeo de hoje você verá:
- Gestão de acessos Sem Unity Catalog
- Entendendo o catalogo Hive_metastore
- Cluster sem isolamento
- Cluster com Passthrough
- Cluster Scoped credential
- Session Scoped credential
- TAC - Table Access Control
- Gestão de acessos no Storage via RBAC ou ACL
- Identity Federation
- SCIM
- Linhagem de dados
- Auditoria
- Information_schemas
e muito mais...
No próximo vídeo teremos muito mais sobre Unity Catalog:
- Criando Metastore
- Habilitando o UC
- Criando e manipulando catálogos
- Organizando Storage - Storage Accounts, Containers e pastas
- Organizando External Locations e Storage Credentials
- Trabalhando em paralelo ao Hive Metastore
- Migrando Mounts
- Gestão de acesos
Link do video: https://youtu.be/koylfcfRrJU?si=NYF9SxkV_K9qJ5A5
00:00 - Introdução
03:00 - Agenda dos videos sobre UC
11:30 - Apresentação sobre introdução Unity Catalog
13:15 - Sobre Reginaldo
13:30 - Agenda da introdução ao Unity Catalog
14:25 - Quem se beneficia mais do UC?
15:40 - Como era a vida antes do UC?
26:00 - Na pratica - Gestão de acessos ante do UC
01:01:01 - Os pilares do Unity Catalog
01:03:40 - Azure Purview vs Unity Catalog
01:05:50 - A vida com Unity Catalog
01:15:00 - Na pratica - Unity Catalog introdução
01:22:00 - Features do UC
01:23:07 - Novidades - UC Open Source
01:24:10 - Limitações
01:26:00 - EncerramentoFique bem e até a próxima.
Links de referência: Mount vs Volumes: https://www.datainaction.dev/post/databricks-dbfs-mount-volumes-unity-catalog Grant ANY File: https://docs.databricks.com/en/data-governance/table-acls/any-file.html Modelos de gestão de acessos: https://github.com/hurtn/datalake-ADLS-access-patterns-with-Databricks?tab=readme-ov-file
