Blog de Dados e Inteligência Artificial por Reginaldo Silva: Databricks, Azure, RAG, Agentes de IA e engenharia de dados na prática.https://datainaction.dev/pt-brhttps://datainaction.dev/blog/copilot-studio-do-zero-5-de-40-a-90-consertando-o-agente-com-evaluation/https://datainaction.dev/blog/copilot-studio-do-zero-5-de-40-a-90-consertando-o-agente-com-evaluation/Meu agente tirou 40%. Mudei 3 coisas (nenhuma foi trocar o modelo) e cheguei a 90%. Veja o que move o ponteiro de verdade.Thu, 02 Jul 2026 12:56:23 GMTcopilotstudiomicrosoftaievaluationragagentesiapowerplatformdatainactionhttps://datainaction.dev/blog/copilot-studio-do-zero-4-evaluation-ser%C3%A1-que-seu-agente-responde-bem-o-meu-tirou-40/https://datainaction.dev/blog/copilot-studio-do-zero-4-evaluation-ser%C3%A1-que-seu-agente-responde-bem-o-meu-tirou-40/Testar 3 perguntas na mão não prova nada. Rodei o Evaluation do Copilot Studio no meu agente e ele tirou 40%. E foi ótimo.Wed, 01 Jul 2026 12:00:00 GMTcopilotstudiomicrosoftaievaluationagentesiapowerplatformdatainactionhttps://datainaction.dev/blog/copilot-studio-do-zero-3-criando-seu-primeiro-agente-do-zero-o-dataday/https://datainaction.dev/blog/copilot-studio-do-zero-3-criando-seu-primeiro-agente-do-zero-o-dataday/Chega de teoria: bora criar um agente do zero, sem código, que responde sobre o calendário da empresa lendo direto do SharePoint.Wed, 01 Jul 2026 01:20:11 GMTcopilotstudiomicrosoftaisharepointworkiqagentesiapowerplatformdatainactionhttps://datainaction.dev/blog/genie-agent-bricks-do-zero-2-a-fam%C3%ADlia-genie-spaces-agents-one-code-e-ontology/https://datainaction.dev/blog/genie-agent-bricks-do-zero-2-a-fam%C3%ADlia-genie-spaces-agents-one-code-e-ontology/Genie não é só a caixinha de perguntas. No Data + AI Summit 2026 ele virou uma família: Spaces, Agents, One, Code e Ontology. Qual é qual e quando usar cada um?Tue, 30 Jun 2026 12:23:55 GMTdatabricksgenieazuredatabricksgenieonegeniecodeunitycatalogiadatainactionhttps://datainaction.dev/blog/genie-agent-bricks-do-zero-1-o-que-%C3%A9-o-ai-bi-genie-e-como-ele-funciona-sobre-o-unity-catalog/https://datainaction.dev/blog/genie-agent-bricks-do-zero-1-o-que-%C3%A9-o-ai-bi-genie-e-como-ele-funciona-sobre-o-unity-catalog/Qualquer pessoa perguntando pros dados em português e o Genie gerando o SQL governado por trás. Como ele funciona sobre o Unity Catalog e o que muda com o Genie Ontology?Sun, 28 Jun 2026 13:09:52 GMTdatabricksgenieaibiunitycatalogazuredatabricksiadatainactionhttps://datainaction.dev/blog/copilot-studio-do-zero-2-anatomia-de-um-agente-instructions-knowledge-tools-triggers-agents-e-topics/https://datainaction.dev/blog/copilot-studio-do-zero-2-anatomia-de-um-agente-instructions-knowledge-tools-triggers-agents-e-topics/Abri a tela de um agente no Copilot Studio: toda a configuração se resume a 6 blocos. Conheça Instructions, Knowledge, Tools, Triggers, Agents e Topics.Fri, 26 Jun 2026 03:08:55 GMTcopilotstudiomicrosoftaiworkiqagentesiapowerplatformdatainactionhttps://datainaction.dev/blog/copilot-studio-do-zero-1-onde-cada-copilot-vive-no-ecossistema-microsoft-ai/https://datainaction.dev/blog/copilot-studio-do-zero-1-onde-cada-copilot-vive-no-ecossistema-microsoft-ai/GitHub Copilot, M365 Copilot, Copilot Studio, Foundry: tudo virou 'Copilot' e ninguém sabe onde cada um vive. Bora desenhar esse mapa?Fri, 26 Jun 2026 02:26:30 GMTcopilotstudiomicrosoftaimicrosoftfoundrym365copilotgithubcopilotiaagentesdatainactionhttps://datainaction.dev/blog/observabilidade-do-azure-databricks-system-tables-lakeflow-monitoramento-de-jobs-2/https://datainaction.dev/blog/observabilidade-do-azure-databricks-system-tables-lakeflow-monitoramento-de-jobs-2/Usando as System table do Lakeflow para aumentar sua observabilidade.Mon, 14 Apr 2025 17:24:03 GMThttps://datainaction.dev/blog/azure-databricks-system-tables-node_timeline-melhorando-sua-observabilidade/https://datainaction.dev/blog/azure-databricks-system-tables-node_timeline-melhorando-sua-observabilidade/Aumente a observabilidade do seu ambiente Azure Databricks.Mon, 14 Apr 2025 15:29:16 GMTdatainactiondatabrickssystemtableobservabilitymonitoringhttps://datainaction.dev/blog/databricks-compute-policies-melhorando-a-governan%C3%A7a-do-seu-ambiente/https://datainaction.dev/blog/databricks-compute-policies-melhorando-a-governan%C3%A7a-do-seu-ambiente/Você trabalha com Databricks e não utiliza policies para aumentar a governança do seu ambiente? WTF?!Tue, 17 Dec 2024 11:07:56 GMThttps://datainaction.dev/blog/crewai-agentes-inteligentes-criando-um-assessment-report-do-azure-databricks-por-apenas-0-02/https://datainaction.dev/blog/crewai-agentes-inteligentes-criando-um-assessment-report-do-azure-databricks-por-apenas-0-02/Já pensou em criar um assessment do seu ambiente Databricks com agentes inteligentes por apenas $0,02?Tue, 17 Dec 2024 11:06:33 GMTcrewaimultiagentsdatabricksassessmentautomationdatabricksdataholicsdatainactionhttps://datainaction.dev/blog/databricks-table-lineage-monitorando-tabelas-mais-utilizadas-e-tabelas-n%C3%A3o-utilizadas/https://datainaction.dev/blog/databricks-table-lineage-monitorando-tabelas-mais-utilizadas-e-tabelas-n%C3%A3o-utilizadas/Você trabalha com Unity Catalog e não monitora as tabelas mais utilizadas e tabelas não utilizadas? Dá uma olhada nesse vídeo, onde falo...Tue, 05 Nov 2024 01:01:26 GMThttps://datainaction.dev/blog/databricks-vnet-injection-criando-um-ambiente-com-alta-seguran%C3%A7a/https://datainaction.dev/blog/databricks-vnet-injection-criando-um-ambiente-com-alta-seguran%C3%A7a/Como colocar seu Databricks dentro de uma VNET e fechado para internet.Tue, 22 Oct 2024 11:29:08 GMThttps://datainaction.dev/blog/databricks-unity-catalog-metastore-root-storage-vs-dbfs-root/https://datainaction.dev/blog/databricks-unity-catalog-metastore-root-storage-vs-dbfs-root/Entenda de uma vez o que é Metastore Root Storage e DBFS Root.Mon, 14 Oct 2024 12:05:29 GMTdatabricksunitycatalogmetastoredbfsstoragehttps://datainaction.dev/blog/databricks-terraform-migrando-workspaces-e-criando-um-ambiente-de-dr-disaster-recovery/https://datainaction.dev/blog/databricks-terraform-migrando-workspaces-e-criando-um-ambiente-de-dr-disaster-recovery/Databricks - Terraform - Migrando Workspaces e criando um ambiente de DR (Disaster Recovery)Sun, 22 Sep 2024 19:03:02 GMThttps://datainaction.dev/blog/databricks-unity-catalog-estrategias-de-migra%C3%A7%C3%A3o-das-suas-tabelas-do-hms-para-uc/https://datainaction.dev/blog/databricks-unity-catalog-estrategias-de-migra%C3%A7%C3%A3o-das-suas-tabelas-do-hms-para-uc/Aprenda estratégias de migração para o Unity Catalog.Sat, 21 Sep 2024 00:13:05 GMThttps://datainaction.dev/blog/databricks-workflows-schedule-e-triggers-trigger-file-arrival-monitorando-eventos-no-storage/https://datainaction.dev/blog/databricks-workflows-schedule-e-triggers-trigger-file-arrival-monitorando-eventos-no-storage/Fala pessoal, ótima semana a todos, vamos de conteúdo de Databricks. Nesse vídeo falo sobre schedule e triggers e especificamente sobre...Mon, 09 Sep 2024 12:03:40 GMThttps://datainaction.dev/blog/databricks-workflows-for-each-task-paralelizando-e-executando-tasks-em-loop/https://datainaction.dev/blog/databricks-workflows-for-each-task-paralelizando-e-executando-tasks-em-loop/Databricks Workflows - For each Task - Paralelizando e executando tasks em loopSun, 01 Sep 2024 14:50:36 GMThttps://datainaction.dev/blog/databricks-system-table-query-history/https://datainaction.dev/blog/databricks-system-table-query-history/Conheça a nova system table Query History e automatize suas rotinas.Wed, 28 Aug 2024 11:45:18 GMThttps://datainaction.dev/blog/databricks-0-a-100-8-unity-catalog-parte-3-ucx-migrando-do-hive-metastore-para-o-unity-cat/https://datainaction.dev/blog/databricks-0-a-100-8-unity-catalog-parte-3-ucx-migrando-do-hive-metastore-para-o-unity-cat/Voce conhece UCX? Vamos ver como migrar nosso hive metastore para o Unity Catalog de forma automatizada?Mon, 26 Aug 2024 11:49:59 GMThttps://datainaction.dev/blog/databricks-account-usage-dashboard-monitore-o-custo-do-seu-ambiente/https://datainaction.dev/blog/databricks-account-usage-dashboard-monitore-o-custo-do-seu-ambiente/Monitore os custos do seu ambiente com o Account Usage DashboardFri, 23 Aug 2024 12:29:24 GMTdatabricksdashboardusagebillinghttps://datainaction.dev/blog/crewai-agentes-criando-e-rodando-c%C3%B3digo/https://datainaction.dev/blog/crewai-agentes-criando-e-rodando-c%C3%B3digo/Agentes de IA criando e executando códigos.Thu, 01 Aug 2024 01:34:19 GMTdatainactioncrewaiiamultiagentagenticcodertoolshttps://datainaction.dev/blog/crewai-fastapi-streamlit-criar-uma-aplica%C3%A7%C3%A3o-com-agentes-inteligentes/https://datainaction.dev/blog/crewai-fastapi-streamlit-criar-uma-aplica%C3%A7%C3%A3o-com-agentes-inteligentes/Criando uma API com seus Agentes inteligentes e disponibilizando um interface grafica.Fri, 26 Jul 2024 12:12:58 GMThttps://datainaction.dev/blog/crewai-criando-documenta%C3%A7%C3%B5es-com-agentes-inteligentes/https://datainaction.dev/blog/crewai-criando-documenta%C3%A7%C3%B5es-com-agentes-inteligentes/Aprenda a criar agentes de AI para gerar documentação do seu ambiente.Mon, 22 Jul 2024 15:23:16 GMThttps://datainaction.dev/blog/databricks-0-a-100-6-unity-catalog-parte-2-tudo-que-voc%C3%AA-precisa-saber/https://datainaction.dev/blog/databricks-0-a-100-6-unity-catalog-parte-2-tudo-que-voc%C3%AA-precisa-saber/Tudo que você precisa saber sobre Unity Catalog - Parte 2Wed, 03 Jul 2024 15:41:28 GMThttps://datainaction.dev/blog/databricks-0-a-100-5-unity-catalog-parte-1-tudo-que-voc%C3%AA-precisa-saber/https://datainaction.dev/blog/databricks-0-a-100-5-unity-catalog-parte-1-tudo-que-voc%C3%AA-precisa-saber/Essa será uma série de imersão ao Unity Catalog.Mon, 24 Jun 2024 15:50:05 GMThttps://datainaction.dev/blog/databricks-delta-lake-vacuum-inventory-table-reduzindo-at%C3%A9-50-de-custos/https://datainaction.dev/blog/databricks-delta-lake-vacuum-inventory-table-reduzindo-at%C3%A9-50-de-custos/Aprenda como reduzir até 50% da sua operação de Vacuum no seu Delta Lake!Sat, 01 Jun 2024 11:02:21 GMThttps://datainaction.dev/blog/databricks-dbfs-mount-volumes-unity-catalog/https://datainaction.dev/blog/databricks-dbfs-mount-volumes-unity-catalog/Você sabe a diferença entre um Mount e Volume? Sabe como funciona um mount e o motivo pelo qual você não deve mais utilizar ele?Sat, 25 May 2024 11:33:10 GMThttps://datainaction.dev/blog/databricks-file-metadata-column-voc%C3%AA-usa/https://datainaction.dev/blog/databricks-file-metadata-column-voc%C3%AA-usa/Descubra dados sobre os seus dados usando File Metadata column.Mon, 20 May 2024 09:43:10 GMThttps://datainaction.dev/blog/mastering-databricks-tudo-que-voc%C3%AA-precisa-saber-sobre-databricks/https://datainaction.dev/blog/mastering-databricks-tudo-que-voc%C3%AA-precisa-saber-sobre-databricks/Nessa página do Github você encontrará mais de 50 mil reais em curso totalmente gratuito.Tue, 14 May 2024 15:41:06 GMThttps://datainaction.dev/blog/resumo-sobre-gcp-databricks-platform-architect-accreditation/https://datainaction.dev/blog/resumo-sobre-gcp-databricks-platform-architect-accreditation/Fala dataholics, para encerrar a série sobre os cursos Databricks Platform Architect disponíveis no Databricks Academy, hoje trago mais...Mon, 13 May 2024 11:12:54 GMThttps://datainaction.dev/blog/resumo-sobre-aws-databricks-platform-architect-accreditation/https://datainaction.dev/blog/resumo-sobre-aws-databricks-platform-architect-accreditation/Fala dataholics, no post de hoje continuaremos falando sobre cursos, estudos e certificações, falaremos um pouco sobre os detalhes do...Mon, 06 May 2024 00:24:31 GMThttps://datainaction.dev/blog/o-que-achei-sobre-a-azure-databricks-platform-architect-accreditation/https://datainaction.dev/blog/o-que-achei-sobre-a-azure-databricks-platform-architect-accreditation/Azure Databricks Platform Architect - AccreditationMon, 22 Apr 2024 10:07:03 GMThttps://datainaction.dev/blog/databricks-api-executando-um-comando-sql-via-api/https://datainaction.dev/blog/databricks-api-executando-um-comando-sql-via-api/Quer aprender a consumir dados do seu Delta Lake usando a API do Databricks?Mon, 01 Apr 2024 12:02:59 GMThttps://datainaction.dev/blog/databricks-sql-warehouse-statement_timeout/https://datainaction.dev/blog/databricks-sql-warehouse-statement_timeout/Evite custos desnecessários e force os desenvolvedores a criarem queries performáticas com a utilização dessa configuração.Mon, 25 Mar 2024 11:35:29 GMThttps://datainaction.dev/blog/databricks-0-a-100-4-databricks-clusters-all-purpose-job-cluster-sql-warehouse/https://datainaction.dev/blog/databricks-0-a-100-4-databricks-clusters-all-purpose-job-cluster-sql-warehouse/Quer aprender sobre os tipos de clusters disponíveis dentro do Databricks? Esse vídeo é pra você.Mon, 18 Mar 2024 10:51:08 GMThttps://datainaction.dev/blog/databricks-workflows-compartilhando-resultados-entre-tasks-dynamic-values/https://datainaction.dev/blog/databricks-workflows-compartilhando-resultados-entre-tasks-dynamic-values/Já precisou pegar o resultado de uma task anterior e passar para a seguinte? Mon, 11 Mar 2024 11:18:31 GMThttps://datainaction.dev/blog/databricks-alertas-e-envio-da-dashboards-por-e-mail/https://datainaction.dev/blog/databricks-alertas-e-envio-da-dashboards-por-e-mail/Quer aprender a criar alertas customizados através do Databricks?Mon, 04 Mar 2024 10:00:19 GMThttps://datainaction.dev/blog/databricks-deletion-vector-photon-predictive-io-comparing-performance/https://datainaction.dev/blog/databricks-deletion-vector-photon-predictive-io-comparing-performance/Nesse post vamos comparar a performance do Deletion Vector e a engine do Photon.Thu, 29 Feb 2024 00:53:37 GMThttps://datainaction.dev/blog/databricks-deletion-vector-photon-preditictive-io-comparando-a-performance/https://datainaction.dev/blog/databricks-deletion-vector-photon-preditictive-io-comparando-a-performance/Nesse post vamos comparar a performance do Deletion Vector e a engine do Photon.Mon, 26 Feb 2024 11:09:25 GMThttps://datainaction.dev/blog/delta-lake-replacewhere-vs-merge-reduzindo-horas-para-minutos/https://datainaction.dev/blog/delta-lake-replacewhere-vs-merge-reduzindo-horas-para-minutos/Quer aprender otimizar seus pipelines com essa técnica de escrita de dados, confere esse post?Mon, 19 Feb 2024 11:21:42 GMThttps://datainaction.dev/blog/azure-function-para-analytics-orquestrando-com-azure-data-factory-timeouts/https://datainaction.dev/blog/azure-function-para-analytics-orquestrando-com-azure-data-factory-timeouts/Quer aprender a chamar Azure Function via Azure Data Factory? Quer entende quais são as limitações desse modelo?Mon, 12 Feb 2024 11:27:52 GMThttps://datainaction.dev/blog/azure-function-para-analytics-delta-lake-sem-spark/https://datainaction.dev/blog/azure-function-para-analytics-delta-lake-sem-spark/Ja viu um Delta Lake sem Spark? Da uma conferida nesse post.Mon, 05 Feb 2024 11:32:20 GMThttps://datainaction.dev/blog/azure-function-para-analytics-binding-azure-sql-disparando-um-evento-via-insert-into/https://datainaction.dev/blog/azure-function-para-analytics-binding-azure-sql-disparando-um-evento-via-insert-into/Quer aprender como disparar uma Azure Function baseado em um INSERT em uma tabela no SQL Server?Sun, 28 Jan 2024 12:04:24 GMThttps://datainaction.dev/blog/azure-function-para-analytics-http-trigger-criando-uma-api-de-cep/https://datainaction.dev/blog/azure-function-para-analytics-http-trigger-criando-uma-api-de-cep/Quer aprender sobre disparar eventos através de requisições HTTP? Esse post vai te mostrar como fazer isso com Azure Function.Mon, 22 Jan 2024 11:26:53 GMThttps://datainaction.dev/blog/azure-function-para-analytics-introdu%C3%A7%C3%A3o-lendo-e-escrevendo-no-azure-storage/https://datainaction.dev/blog/azure-function-para-analytics-introdu%C3%A7%C3%A3o-lendo-e-escrevendo-no-azure-storage/Quer aprender sobre Azure Function e como rodar seus códigos sem precisar de um servidor?Mon, 01 Jan 2024 15:28:03 GMThttps://datainaction.dev/blog/databricks-lakehouse-federation-o-que-%C3%A9-como-funciona-e-benef%C3%ADcios/https://datainaction.dev/blog/databricks-lakehouse-federation-o-que-%C3%A9-como-funciona-e-benef%C3%ADcios/Quer aprender a fazer queries em diversas fontes de dados diferentes, sem necessidade de copiar dados? Aprenda sobre Lakehouse Federation.Mon, 25 Dec 2023 13:32:19 GMThttps://datainaction.dev/blog/databricks-workflows-if-else-condition-e-dynamic-values/https://datainaction.dev/blog/databricks-workflows-if-else-condition-e-dynamic-values/Você conhece do Databricks Workflows? Venha conhecer as novidades nesse post.Mon, 18 Dec 2023 11:29:38 GMThttps://datainaction.dev/blog/databricks-unity-catalog-system-tables-habilitando-novas-system-tables-billing-tables/https://datainaction.dev/blog/databricks-unity-catalog-system-tables-habilitando-novas-system-tables-billing-tables/Já conhece as system tables do Unity Catalog? Quer conhecer o poder dessas tabelas, leia esse artigo.Mon, 11 Dec 2023 11:04:23 GMThttps://datainaction.dev/blog/databricks-managed-vs-external-table-undrop-table-guia-definitivo/https://datainaction.dev/blog/databricks-managed-vs-external-table-undrop-table-guia-definitivo/Você conhece as principais características das tabelas gerenciadas e externas?Mon, 04 Dec 2023 11:00:05 GMThttps://datainaction.dev/blog/databricks-explodindo-colunas-string-explode-from_json-usando-sql-para-acessar-array-e-struct/https://datainaction.dev/blog/databricks-explodindo-colunas-string-explode-from_json-usando-sql-para-acessar-array-e-struct/Aprenda como acessar ARRAY e STRUCT usando SQL.Mon, 27 Nov 2023 03:48:23 GMThttps://datainaction.dev/blog/databricks-tags-tagueando-seu-ambiente/https://datainaction.dev/blog/databricks-tags-tagueando-seu-ambiente/Utilização de TAGs é essencial para qualidade dos ambientes, nesse post veremos como aplicar TAGs no Databricks.Mon, 20 Nov 2023 12:57:33 GMThttps://datainaction.dev/blog/databricks-ai-suggested-comment-documente-suas-tabelas-de-forma-simples-r%C3%A1pida-e-autom%C3%A1tica/https://datainaction.dev/blog/databricks-ai-suggested-comment-documente-suas-tabelas-de-forma-simples-r%C3%A1pida-e-autom%C3%A1tica/Quer comentar e documentar suas tabelas automaticamente? Mon, 13 Nov 2023 12:53:10 GMThttps://datainaction.dev/blog/databricks-show-commands-facilitando-sua-vida/https://datainaction.dev/blog/databricks-show-commands-facilitando-sua-vida/Você conhece os principais comandos de SHOW no Spark\Databricks? Veja esse post e aprenda como utilizar em automações.Mon, 06 Nov 2023 11:52:17 GMThttps://datainaction.dev/blog/databricks-gerar-um-personal-access-token-pat-para-uma-serviceprincipal-automatize-seus-apps/https://datainaction.dev/blog/databricks-gerar-um-personal-access-token-pat-para-uma-serviceprincipal-automatize-seus-apps/Aprenda a gerar um Personal Access Token (PAT) para uma ServicePrincipal - Automatize seus appsMon, 30 Oct 2023 10:23:23 GMThttps://datainaction.dev/blog/azure-logic-app-automatizando-sua-vida-chamando-jobs-databricks/https://datainaction.dev/blog/azure-logic-app-automatizando-sua-vida-chamando-jobs-databricks/Já pensou em automatizar alguma coisa? Então você precisa conhecer o Azure Logic AppMon, 23 Oct 2023 11:02:28 GMThttps://datainaction.dev/blog/databricks-delta-lake-particionar-ou-n%C3%A3o-eis-a-quest%C3%A3o/https://datainaction.dev/blog/databricks-delta-lake-particionar-ou-n%C3%A3o-eis-a-quest%C3%A3o/Nesse post veremos como funciona o particionamento de dados e quando vale a pena utilizar.Mon, 16 Oct 2023 11:41:36 GMThttps://datainaction.dev/blog/databricks-sdk-for-python-automatizando-sua-vida-sem-precisar-usar-as-apis-do-databricks/https://datainaction.dev/blog/databricks-sdk-for-python-automatizando-sua-vida-sem-precisar-usar-as-apis-do-databricks/Quer aprender automatizar seus scripts de administração de Databricks usando Python ao invés de linha de comando?Mon, 09 Oct 2023 09:59:24 GMTdescriptionhttps://datainaction.dev/blog/databricks-7-tb-127-bilh%C3%B5es-de-linhas-truncate-table-vs-delete/https://datainaction.dev/blog/databricks-7-tb-127-bilh%C3%B5es-de-linhas-truncate-table-vs-delete/Você sabe qual é mais performático, truncate table ou delete?Mon, 17 Jul 2023 11:57:19 GMThttps://datainaction.dev/blog/dtstools-lastmaintenance-function/https://datainaction.dev/blog/dtstools-lastmaintenance-function/Quer saber se sua tabela Delta tem uma boa rotina de manutenção aplicada? Da uma conferida na DTSTOOLS.Mon, 10 Jul 2023 10:26:04 GMTlasthttps://datainaction.dev/blog/databricks-english-sdk-ai-%C3%A9-o-fim-dos-engenheiros-de-dados/https://datainaction.dev/blog/databricks-english-sdk-ai-%C3%A9-o-fim-dos-engenheiros-de-dados/Será que é o fim para os engenheiros de dados?Mon, 03 Jul 2023 09:51:01 GMThttps://datainaction.dev/blog/documentando-seus-notebooks-parte-2-as-flores/https://datainaction.dev/blog/documentando-seus-notebooks-parte-2-as-flores/Saiba como adicionar badges e desenhos na sua documentação.Sun, 25 Jun 2023 13:48:17 GMThttps://datainaction.dev/blog/dtstools-descubra-o-verdadeiro-tamanho-do-seu-delta-lake/https://datainaction.dev/blog/dtstools-descubra-o-verdadeiro-tamanho-do-seu-delta-lake/A DTSTOOLS é uma biblioteca para te ajudar com seu Delta Lake e reduzir custos de storageMon, 19 Jun 2023 10:30:26 GMTdescriptionhttps://datainaction.dev/blog/delta-lake-nunca-mais-leia-parquets/https://datainaction.dev/blog/delta-lake-nunca-mais-leia-parquets/Nesse post eu explico o motivo pelo qual você não deve ler arquivos Parquet.Mon, 12 Jun 2023 11:42:33 GMThttps://datainaction.dev/blog/delta-lake-time-travel-vs-change-data-feed-cdf-o-que-voc%C3%AA-precisa-saber/https://datainaction.dev/blog/delta-lake-time-travel-vs-change-data-feed-cdf-o-que-voc%C3%AA-precisa-saber/Nesse post você irá conhecer as particularidades do Time Travel e o Change Data Feed do Delta Lake.Mon, 05 Jun 2023 10:04:02 GMThttps://datainaction.dev/blog/databricks-delta-table-vers%C3%B5es-protocolos-features-upgrade-e-mais/https://datainaction.dev/blog/databricks-delta-table-vers%C3%B5es-protocolos-features-upgrade-e-mais/Entenda mais sobre o comportamento e versões da sua tabela Delta.Mon, 29 May 2023 12:12:05 GMThttps://datainaction.dev/blog/databricks-deletion-vectors-otimizando-seu-storage/https://datainaction.dev/blog/databricks-deletion-vectors-otimizando-seu-storage/Deletion Vector - Essa feature pode otimizar seu custo com Storage.Mon, 22 May 2023 10:00:21 GMThttps://datainaction.dev/blog/databricks-documentando-seus-notebooks/https://datainaction.dev/blog/databricks-documentando-seus-notebooks/Dicas para documentar seus notebooks like a boss.Mon, 15 May 2023 10:05:05 GMThttps://datainaction.dev/blog/databricks-count-vs-count-1-como-um-count-em-100-bilh%C3%B5es-roda-em-menos-de-1-segundo/https://datainaction.dev/blog/databricks-count-vs-count-1-como-um-count-em-100-bilh%C3%B5es-roda-em-menos-de-1-segundo/Já ouviu a lenda do COUNT(*) vs COUNT(1)? Nesse post vamos ir no deep dive.Mon, 08 May 2023 11:29:53 GMToldbutgoldhttps://datainaction.dev/blog/databricks-4-dicas-de-como-parametrizar-seu-notebook-para-rodar-em-diferentes-ambientes-dev-prod/https://datainaction.dev/blog/databricks-4-dicas-de-como-parametrizar-seu-notebook-para-rodar-em-diferentes-ambientes-dev-prod/Dicas de como parametrizar seus notebooks para rodarem em diferentes ambientes, como DEV e PROD.Wed, 03 May 2023 11:59:43 GMThttps://datainaction.dev/blog/databricks-tablessize-vacuum-monitore-e-reduza-custos-do-seu-delta-lake/https://datainaction.dev/blog/databricks-tablessize-vacuum-monitore-e-reduza-custos-do-seu-delta-lake/Você possui rotina de manutenção no seu Delta Lake? Essa rotina pode diminuir seus custos com storage e te dar um monitoramento proativo.Sun, 23 Apr 2023 14:09:00 GMThttps://datainaction.dev/blog/backup-de-data-lake-isso-existe-salvando-vidas-e-empregos/https://datainaction.dev/blog/backup-de-data-lake-isso-existe-salvando-vidas-e-empregos/Já ouviu falar em Backup de Data Lake? De fato, esse tema não é tão falado assim, mas existem maneiras de se proteger contra incidentes.Sun, 16 Apr 2023 12:37:30 GMThttps://datainaction.dev/blog/databricks-certifica%C3%A7%C3%B5es-e-por-onde-estudar/https://datainaction.dev/blog/databricks-certifica%C3%A7%C3%B5es-e-por-onde-estudar/Como estudar Databricks, por onde estudar, por qual curso começar?Mon, 10 Apr 2023 12:01:15 GMThttps://datainaction.dev/blog/databricks-como-identificar-de-qual-arquivo-veio-um-determinado-registro/https://datainaction.dev/blog/databricks-como-identificar-de-qual-arquivo-veio-um-determinado-registro/Já precisou rastrear de qual arquivo veio um determinado registro? Neste post veremos como fazer isso.Sun, 02 Apr 2023 22:22:32 GMThttps://datainaction.dev/blog/databricks-casos-de-suporte-voc%C3%AA-sabe-a-diferen%C3%A7a-entre-run-e-dbutils-notebook-run/https://datainaction.dev/blog/databricks-casos-de-suporte-voc%C3%AA-sabe-a-diferen%C3%A7a-entre-run-e-dbutils-notebook-run/Você sabe a diferença entre o %run e o notebook.run()? Sun, 26 Mar 2023 11:39:25 GMThttps://datainaction.dev/blog/databricks-spark-confs/https://datainaction.dev/blog/databricks-spark-confs/Sabe como ver todas as Spark Confs no seu cluster Databricks?Mon, 20 Mar 2023 10:50:05 GMThttps://datainaction.dev/blog/databricks-como-funciona-o-column-mapping-rename-e-drop-columns/https://datainaction.dev/blog/databricks-como-funciona-o-column-mapping-rename-e-drop-columns/Ja precisou renomear ou dropar uma coluna em uma tabela Delta? Vamos entender como isso funciona.Mon, 13 Mar 2023 10:31:02 GMThttps://datainaction.dev/blog/databricks-0-a-100-3-clusters-configs-parte-1-desmistificando-nomenclaturas/https://datainaction.dev/blog/databricks-0-a-100-3-clusters-configs-parte-1-desmistificando-nomenclaturas/Ja precisou criar um cluster no Databricks e se deparou com uma séries de configurações que você não conhecia? Então veja esse vídeo.Wed, 08 Mar 2023 10:52:12 GMThttps://datainaction.dev/blog/databricks-where-date-current_date-cade-meus-dados-cuidado-com-o-utc/https://datainaction.dev/blog/databricks-where-date-current_date-cade-meus-dados-cuidado-com-o-utc/Já teve problemas com datas, timestamp, timezone no Databricks? Esse post é para voce.Mon, 06 Mar 2023 11:34:49 GMTpythonhttps://datainaction.dev/blog/databricks-parametrizando-seus-notebooks-like-a-boss-usando-widgets/https://datainaction.dev/blog/databricks-parametrizando-seus-notebooks-like-a-boss-usando-widgets/Aprenda a parametrizar seus notebooks de forma prática usando Databricks Widgets.Sun, 26 Feb 2023 11:02:01 GMThttps://datainaction.dev/blog/quanto-custa-o-databricks-da-para-salvar-dinheiro-depois-desse-v%C3%ADdeo/https://datainaction.dev/blog/quanto-custa-o-databricks-da-para-salvar-dinheiro-depois-desse-v%C3%ADdeo/Como precificar um ambiente de Databricks? Como fazer saving no ambiente com as informações desse video?Wed, 22 Feb 2023 11:35:01 GMThttps://datainaction.dev/blog/dbutils-fs-ls-recursividade-dataframe-transforme-o-resultado-do-dbutils-em-dataframe/https://datainaction.dev/blog/dbutils-fs-ls-recursividade-dataframe-transforme-o-resultado-do-dbutils-em-dataframe/Converta o resultado do dbutils.fs.ls() em Dataframe e leia pastas de forma recursiva.Mon, 20 Feb 2023 11:12:40 GMThttps://datainaction.dev/blog/databricks-apis-clusters-list-create-e-delete/https://datainaction.dev/blog/databricks-apis-clusters-list-create-e-delete/Databricks: Veja como listar seus clusters para utilizar em diversos reports.Sat, 11 Feb 2023 14:04:36 GMThttps://datainaction.dev/blog/databricks-1-clouds-como-o-databricks-roda-e-suas-curiosidades-no-azure/https://datainaction.dev/blog/databricks-1-clouds-como-o-databricks-roda-e-suas-curiosidades-no-azure/Curiosidades como: - Data Plane vs Control Plane - Containers?! - Você sabia que os dados do Display() vai para conta da Databricks?Wed, 08 Feb 2023 10:36:06 GMTdatacloudazuregcpawsdatabricksdatainactionhttps://datainaction.dev/blog/paralelismo-da-para-reduzir-custos-com-paralelismo/https://datainaction.dev/blog/paralelismo-da-para-reduzir-custos-com-paralelismo/Paralelismo é um recurso muito importante para a computação, se bem aplicado pode trazer muitos benefícios, mas e para o mundo dos dados?Mon, 06 Feb 2023 11:47:13 GMThttps://datainaction.dev/blog/otimize-seu-delta-lake-e-reduza-custos-storage-databricks-e-computa%C3%A7%C3%A3o/https://datainaction.dev/blog/otimize-seu-delta-lake-e-reduza-custos-storage-databricks-e-computa%C3%A7%C3%A3o/Otimize seu Delta Lake e reduza custos com essa função disponibilizada para dar manutenção em suas tabelas.Sat, 28 Jan 2023 13:49:41 GMThttps://datainaction.dev/blog/databricks-0-a-100-0-terraform-e-databricks/https://datainaction.dev/blog/databricks-0-a-100-0-terraform-e-databricks/Terraform, Azure e Databricks, automatize seus ambientes de BigData e Analytcs no Microsoft Azure.Tue, 24 Jan 2023 21:16:45 GMThttps://datainaction.dev/blog/azcopy-use-case-backup-your-logs/https://datainaction.dev/blog/azcopy-use-case-backup-your-logs/Neste vídeo mostro um caso prático para implementação do AzCopy, lembre-se a imaginação é o nosso limite.Tue, 01 Sep 2020 08:29:01 GMTazcopycloudbigdatadatainactionhttps://datainaction.dev/blog/azcopy-sincronizando-dados-com-sua-azure-storage-account/https://datainaction.dev/blog/azcopy-sincronizando-dados-com-sua-azure-storage-account/AzCopy é uma ferramenta de linha de comando que pode facilitar sua vida em movimentações de arquivos para o Azure Storage Account.Thu, 27 Aug 2020 12:54:26 GMTazcopyazurecloudhttps://datainaction.dev/blog/big-data-is-in-the-air/https://datainaction.dev/blog/big-data-is-in-the-air/Não foi coincidência a escolha do Slogan para o blog, se você ainda não entendeu o trocadilho, vamos falar um pouco mais sobre ele. Se...Thu, 30 Jul 2020 19:47:38 GMThttps://datainaction.dev/blog/crescimento-dos-dados-estamos-falando-de-zettabytes/https://datainaction.dev/blog/crescimento-dos-dados-estamos-falando-de-zettabytes/Em 2025 vamos atingir um consumo de 175 Zettabytes, esse número parece assustador para você?Thu, 30 Jul 2020 01:49:40 GMTcloudbigdatadatainaction660986e75459https://datainaction.dev/blog/data-is-the-new-bacon/https://datainaction.dev/blog/data-is-the-new-bacon/Você vai notar em alguns momentos as pessoas comparando os dados ao maravilhoso bacon, isso se da pelo momento em que estamos vivendo, a...Wed, 29 Jul 2020 19:03:00 GMTdataisthenewbacondataisthenewoilhttps://datainaction.dev/blog/bem-vindo-ao-datainaction-dev/https://datainaction.dev/blog/bem-vindo-ao-datainaction-dev/O que me motiva a despender tempo compartilhando conteúdo de forma gratuita?Wed, 29 Jul 2020 16:26:43 GMTshareyourknowledgekeeplearning