Engenharia de Dados com Google Datafusion e Big Query (CDAP)
Learn Google Datafusion: a low-code, open-source data engineering tool. Get started with data engineering easily!
Course Content
Engenharia de Dados com Google Datafusion e Big Query (CDAP) is a beginner-level Udemy course taught by Cassio Alessandro de Bolba. It runs 3h 4m, is taught in Portuguese, and includes a certificate of completion. Learners rate it 4.7 out of 5 from 30 reviews, with 166 students enrolled. It is a paid course, first published May 2023.
Explore o Google Cloud Data Fusion: Um Guia Introdutório para Integração de Dados Low-Code
Descubra o Google Data Fusion, uma plataforma de integração de dados totalmente gerenciada projetada para simplificar a criação, implantação e gerenciamento de pipelines de dados. Este curso introdutório é ideal para engenheiros de dados que buscam uma solução eficiente e de fácil utilização para suas necessidades de ETL (Extract, Transform, Load).
Por que usar o Google Data Fusion?
- Facilidade de Uso: A interface visual e intuitiva do Data Fusion permite que você crie pipelines de dados complexos sem a necessidade de escrever muito código. A funcionalidade de arrastar e soltar simplifica a transformação e limpeza de dados, permitindo que você se concentre na lógica de negócios.
- Escalabilidade: Executado no Google Cloud, o Data Fusion oferece escalabilidade para lidar com grandes volumes de dados e processamento paralelo de alto desempenho. Expanda suas capacidades de processamento vertical ou horizontalmente para atender às demandas do seu projeto.
- Integração Perfeita: Integre facilmente seus pipelines de dados com outros serviços do Google Cloud, como BigQuery, Cloud Storage, Pub/Sub e muito mais. Crie uma arquitetura de dados coesa e unificada para facilitar a ingestão, armazenamento e análise de dados.
O que você aprenderá neste curso:
- Funcionamento Interno: Compreenda a arquitetura e os componentes do Google Data Fusion.
- Benefícios Chave: Descubra as vantagens de usar o Data Fusion para seus projetos de integração de dados.
- Criação de Instâncias: Aprenda a criar uma instância do Data Fusion no Google Cloud.
- Ingestão de Dados: Utilize o Google Cloud Storage como fonte de dados.
- BigQuery como Data Lake: Implemente o BigQuery como seu Data Lake, utilizando camadas Bronze e Silver.
- Recursos Avançados do BigQuery: Explore tabelas particionadas e o comando MERGE para otimizar suas consultas.
- Ingestão de Fontes Diversas: Ingerir dados de diferentes fontes e formatos.
- Transformação de Dados: Transforme dados com Wrangle (low-code) e queries SQL.
- Criação de DAGs: Crie DAGs (Directed Acyclic Graphs) para ETL de dados e gerenciar dependências.
- Agendamento e Dependências: Configure o agendamento e as dependências inter-DAGs para automatizar seus pipelines.
Este curso é o ponto de partida ideal para dominar o Google Data Fusion e otimizar seus fluxos de trabalho de integração de dados no Google Cloud.
Want AI in your product? Hire the team behind TutorialSearch.io
LLM features, RAG, agents and automation wired into a real product — built by the devs who shipped this site.