📄️ Antes de começar
Para começar a inserir dados na Carol é necessário antes adicionar um ou mais Connectors e respectivas Staging Tables.
📄️ Envio de dados por API
Esta documentação tem como objetivo apresentar os principais serviços da Carol para criar uma integração para o envio de dados para Carol. Ele também abrange o processo de consumo de dados e o entendimento de como extrair dados do Golden Records.
📄️ Manipulando Staging Tables
Para iniciar a manipulação de staging tables o usuário precisará:
🗃️ Airbyte
3 items
🗃️ Configuração do 2C
12 items
🗃️ Kafka-connect
5 items
📄️ Filtrando os dados para enviar para a Plataforma
Como filtrar os dados que serão enviados para Plataforma Carol utilizando o 2C
📄️ Batch Load Ingestion
É o método para mover arquivos de storage para a camada BigQuery da Carol de forma rápida e de baixo custo. Comporta grandes volumes de dados em pacotes, garantindo alta performance e eficiência na integração estruturada.
📄️ Carol File Loader
Este aplicativo para carregamento de dados estruturados na plataforma Carol é uma ferramenta que permite aos usuários o download e carga de dados nos formatos CSV, XLSX, JSON e API (em breve), utilizando os protocolos HTTP, HTTPS e FTP (em breve). Além disso, o aplicativo suporta os padrões de autenticação Basic, Bearer e OAuth2, o que garante a segurança e privacidade dos dados utilizados. A ferramenta suporta a configuração de diversas fontes de dados e a carga agendada ou manual de maneira escalável.