Projetos de dados são fundamentais para o ecossistema técnico das organizações, mas muitos engenheiros de dados ainda continuam trabalhando em problemas que outros já resolveram.Este guia prático mostra como entregar dados de alto valor, concentrando-se em aspectos essenciais da engenharia de dados, como ingestão de dados, qualidade de dados, idempotência e muito mais.O autor Bartosz Konieczny orienta você no processo de construção de projetos confiáveis de engenharia de dados de ponta a ponta,desde a ingestão de dados até a observabilidade dos dados, com foco em padrões de design de engenharia de dados que resolvem problemas comuns de negócios de forma segura e otimizada em termos de armazenamento.Cada padrão inclui uma descrição do problema, soluções e consequências para o usuário, inserindo o padrão no contexto de cenários da vida real.Ao longo dessa jornada, você usará ferramentas de dados de código aberto e serviços de nuvem pública para implementar cada padrão.Você aprenderá:De