Modern Data Engineering with Apache Spark

Name: Modern Data Engineering with Apache Spark
ISBN: 9781484274514

1ª edição

Autor:Scott Haines

Editora:UmLivro, Apress

Ofertas

1 loja

Ver preço

Ir para loja

Ano 2022Páginas 612Formato BOOKISBN 9781484274514

Sobre o livro

Leverage Apache Spark within a modern data engineering ecosystem. This hands-on guide will teach you how to write fully functional applications, follow industry best practices, and learn the rationale behind these decisions. With Apache Spark as the foundation, you will follow a step-by-step journey beginning with the basics of data ingestion, processing, and transformation, and ending up with an entire local data platform running Apache Spark, Apache Zeppelin, Apache Kafka, Redis, MySQL, Minio (S3), and Apache Airflow.

Apache Spark applications solve a wide range of data problems from traditional data loading and processing to rich SQL-based analysis as well as complex machine learning workloads and even near real-time processing of streaming data. Spark fits well as a central foundation for any data engineering workload. This book will teach you to write interactive Spark applications using Apache Zeppelin notebooks, write and compile reusable applications and modules, and fully test both batch and streaming. You will also learn to containerize your applications using Docker and run and deploy your Spark applications using a variety of tools such as Apache Airflow, Docker and Kubernetes.

Reading this book will empower you to take advantage of Apache Spark to optimize your data pipelines and teach you to craft modular and testable Spark applications. You will create and deploy mission-critical streaming spark applications in a low-stress environment that paves the way for your own path to production.

What You Will Learn

Simplify data transformation with Spark Pipelines and Spark SQL
Bridge data engineering with machine learning
Architect modular data pipeline applications
Build reusable application components and libraries
Containerize your Spark applications for consistency and reliability
Use Docker and Kubernetes to deploy your Spark applications
Speed up application experimentation using Apache Zeppelin and Docker
Understand serializable structured data and data contracts
Harness effective strategies for optimizing data in your data lakes
Build end-to-end Spark structured streaming applications using Redis and Apache Kafka
Embrace testing for your batch and streaming applications
Deploy and monitor your Spark applications

Who This Book Is For

Professional software engineers who want to take their current skills and apply them to new and exciting opportunities within the data ecosystem, practicing data engineers who are looking for a guiding light while traversing the many challenges of moving from batch to streaming modes, data architects who wish to provide clear and concise direction for how best to harness and use Apache Spark within their organization, and those interested in the ins and outs of becoming a modern data engineer in today's fast-paced and data-hungry world

Ficha técnica

Autor: Scott Haines
Editora: UmLivro, Apress
Formato: BOOK
Encadernação: Capa comum
ISBN: 9781484274514
EAN: 9781484274514
Ano de Publicação: 2022
Número de Páginas: 612
Dimensões: 25.4 x 17.8 x 3 cm
Peso: 1.05 kg
Idioma: pt-BR
Edição: 1
SKU: 9781484274514

Sobre o autor

Quem é Scott Haines? Livros, Biografia e Ideias do Autor

Ver perfil completo

Scott Haines foi um engenheiro de software e autor renomado, com foco em sistemas de dados distribuídos e tecnologias de streaming. Ele é autor do livro "Modern Data Engineering with Apache Spark", publicado pela Apress em 2022, que detalha a ingestão, processamento e transformação de dados usando Apache Spark. Com mais de 15 anos de experiência em engenharia de dados, Haines contribuiu para empresas como Yahoo!, Twilio e Nike, e atuou como Staff Developer Advocate na Databricks. Sua expertise também se estendeu ao copywriting, com colaborações notáveis. Scott Haines faleceu em janeiro de 2017.

Mais livros da editora

Livros da UmLivro: Catálogo Completo e Lançamentos

Ver catálogo da editora

LivrosImpresso

Livros semelhantes

LivrosImpresso

Pro Power BI Dashboard Creation

Practical Guide to Salesforce Experience Cloud

Microsoft Blazor

Advanced Unity Game Development

Victor G Brusca, Victor G

a partir deR$ 282,06

Ver preços

Dúvidas frequentes

Perguntas frequentes

Sobre o que é o livro Modern Data Engineering with Apache Spark?

Quem escreveu Modern Data Engineering with Apache Spark?

Modern Data Engineering with Apache Spark foi escrito por Scott Haines. Scott Haines foi um engenheiro de software e autor renomado, com foco em sistemas de dados distribuídos e tecnologias de streaming. Ele é autor do livro "Modern Data Engineering with Apache Spark", publicado pela Apress em 2022, que detalha a ingestão, processamento e transformação de dados usando Apache Spark.

Quais são os dados desta edição?

Esta edição é publicada pela UmLivro, em 2022, com 612 páginas e no formato Capa comum.

Qual é o ISBN de Modern Data Engineering with Apache Spark?

O ISBN/EAN informado para esta edição é 9781484274514.

Onde comparar preços de Modern Data Engineering with Apache Spark?

A Orelha de Livro compara a oferta disponível para esta edição. O preço e a disponibilidade finais devem ser confirmados na loja.

Modern Data Engineering with Apache Spark

Ofertas

Sobre o livro

Ficha técnica

Quem é Scott Haines? Livros, Biografia e Ideias do Autor

Livros da UmLivro: Catálogo Completo e Lançamentos

Genome

Anidrose Equina

An Analysis of Hans J. Morgenthau's Politics Among Nations

A Big Life in Advertising

Livros semelhantes

Pro Power BI Dashboard Creation

Practical Guide to Salesforce Experience Cloud

Microsoft Blazor

Advanced Unity Game Development

Perguntas frequentes