Проектите с данни са неразделна част от техническата екосистема на една организация, но инженерите по данни в много компании все още се опитват да решат проблеми, които вече са били решени от други. Това практическо ръководство ви показва как да предоставяте ценни данни, като се фокусирате върху различни аспекти на инженерството на данни, включително въвеждане на данни, качество на данните, идемпотентност и други.

Авторът Бартоз Кониечни ви води през процеса на изграждане на надеждни проекти за инженерство на данни от край до край, от въвеждането на данни до наблюдение на данните, като се фокусира върху дизайн модели на инженерството на данни, които решават често срещани бизнес проблеми по сигурен и оптимизиран към съхранението начин. Всеки модел включва описание на проблема, решения и последици, поставящи модела в контекста на реални сценарии.

По време на това пътуване ще използвате инструменти с отворен код и публични облачни услуги, за да видите как да приложите всеки модел на практика. Ще научите:

• Предизвикателствата пред инженерите по данни и тяхното въздействие върху системите за данни
• Как тези предизвикателства се отнасят до компонентите на системите за данни
• За какво служат моделите на инженерството на данни
• Как да идентифицирате и отстраните проблеми със сегашните си компоненти за данни
• Технологично независими решения за нови и съществуващи проекти с данни
• Как да приложите моделите с Apache Airflow, Apache Spark, Apache Flink и Delta Lake

Бартоз Кониечни е независим инженер по данни с повече от 15 години опит в програмирането. Той е заемал различни водещи практически позиции, които са му помогнали да работи по много проблеми в инженерството на данни като пакетна и стрийминг обработка.

Страници: 340, Размери: 17.8x17.8 см