← Усі вакансії

Senior Data Engineer (Azure Databricks)

Zoral
Формат:
повний remote
Рівень:
senior
Джерело:
jobs.dou.ua
Відгукнутись на вакансію →

Що робити

  • Review an existing data lake, its pipelines, jobs, notebooks and code as deployed; assess code
  • quality, operability, testing and deployment practice.
  • Build the inventory of sources, feeds, entities, keys, volumes and refresh patterns.
  • Profile data at scale and establish a data-quality baseline (completeness, validity, consistency,
  • uniqueness, timeliness); propose a candidate set of data-quality rules.

Що очікуємо

  • 6+ years of data engineering, including at least three on Databricks in production.
  • Expert SQL and strong Python with PySpark.
  • Hands-on experience with Delta Lake, Unity Catalog, Lakeflow Declarative Pipelines (formerly Delta
  • Live Tables) and Lakeflow Jobs (formerly Workflows), Auto Loader and Azure Data Factory.
  • Data modelling: Data Vault 2.0 and dimensional modelling, slowly changing dimensions, history and

Схожі вакансії

З блогу Trackr

Усі статті →

Знайдено через trackr.help/jobs · Канал: @trackrhelp · Бот для персональних сповіщень: @trackrhelpBot