arrow_back 返回搜索
C

Data Engineer (Azure/Databricks) | SR (Remote)

Compass UOL

分享:
place home_work远程 work全职 public聚合职位 · BR

event发布于 2026年8月10日 · verified我们在聚合该职位时确认过此信息

职位介绍

.

Responsabilidades e atribuições

Construção e manutenção de pipelines de dados escaláveis e confiáveis, utilizando tecnologias modernas de processamento distribuído para garantir a ingestão, transformação e disponibilização de dados com qualidade e performance;Desenvolver modelagem de dados, utilizando Databricks, SAP Datasphere, Data Factory, Azure Data Lake Storage (ADLS), Python e BD (SQL Server, Oracle). Extração de dados e criação de data lake de dados e tabelas;Estruturar RAG dos dos contratos e demais documentos; Realizar ETL a partir das APIs do CXL e transforma-los e trata-los em base de dados no Databricks;Estruturar tabelas de dados no Databricks;Desenvolvimento de ETL para análise de dados estruturados e não estruturados, utilizando API para análise de arquivos e validação dos dados;Requisitos e qualificações

  • Requisitos:Experiência e conhecimento avançado no Databricks
  • Experiência com Data Factory, Azure Data Lake Storage (ADLS)
  • Experiência na implementação de arquiteturas de Data Lake e Data Lakehouse
  • Experiência com Python, Apache Spark
  • Experiência com Airflow
  • Experiência com bancos SQL/NoSQL (PostgreSQL, MongoDB, Cassandra)
  • Desejável:Conhecimento em Kafka
  • Conhecimento em DBT
  • Conhecimento em AWS Glue, Big
  • Query
  • Conhecimento em AI/RAG
  • Conhecimento em SAP Datasphere

继续免费阅读

创建免费账户以查看完整职位信息并申请。

  • badge作品集对企业可见
  • notifications新职位邮件提醒
  • favorite始终免费,无任何隐藏条件