- Design and build scalable & metadata-driven data ingestion pipelines (For Batch and Streaming Datasets)
- Conceptualize and execute high-performance data processing for structured and unstructured data, and data
- Schedule, orchestrate, and validate pipelines
- Design exception handling and log monitoring for debugging
- Ideate with your peers to make tech stack and tools-related decisions
- Interact and collaborate with multiple teams (Consulting/Data Science & App Dev) and various stakeholders to meet deadlines, to bring Analytical Solutions to life.
- Experience in implementing Data Lake with technologies like Azure Data Factory (ADF), PySpark, Databricks, ADLS,
- A comprehensive foundation with working knowledge of Azure Synapse Analytics, Event Hub & Streaming
- A passion for writing high-quality code and the code should be modular, scalable, and free of bugs (debugging
- Enthuse to collaborate with various stakeholders across the organization and take complete ownership of
- Experience in using big data technologies like Hadoop, Spark, Airflow, NiFi, Kafka, Hive, Neo4J, Elastic Search
- Adept understanding of different file formats like Delta Lake, Avro, Parquet, JSON, and CSV
- Good knowledge of building and designing REST APIs with real-time experience working on Data Lake or
- Experience in supporting BI and Data Science teams in consuming the data in a secure and governed manner
- Certifications like Data Engineering on Microsoft Azure (DP-203) or Databricks Certified Developer (DE) are
-
Data Engineer
hace 3 semanas
Epika It Tlahuac, México**Data Engineer Pyspark** · **Quieres laborar en la mejor startup de robotica e IA de México? esta es tu oportunidad buscamos a nuestro nuevo equipo de Data.** · - experiência intemerdia en Spark Scala/python · - Python · - SQL · - 2 años de experiência en Cloud (GCP/AWS/AZURE) · ...
-
Data Engineer
hace 2 semanas
Azka IT Consulting Tlahuac, México· **AZKAIT** es una empresa Mexicana que busca y conecta el mejor talento IT con empresas Latinoamericanas y de Estados Unidos. · Estamos en la búsqueda de tu talento como **Data engineer.** · **Requisitos**: · **Ingeniero de Datos** · Como Ingeniero de Datos trabajarás junto a ...
-
Data Engineer
hace 2 semanas
Capital Empresarial Horizonte Tlahuac, México**Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información solicita**: · **Data Engineer** · **Para laborar en CDMX o GDL o MTY o Qro** · **Perfil** · **Escolaridad**: Ingeniería en Sistemas, Informática o afín. · **Experiênc ...
-
Data Engineer
hace 1 semana
Capital Empresarial Horizonte Tlahuac, México**Data Enginer** · **Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información solicita**: · **Data Engineer** · **Para laborar en Ciudad de México, GDL, Monterrey o Qro** · **Perfil** · **Escolaridad**: Ingeniería en Sistemas ...
-
Data Engineer
hace 2 semanas
Unilever Tlahuac, México**Función**: Ice Cream Data Engineer · **Scope**: Ice Cream Mexico · **Localidad**:CDMX, Tultitlán · **Términos & Condiciones**:Tiempo completo · **¿QUIÉNES SOMOS?** · ¿Quieres ser parte de una compañía que hace la diferencia alrededor del mundo? En Unilever, tenemos un propósito ...
-
Data Engineer
hace 1 semana
eTribe Tlahuac, MéxicoSobre el trabajo · Como Data Engineer desempeñaras un papel fundamental en el diseño, desarrollo y mantenimiento de la infraestructura de datos basada en la nube utilizando servicios de AWS, con foco en AWS Redshift. Será responsable de garantizar la disponibilidad, escalabilidad ...
-
Data Engineer
hace 3 semanas
S de Rl de CV Tlahuac, MéxicoLa posición que buscamos es SR. Data Engineer para importante empresa dedicada a la asesoría en inversiones, ésta firma actualmente opera en México, América Central y América del Sur y cuenta con más de dieciséis años de experiência. · Reportarías directamente al Chief Technology ...
-
Data Engineer
hace 1 semana
Capital Empresarial Horizonte Tlahuac, México**Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información Solicita**: · **Data Engineer** · **Perfil** · **Escolaridad**: Ingeniería en Sistemas, Informática o afín. · **Experiência**: 3 años de experiência. · Lugar a labora ...
-
Data Engineer
hace 1 semana
Desarrollo en Cuatro Consultores SC Tlahuac, MéxicoImportante empresa de TI con más 20 años de experiência brindando servicios profesionales en desarrollo y gestión de sistemas está contratando: · **Data Engineer altamente cualificado para contribuir en diversas fases del ciclo de vida de desarrollo de datos, desde la concepción ...
-
Data Engineer
hace 1 semana
NTT DATA MÉXICO Tlahuac, México**IMPORTANTE CONSULTORA DE TECNOLOGIAS DE LA INFORMACIÓN TE ESTA BUSCANDO COMO** · **DATA ENGINEER** · - **REQUISITOS**:_ · - Escolaridad: Ing. en Sistemas, Electrónica, Computación, Telecomunicaciones, Informática o afín (titulado) · - Experiência: 4 a 6 años de experiência labo ...
-
Data Engineer
hace 2 semanas
Kodefree Tlahuac, MéxicoEn KodeFree nos encontramos en búsqueda de talento para cubrir la posición como Data Engineer (experiência en Snowflake) · **¿Qué necesitas para participar en nuestro proceso de selección?** · - Ing. en Sistemas Computacionales, Sistemas o carreras afines · - Experiência al menos ...
-
Data Engineer
hace 2 semanas
IDS Comercial, S.A. de C.V. Tlahuac, Méxicoids Comercial es una empresa 100% mexicana dedicada a TI con 40 años de experiência y presencia en México, Latinoamérica y EEUU. Más de 1500 consultores trabajan con un gran número de proyectos dentro de los sectores financiero, comercial, manufacturero, telecomunicaciones, servi ...
-
Data Engineer
hace 2 semanas
Epika It Tlahuac, México* 3 años de experiência desarrollando data pipelines · - Experiência desarrollando flujos ETL · - Conocimiento avanzado en Hadoop& Spark · - Conocimiento en librerías Python: PySpark · - Desarrollo de flujos de integración en Dataproc · - Experiência en los servicios de GCP: BigQ ...
-
Data Engineer
hace 3 días
Zurich Insurance Tlahuac, México**Job Title: DATA ENGINEER** · **Zurich, aseguradora líder a nível internacional te invita a ser parte de su equipo como**: · **"Data Engineer (Big Data)"** · **Tus habilidades y experiência**: · - **Escolaridad**: Ing. Mecatrónica, Matemáticas Aplicadas, Ingeniería de Software, ...
-
Data Engineer
hace 1 semana
IDS Comercial, S.A. de C.V. Tlahuac, Méxicoids Comercial es una empresa 100% mexicana dedicada a TI con 40 años de experiência y presencia en México, Latinoamérica y EEUU. Más de 1500 consultores trabajan con un gran número de proyectos dentro de los sectores financiero, comercial, manufacturero, telecomunicaciones, servi ...
-
Data Engineer
hace 1 semana
Epika It Tlahuac, México**Data Engineer Pyspark** · **Quieres laborar en la mejor startup de robotica e IA de México? esta es tu oportunidad buscamos a nuestro nuevo equipo de Data.** · - experiência intemerdia en Spark Scala/python · - Python · - SQL · - 2 años de experiência en Cloud (GCP/AWS/AZURE) · ...
-
Data Engineer
hace 1 semana
Capital Empresarial Horizonte Tlahuac, MéxicoCapital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información Solicita: · Azure Data Engineer · Para laborar en Querétaro/Guadalajara/Ciudad de México/Monterrey · **Perfil**: · Edad: Indistinto. · Escolaridad: Ingeniería en Sistem ...
-
Data Engineer
hace 2 semanas
IRONBIT Tlahuac, México_**DESARROLLADOR DATA**_ · Generales: · - Ing. en Sistemas Computacionales, Ing. en Computación o a fin. · - Vivir en CDMX o área metropolitana. · Experiência técnica: · - Experiência : 3 a 4 años · - Conocimientos técnicos: Experiência en el manejo de tecnologías y herramientas ...
-
Data Engineer
hace 1 semana
Capital Empresarial Horizonte Tlahuac, México**Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información solicita**: · **Azure Data Engineer** · **Para laborar en CDMX o GDL o MTY o Qro** · **Perfil** · **Escolaridad**: Ingeniería en Sistemas, Informática o afín. · **Exp ...
-
Data Engineer
hace 1 semana
Capgemini Tlahuac, México**RH**:Alexa López · **Ubicación**: México (remoto) · **Industria**: Finaciera · **Conocimientos y experiência necesaria**: · - Experiência en desarrollo en **AB Initio **(4+ años) · - Experiência con** SQL transact**: · - GDE Grafos Planes pset EME TRMC batch · - Continuous Flow ...
Principal Data Engineer - Xico, México - Tiger Analytics, Llc
Descripción
Tiger Analytics is a global AI and analytics consulting firm.With data and technology at the core of our solutions, we are solving problems that eventually impact the lives of millions globally.
Our culture is modeled around expertise and respect with a team-first mindset. Headquartered in Silicon Valley, you'll find our delivery centers across the globe and offices in multiple cities across India, the US, UK, Canada, and Singapore, including asubstantial remote global workforce.
We're Great Place to Work-Certified. Working at Tiger Analytics, you'll be at the heart of an AI revolution. You'll work with teams that push the boundaries of what is possible and build solutions that energize and inspire.
As a Principal Data Engineer (Azure), you would have hands on experience working on Azure as cloud, Databricks and some exposure/experience on Data Modelling.
You will build and learn about a variety of analytics solutions & platforms, data lakes, modern data platforms, data fabric solutions, etc.
using different Open Source, Big Data, and Cloud technologies on Microsoft Azure.Note:
The designation will be commensurate with expertise and experience. Compensation packages are among the best in the industry.
Job Requirement
Mandatory:
Azure Data Factory (ADF), PySpark, Databricks, ADLS, Azure SQL
Database Optional:
Azure Synapse Analytics, Event Hub & Streaming Analytics, Cosmos DB and Purview. Strong programming, unit testing & debugging skills in SQL, Python or Scala/Java. Some experience of using big data technologies like Hadoop, Spark, Airflow, NiFi, Kafka, Hive, Neo4J, Elastic
Search. Good Understanding of different file formats like Delta Lake, Avro, Parquet, JSON and CSV. Experience of working in Agile projects and following DevOps processes with technologies like Git, Jenkins & Azure DevOps.
Good to have:
Experience of working on Data Lake & Lakehouse projects Experience of building REST services and implementing service-oriented architectures. Experience of supporting BI and Data Science teams in consuming the data in a secure and governed manner.
Certifications like Data Engineering on Microsoft Azure (DP-203) or Databricks Certified Developer (DE) This position offers an excellent opportunity for significant career development in a fast-growing and challenging entrepreneurial environment with a high degree of individual responsibility.
#J-18808-Ljbffr