Ingeniero de datos sénior Estamos buscando un ingeniero de datos inteligente para unirse a nuestro creciente equipo de ingenieros. Estamos rediseñando nuestra canalización de datos y usted será responsable de crear una solución de big data desde cero y optimizar nuestra arquitectura de canalización de datos y datos, así como optimizar el flujo y la recopilación de datos para equipos multifuncionales. El candidato ideal es un desarrollador de canalizaciones de datos experimentado y un organizador de datos que disfruta optimizando sistemas de datos y construyéndolos desde cero. Debe ser autodirigido y sentirse cómodo apoyando las necesidades de datos de múltiples equipos, sistemas y productos. El candidato adecuado estará entusiasmado con la perspectiva de optimizar o incluso rediseñar la arquitectura de datos de nuestra empresa para respaldar nuestra próxima generación de productos e iniciativas de datos.
Responsabilidades
- Cree la infraestructura necesaria para una extracción, transformación y carga óptimas de datos de una amplia variedad de fuentes de datos utilizando las tecnologías de ‘big data’ de SQL y AWS.
- Cree herramientas de análisis que utilicen la canalización de datos para proporcionar información procesable sobre la adquisición de clientes, la eficiencia operativa y otras métricas clave de rendimiento comercial.
- Trabaje con las partes interesadas, incluidos los equipos ejecutivo, de productos, de datos y de diseño, para ayudar con los problemas técnicos relacionados con los datos y respaldar sus necesidades de infraestructura de datos.
- Mantenga nuestros datos separados y seguros a través de las fronteras nacionales a través de múltiples centros de datos y regiones de AWS.
- Cree herramientas de datos para los miembros del equipo de análisis y científicos de datos que los ayuden a construir y optimizar nuestro producto para convertirlo en un líder innovador de la industria.
- Crear y mantener una arquitectura de canalización de datos óptima,
- Reúna conjuntos de datos grandes y complejos que cumplan con los requisitos comerciales funcionales y no funcionales.
- Identificar, diseñar e implementar mejoras de procesos internos: automatización de procesos manuales, optimización de entrega de datos, rediseño de infraestructura para una mayor escalabilidad, etc.
Calificaciones
- Conocimiento avanzado de SQL y experiencia trabajando con bases de datos relacionales, creación de consultas (SQL), así como familiaridad laboral con una variedad de bases de datos.
- Experiencia en la construcción y optimización de canalizaciones de datos, arquitecturas y conjuntos de datos de ‘big data’.
- Experiencia realizando análisis de causa raíz en datos y procesos internos y externos para responder preguntas comerciales específicas e identificar oportunidades de mejora.
- Fuertes habilidades analíticas relacionadas con el trabajo con conjuntos de datos no estructurados.
- Cree procesos que admitan la transformación de datos, las estructuras de datos, los metadatos, la dependencia y la gestión de la carga de trabajo.
- Un historial exitoso de manipulación, procesamiento y extracción de valor de grandes conjuntos de datos desconectados.
- Conocimiento práctico de colas de mensajes, procesamiento de flujo y almacenes de datos de ‘big data’ altamente escalables.
- Fuerte gestión de proyectos y habilidades organizativas.
- Experiencia apoyando y trabajando con equipos multifuncionales en un entorno dinámico.
- Estamos buscando un candidato con más de 5 años de experiencia en un puesto de ingeniero de datos, que haya obtenido un título de posgrado en informática, estadística, informática, sistemas de información u otro campo cuantitativo. También deben tener experiencia en el uso de los siguientes software/herramientas:
- Experiencia con herramientas de big data: Hadoop, Spark, Kafka, etc.
- Experiencia con bases de datos relacionales SQL y NoSQL, incluidas Postgres y Cassandra.
- Experiencia con canalización de datos y herramientas de gestión de flujo de trabajo: Azkaban, Luigi, Airflow, etc.
- Experiencia con servicios en la nube de AWS: EC2, EMR, RDS, Redshift, S3, Glue
- Experiencia con sistemas de procesamiento de streams: Storm, Spark-Streaming, etc.
- Experiencia con al menos un lenguaje de secuencias de comandos orientado a objetos/funciones de objetos: Python, Java, C++, Scala, etc.
La inclusión y la diversidad son fundamentales para el éxito de IHS Markit, y alentamos activamente las solicitudes de personas de todos los orígenes. Estamos comprometidos a brindar igualdad de oportunidades de empleo sin distinción de raza, color, religión, sexo, orientación sexual, identidad de género, edad, origen nacional, discapacidad, condición de veterano protegido o cualquier otra categoría protegida. Para obtener más información sobre las muchas formas en que apoyamos con entusiasmo los esfuerzos de inclusión y diversidad tanto para los candidatos como para los empleados, acceda a nuestra Declaración de inclusión y diversidad aquí.
Estamos orgullosos de proporcionar adaptaciones razonables a los solicitantes con discapacidades. Si está interesado en solicitar empleo con IHS Markit y necesita asistencia especial o adaptaciones para usar nuestro sitio web o solicitar un puesto, comuníquese o llame al +1 212 849 0399. La determinación sobre las solicitudes de adaptaciones razonables se considera en un caso. -por caso. Esta información de contacto (correo electrónico y teléfono) está destinada únicamente a la asistencia con la solicitud y las solicitudes de alojamiento. No podemos aceptar currículums ni proporcionar información sobre el estado de la solicitud a través del número de teléfono o la dirección de correo electrónico anteriores. Los currículums solo se aceptan a través del proceso de solicitud en línea, y solo los candidatos calificados recibirán consideración y seguimiento.
IHS Markit mantiene un lugar de trabajo libre de sustancias; se les puede pedir a los empleados que se sometan a una prueba de drogas (donde lo permita la ley). Además, como contratista federal en los Estados Unidos, la empresa participa en el Programa E-Verify para confirmar la elegibilidad para trabajar.
Para obtener información, haga clic en los siguientes enlaces:
Código de conducta comercial de IHS Markit
Derecho al trabajo
EEO es la Ley
EEO es el Suplemento de la Ley
Transparencia de pago Colegas Actuales
Si actualmente trabaja para IHS Markit, presente su solicitud internamente a través del sitio interno de carreras de Workday.
