Sr Cloud Data Engineer

Job title: Sr Cloud Data Engineer

Company: Roche and Genentech

Job description: Título del trabajo: Ingeniero de datos en la nube SR
Ubicación: South San Francisco, CA – Hybrid
Tipo de trabajo: contrato, tiempo completoDescripción del trabajo:

Estamos buscando un ingeniero de datos en la nube altamente calificado y motivado para unirse a nuestro creciente equipo de datos. El candidato ideal tendrá una sólida experiencia en el desarrollo de tuberías de datos, implementando modelos de datos y ejecutar las mejores prácticas para desarrollar productos de datos. Este papel requiere experiencia en AWS, Gitlab CI/CD, DBT, Snowflake, SQL, Python, GIT y DevOps, así como experiencia práctica con orquestadores como Air Floww y AutomateNow, y tecnologías de gobernanza de datos como Monte Carlo y Collibra.Responsabilidades clave:

Desarrollar tuberías de datos: diseñar, desarrollar y mantener tuberías ETL/ELT robustas, escalables y eficientes para admitir diversas fuentes de datos y procesamiento de datos a gran escala.
Modelado de datos: cree y mantenga modelos de datos y arquitectura de datos para garantizar la integridad de los datos y el rendimiento óptimo.
Implementación de las mejores prácticas: aplique las mejores prácticas de la industria en el almacenamiento de datos, la gobernanza de datos y la gestión del ciclo de vida de los datos.
Colaboración: trabaje en estrecha colaboración con científicos de datos, analistas y otras partes interesadas para recopilar requisitos y entregar productos de datos de alta calidad.
Automatización y CI/CD: implementa tuberías de CI/CD utilizando GITLAB para pruebas automatizadas, implementación e integración de flujos de trabajo de datos.
Gestión de la base de datos: administre y optimice las bases de datos de copos de nieve para el rendimiento, la escalabilidad y la rentabilidad.
Codificación y secuencia de comandos: escriba consultas SQL eficientes y scripts de Python para extraer, cargar y transformar datos.
Control de versiones: utilice Git para el control de versiones, asegurando cambios de código rastreables y manejables.
Orquestación: utilice herramientas de orquestación como Airflow y AutomateNow para administrar y automatizar los flujos de trabajo de datos.
Gobierno de datos: implementar y administrar soluciones de gobernanza de datos y observabilidad de datos utilizando tecnologías como Monte Carlo y Collibra.
Monitoreo y optimización: monitoree el rendimiento de la tubería de datos y la resolución de problemas para garantizar la confiabilidad y la eficiencia.
Documentación: Mantener documentación integral para tuberías de datos, modelos y procesos.Calificaciones:

Educación: licenciatura en informática, tecnología de la información, ciencias de los datos o un campo relacionado.
Experiencia:

Mínimo 5 años de experiencia en ingeniería de datos o un papel similar.
Experiencia comprobada con servicios en la nube de AWS relacionados con el procesamiento de datos, como S3, Redshift, Lambda, Glue y Data Tipeline.
Habilidades técnicas:

Competencia en el diseño e implementación de tuberías de CI/CD con GITLAB.
Experiencia con DBT (herramienta de compilación de datos) para transformar datos dentro del almacén.
Fuerte conocimiento del copo de nieve con experiencia práctica en soluciones de almacenamiento de datos.
Experiencia en SQL para consultas de datos, manipulación y optimización.
Competencia en Python para tareas de secuencias de comandos y automatización.
Familiaridad con las prácticas y herramientas DevOps.
Experiencia con orquestadores como el flujo de aire y el automateño.
Conocimiento de la gobernanza de datos y las herramientas de observabilidad como Monte Carlo y Collibra.
Fuerte conocimiento práctico de GIT para el control de versiones.Habilidades blandas:

Fuerte resolución de problemas y habilidades analíticas.
Excelentes habilidades de comunicación, tanto escritas como verbales.
Capacidad para trabajar en colaboración en un entorno dinámico y de ritmo rápido.
Alta atención al detalle y el compromiso de producir trabajos de alta calidad.Calificaciones preferidas:

AWS Certified Data Analytics: arquitecto de soluciones certificadas de especialidad o AWS.
Experiencia con el procesamiento de datos en tiempo real y las tecnologías de transmisión (por ejemplo, Kafka, Kinesis).
Experiencia en una industria regulada
Experiencia en un entorno de fabricaciónEste es el rango de pago que Magnit espera razonablemente pagar por esta posición: $ 90.00/hora- $ 139.00/horaBeneficios: médico, dental, visión, 401k (siempre que se cumplan las horas de elegibilidad mínima)Magnit tiene un compromiso continuo con la diversidad y la inclusión de todos los miembros del equipo. Creemos que adoptar la diversidad conduce a la innovación y ayuda a abordar las necesidades del negocio. Damos la bienvenida a personas de diferentes orígenes, experiencias y culturas para unirse a nuestro equipo. Valoramos esta diversidad y nos esforzamos por crear un entorno inclusivo que celebre estas perspectivas únicas, lo que le permite contribuir a su máximo potencial. Finalmente, pero lo más importante, esperamos que todos los miembros del equipo sean tratados con dignidad y respeto.Si tiene una discapacidad y necesita un alojamiento en relación con el proceso de solicitud en línea, envíenos un correo electrónico a roche.accommodations@magnitglobal.com

Expected salary:

Location: San Francisco, CA

Job date: Wed, 26 Feb 2025 00:00:12 GMT

Apply for the job now!