Senior Data Solution Engineer

Job title: Senior Data Solution Engineer

Company: Onwardpath

Job description: Ingeniero de soluciones de datos seniorUbicación: Boston, MA, (híbrido: prefiere a alguien cerca y puede hacer un viaje de negocios según sea necesario)Duración: 6-12Descripción general de la posiciónEstamos buscando un ingeniero de soluciones de datos senior que tenga una sólida experiencia en el diseño, el desarrollo y el mantenimiento de sistemas de datos complejos. El candidato ideal tendrá experiencia trabajando con grandes conjuntos de datos, procesamiento de datos en tiempo real y tecnologías en la nube. Trabajará en estrecha colaboración con científicos de datos, analistas e ingenieros de software para desarrollar soluciones de datos de extremo a extremo que respalden la inteligencia empresarial, el análisis y los informes.Responsabilidades clave:· Solución de conducción para implementar una solución compleja de almacén de datos/lago, incluida la arquitectura, el flujo de soluciones, la implementación de la lógica empresarial. Sugerencia sobre el saco tecnológico para ser utilizado. Debe ser competente en las telas de MS.· Desarrollo de la tubería de datos: diseñar, construir y mantener tuberías de datos escalables que ingieran, procesen y almacenen datos de varias fuentes, asegurando una alta calidad de datos y accesibilidad.· Arquitectura y modelado de datos: desarrollar e implementar estrategias de arquitectura de datos para apoyar el almacenamiento de datos, los lagos de datos y otras iniciativas de big data. Diseñe y optimice las estructuras de bases de datos y los modelos de datos.· Procesos ETL/ELT: lidere el desarrollo de flujos de trabajo ETL/ELT para transformar los datos sin procesar en ideas procesables. Optimizar los flujos de trabajo existentes para el rendimiento y la confiabilidad.· Colaboración con equipos interfuncionales: trabaje en estrecha colaboración con científicos de datos, analistas y equipos de productos para comprender los requisitos comerciales y proporcionar soluciones que permitan la toma de decisiones basadas en datos.· Tecnologías en la nube: implementar y administrar soluciones de datos en plataformas en la nube (AWS, Azure, GCP), incluidos servicios de apalancamiento como S3, Redshift, BigQuery y otros para el almacenamiento y procesamiento de datos escalables.· Calidad y gobernanza de datos: asegúrese de que las tuberías de datos cumplan con la gobernanza de datos y los estándares de calidad. Implemente sistemas de monitoreo y alerta para rastrear la precisión y disponibilidad de datos.· Optimización y ajuste de rendimiento: optimice regularmente el rendimiento de la base de datos, consultas y tuberías de datos para la velocidad y la rentabilidad. Solucione problemas de rendimiento y sugiera mejoras.· Documentación e informes: documentos de procesos de ingeniería de datos, herramientas y metodologías para mantener un marco claro y organizado para la colaboración del equipo y el intercambio de conocimientos.· Mentoría y liderazgo: mentor y brinde orientación técnica a los ingenieros junior y otros miembros del equipo. Revisiones de código de liderar y ayudar a dar forma a las mejores prácticas para el equipo de ingeniería.Habilidades y calificaciones:· Experiencia: más de 6 años de experiencia en ingeniería de datos, desarrollo de la tubería de datos y gestión de datos en entornos a gran escala.· Lenguajes de programación: experiencia en Python, SQL y familiaridad con otros lenguajes de programación como Java, Scala o Go.· Tecnologías de datos: sólida experiencia con tecnologías de big data como Hadoop, Spark, Kafka y marcos relacionados.· Plataformas en la nube: competente en servicios de datos en la nube como AWS, Google Cloud o Azure (preferiblemente Azure).· Gestión de bases de datos: experiencia sólida con bases de datos relacionales y NoSQL (por ejemplo, PostgreSQL, MySQL, MongoDB, Cassandra).· Almacenamiento de datos y BI: Conocimiento de conceptos y herramientas de almacenamiento de datos como desplazamiento al rojo, copo de nieve o BigQuery, y experiencia trabajando con herramientas de BI como Tableau, Looker o Power BI.· Modelado de datos y arquitectura: una fuerte comprensión del modelado de datos, el diseño de esquemas y las mejores prácticas arquitectónicas para soluciones de datos escalables.· Control de versiones y CI/CD: competencia en herramientas de control de versiones (GIT) y experiencia con tuberías de CI/CD para garantizar implementaciones eficientes y confiables.· Resolución de problemas: excelentes habilidades de solución de problemas y la capacidad de resolver desafíos complejos de ingeniería de datos.· Comunicación: fuertes habilidades de comunicación verbal y escrita para interactuar con las partes interesadas técnicas y no técnicas.Habilidades y calificaciones requeridas

• Educación: licenciatura o maestría en informática, tecnología de la información o un campo relacionado.
• Experiencia:

• Al menos 6 años de experiencia en ingeniería de datos o un papel relacionado.
• Experiencia técnica:

• Lenguajes de programación: competencia en Python, Java o Scala.
• Big Data Technologies: experiencia práctica con herramientas como Hadoop, Spark y Kafka.
• Plataformas en la nube: competencia con AWS (EG, S3, Redshift, Glue), Azure (por ejemplo, Synapse, Data Factory) o GCP (por ejemplo, BigQuery, Dataflow).
• Bases de datos: experiencia en SQL Server, MySQL, PostgreSQL.
• Informes: Experiencia en Power BI, SSRS.
• Herramientas: Familiaridad con herramientas de orquestación como Apache Airflow y DBT.
• Tecnología: comprensión de las últimas tendencias en tecnología de datos y actualizadas en ofertas como Databricks, MS Fabrics, AWS Sagemaker Lakehouse
• Habilidades blandas:

• Fuerte resolución de problemas y habilidades analíticas.
• Excelentes habilidades de comunicación y colaboración.
• Capacidad para mentor de ingenieros junior e iniciativas de ingeniería de datos liderar.

Uday RajGerente de Onwardpath2701 Larsen Rd #BA142, Green Bay, WI 54303PH: +1 (920) 215-2233 |

Expected salary:

Location: Boston, MA

Job date: Thu, 20 Mar 2025 01:04:23 GMT

Apply for the job now!