Senior Data Engineer
Job title: Senior Data Engineer
Company: CODAMETRIX
Job description: CodaMetrix está revolucionando la gestión del ciclo de ingresos con su solución de codificación autónoma impulsada por IA, una plataforma de IA de múltiples especialidades que traduce información clínica en conjuntos precisos de códigos médicos. La codificación autónoma de CodaMetrix impulsa la eficiencia bajo modelos de atención basados en el valor y de pago por servicio y respalda una mejor atención al paciente. Nos apasiona sacar a los médicos y proveedores de atención médica del teclado y regresarlos a la atención clínica.Descripción generalEl ingeniero de datos senior es miembro del equipo de datos y análisis y reporta al vicepresidente de datos y análisis. El equipo de Datos y Análisis es responsable de diseñar una estrategia de datos y mantener arquitecturas de datos sólidas en la plataforma Databricks, que pueden manejar de manera eficiente el procesamiento de datos a gran escala y en tiempo real. También son responsables de gestionar las canalizaciones de datos para garantizar un flujo de datos fluido desde varios sistemas de origen. El objetivo del equipo es integrar datos en un lago de datos unificado, facilitando una toma de decisiones y conocimientos analíticos más profundos. Esta integración mejorará nuestras capacidades de gestión de datos, optimizará nuestra canalización de datos, mejorará la calidad de los datos e impulsará la eficiencia operativa.El ingeniero de datos es responsable del ecosistema de datos analíticos, creando y manteniendo repositorios y canalizaciones de datos de alto rendimiento, proporcionando la infraestructura para descubrir y consumir datos mientras evolucionamos continuamente nuestras capacidades analíticas y de almacenamiento de datos.El ingeniero de datos respalda a nuestros equipos de análisis e incorporación de clientes, científicos de datos e ingenieros de software en iniciativas de datos y garantizará un acceso óptimo a los datos en toda la organización. Como miembro del equipo, completarán y mantendrán nuestra arquitectura de datos y canalización de datos, además de optimizar el flujo y la recopilación de datos para equipos multifuncionales. Es un autor experimentado en procesamiento de datos y un administrador de datos que disfruta optimizando los sistemas de datos y desarrollándolos, y tiene un enfoque centrado en el cliente hacia los distintos equipos que proporcionan y consumen datos.Son autodirigidos y se sienten cómodos apoyando las necesidades de análisis e ingeniería de datos de múltiples partes interesadas y sistemas y son implacables con respecto a la seguridad de los datos. El candidato adecuado estará entusiasmado con la perspectiva de optimizar la arquitectura de la plataforma de datos de nuestra empresa para respaldar análisis profundos que impulsen nuestra próxima generación de productos y soluciones impulsados por IA.Responsabilidades
- Crear, mantener, completar y optimizar la plataforma de datos y la arquitectura de análisis de CodaMetrix.
- Diseñe, cree y mantenga la infraestructura robusta y escalable necesaria para una extracción, transformación y carga óptimas de datos de una amplia variedad de fuentes de datos, como AWS RDS PostgreSQL DB, Salesforce, etc.
- Reúna conjuntos de datos grandes y complejos que cumplan con los requisitos comerciales funcionales y no funcionales.
- Identificar, diseñar e implementar mejoras en los procesos internos, como automatizar procesos manuales, optimizar la entrega de datos, rediseñar la infraestructura para una mayor escalabilidad, etc.
- Colaborar con los equipos de análisis, aprendizaje automático y productos para abordar problemas técnicos relacionados con los datos y respaldar sus necesidades de infraestructura de datos para mejorar la disponibilidad y usabilidad de los datos.
- Optimice los sistemas y canalizaciones de datos existentes para lograr rendimiento y escalabilidad.
- Proporcionar datos precisos y relevantes a solicitudes de datos estándar y ad hoc para incorporarlos en paneles e informes de productos nuevos y existentes, comprensión proactiva de lo que se debe comunicar y cuándo.
- Aproveche las habilidades técnicas avanzadas para respaldar el desarrollo de las soluciones de inteligencia empresarial, almacén y lago de datos de CodaMetrix.
- Fomentar una cultura de mejora continua y aprendizaje dentro del equipo.
- Evaluar y recomendar nuevas tecnologías y metodologías de datos para mejorar las capacidades de datos.
- Crear y mantener documentación completa de procesos, sistemas y arquitecturas de datos.
- Proporcionar actualizaciones periódicas a la administración sobre iniciativas de ingeniería de datos y estados de proyectos.
- Participar y liderar partes de las actividades ceremoniales del equipo basadas en Agile, incluidas presentaciones, demostraciones de partes interesadas y revisiones de diseños y códigos de otros ingenieros.
- Proporcionar consultoría técnica a los usuarios de las diversas herramientas de almacenamiento de datos y paneles de control y asesorar a los usuarios sobre optimizaciones, conflictos y uso apropiado e inapropiado de los datos.
Requisitos
- Requerido
- Licenciatura o Maestría en Ciencias de la Computación, Ciencia de Datos, Tecnología de la Información o un campo relacionado
- 5+ años de experiencia con tecnologías Big Data para procesamiento de datos usando Apache Spark, Kafka, Cassandra
- Más de 5 años de experiencia en infraestructura de nube de AWS y servicios de bases de datos como RDS, PostgreSQL, Aurora o Redshift
- Más de 5 años de experiencia en programación en ingesta, procesamiento y lectura de grandes volúmenes de datos utilizando pyspark o Scala
- Más de 5 años de experiencia en redacción de SQL y ajuste de rendimiento
- Posee una comprensión avanzada de diversos datos estructurados en un entorno de atención médica y los organiza para su visualización y consumo.
- Experiencia en la construcción de lagos de datos/almacenamiento de datos con conjuntos de datos estructurados y no estructurados.
- Experiencia con procesos ETL para implementar flujos de trabajo y canalizaciones de datos.
- Experiencia con la plataforma Databricks utilizando el catálogo de Unity y el canal DLT.
- Conocimiento avanzado de modelado de datos, arquitectura de datos e integración de datos.
- Capacidad para gestionar múltiples tareas o proyectos simultáneamente.
- Habilidades analíticas y de resolución de problemas comprobadas.
- Habilidades efectivas de comunicación verbal y escrita tanto con la gerencia como con sus pares.
- Privilegiado
- Herramientas de BI comunes; Tableau es una gran ventaja
- El conocimiento de los requisitos de cumplimiento de HIPAA, así como de otras prácticas de seguridad/cumplimiento, como PII y SOC2, es una gran ventaja.
- Experiencia con cargas de trabajo de Streaming e integración de Spark con Apache Kafka.
- Experiencia en el consumo o la creación de API de servicios web REST y/o SOAP.
- Entiendes lo que significa IaC y tienes experiencia con herramientas comunes para implementarlo.
Lo que CodaMetrix puede ofrecerte:Obtenga más información sobre nuestros beneficios para empleados de tiempo completo y cómo cuidamos de nuestro equipo.
- Seguro médico: cubrimos el 80% del costo del seguro médico y dental y ofrecemos seguro de visión.
- Jubilación: Ofrecemos un plan 401(k) al que los empleados elegibles pueden contribuir un mes después de su primer día.
- Flexibilidad: Tenemos una generosa política de tiempo libre remunerado, que se administra pero no se limita, para que pueda tomarse el tiempo que necesita para relajarse y rejuvenecer.
- Aprendizaje: todos los nuevos empleados completan nuestro programa de incorporación de 7 semanas donde aprenden sobre nuestra empresa y cada uno de nuestros departamentos a través de sesiones en vivo organizadas por una variedad de nuestros líderes.
- Desarrollo: proporcionamos evaluaciones de desempeño anuales y priorizamos el trabajo con los empleados sobre cómo se ve su crecimiento individual.
- Reconocimiento: Reconocemos los logros sobresalientes de nuestro equipo a través de premios anuales de la empresa donde los empleados tienen la oportunidad de nominar a sus pares.
- Ubicación de la oficina: un moderno espacio de trabajo de planta abierta ubicado en el bullicioso vecindario de Back Bay en Boston.
- Beneficios adicionales pagados por el empleador: Ofrecemos seguro de vida pagado por el empleador y seguro de discapacidad a corto y largo plazo.
Aviso de verificación de antecedentesTodos los candidatos deberán completar una verificación de antecedentes al aceptar una oferta de trabajo.Igualdad de oportunidades laboralesNuestra empresa, así como nuestros productos, mejoran porque adoptamos diversas habilidades, perspectivas e ideas. CodaMetrix es un empleador que ofrece igualdad de oportunidades de empleo y todos los solicitantes calificados recibirán consideración para el empleo.¿No cumples con todos los requisitos? Lo invitamos a postularse de todos modos. Los estudios han demostrado que las mujeres, las comunidades de color y los talentos históricamente subrepresentados tienen menos probabilidades de postularse a puestos de trabajo a menos que cumplan con todas las calificaciones. En CodaMetrix estamos comprometidos a construir un lugar de trabajo diverso, inclusivo y auténtico y lo alentamos a considerar unirse a nosotros.Desarrollado por JazzHR
Expected salary:
Location: Boston, MA
Job date: Fri, 01 Nov 2024 02:59:50 GMT
Apply for the job now!