Experienced Data Engineer - Data Engineering Technical Leader

Job title: Experienced Data Engineer – Data Engineering Technical Leader

Company: Plaid

Job description: La ingeniería de datos es una piedra angular de la visión centrada en los datos de Plaid, que juega un papel fundamental en el fomento de una cultura basada en datos y avanza nuestra visión de ofrecer productos de datos confiables y verdaderamente diferenciados impulsados por la red más grande de perfiles financieros de los usuarios. Para respaldar nuestra visión centrada en los datos, necesitamos escalar nuestros sistemas de datos mientras mantenemos datos correctos y completos. Proporcionamos conjuntos de datos dorados y herramientas a equipos de ingeniería, productos y negocios y les ayudamos a explorar nuestros datos de manera rápida y segura para obtener los conocimientos de datos que necesitan, lo que finalmente ayuda a los cuadros a servir a nuestros clientes de manera más efectiva. Además, Plaid no tendrá éxito si no podemos movernos rápidamente. Construimos los sistemas y herramientas de datos que permiten que todos en cuadros estén basados en datos, lo que hace que el análisis sea fácil, obvio y proactivo en toda la empresa.Los ingenieros de datos aprovechan en gran medida SQL y Python para crear flujos de trabajo de datos que se integran con nuestras aplicaciones Golang. Utilizamos herramientas como DBT, Airflow, RedShift, Atlan y Retorsed para orquestar tuberías de datos y definir flujos de trabajo. Trabajamos con científicos de datos, análisis de productos, inteligencia empresarial, ingenieros de software, gerentes de productos y muchos otros equipos para construir la estrategia de datos de cuadros y una mentalidad de datos primero. Nuestra cultura de ingeniería está impulsada por IC: favorecemos la ideación de abajo hacia arriba y el empoderamiento de nuestro equipo increíblemente talentoso. Estamos buscando ingenieros y líderes técnicos que estén motivados por crear impacto para nuestros consumidores y clientes, crecer juntos como equipo, enviar el MVP y dejar las cosas mejor de lo que los encontramos.Impulse los estándares de datos y la cultura @ cuadros: desempeñará un papel de alto impacto en la definición y promoción de los estándares de datos y fomentando una cultura sólida basada en datos a través de cuadros.Entrega y escala conjuntos de datos dorados: usted será el propietario de la creación y las iteraciones futuras de los conjuntos de datos dorados para todos los principales modelos de datos a cuadros, impulsando su adopción entre los casos clave de uso de datos para capacitar a los equipos con ideas confiables y procesablesForma arquitectura de datos unificados: colaborará con otros profesionales de datos y líderes para diseñar una arquitectura y convenciones de datos unificados, haciendo que los datos en cuadros sean más accesibles e intuitivos. También mejorará las herramientas de exploración de datos para permitir el uso eficiente y efectivo de los datos en toda la organización.Mentor y construir Excelencia técnica: usted guiará a los ingenieros junior en el equipo, proporcionando orientación sobre diseños e implementaciones. Jugará un papel clave en el fomento de una cultura técnica fuerte, capacitando al equipo para ofrecer soluciones escalables de alta calidad.Responsabilidad

Sirviendo como DRI técnico principal, definiendo y ejecutando la hoja de ruta técnica a largo plazo para construir y mantener una cultura basada en datos en Plaid.
Trabajando en estrecha colaboración con el liderazgo y ejecutivos superiores para dar forma a la estrategia y la hoja de ruta de la ingeniería de datos de Plaid, asegurando la alineación con los objetivos del producto centrados en los datos de la compañía y la visión general.
Comprensión profunda de los productos y estrategia de cuadros para informar el diseño de conjuntos de datos dorados, establecer los principios de uso de datos y garantizar que los datos estén estructurados para el máximo impacto y usabilidad.
Concéntrese en entregar conjuntos de datos bien documentados con métricas de calidad claramente definidas, garantías de tiempo de actividad y utilidad demostrable.
Liderar proyectos críticos de ingeniería de datos que fomentan la colaboración entre los equipos, impulsando la innovación y la eficiencia en toda la empresa.
Ingenieros de tutoría, operaciones y profesionales de datos sobre las mejores prácticas para la organización de datos.
Abogando por la adopción de herramientas y prácticas emergentes de la industria, evaluando su ajuste e implementándolos en el momento adecuado para mantenerse a cuadros a la vanguardia de la ingeniería de datos.
Poseer tuberías de datos Core SQL y Python que alimentan nuestro lago de datos y el almacén de datos, asegurando su confiabilidad, escalabilidad y eficiencia.
Mantener el compromiso de Plaid con la calidad y la privacidad de los datos, integrando estos principios en todos los aspectos del trabajo de datos.

Calificaciones

Más de 10 años de experiencia en ingeniería de datos, con un historial probado de edificio de sistemas de datos escalables y tuberías.
Experiencia trabajando con conjuntos de datos masivos (500TB a petabytes) y desarrollar modelos de datos y tuberías robustos además de ellos
Modelado de datos importante, diseño de esquemas y esfuerzos de arquitectura de datos en roles pasados
Profundidad profunda por el diseño del esquema y la capacidad de evolucionar esquemas de análisis sobre los datos no estructurados.
Conocimiento avanzado de SQL como una herramienta y experiencia flexible y extensible con herramientas de orquestación modernas como DBT, Modo y Air Flow.
Experiencia práctica con almacenes de datos y lagos como desplazamiento al rojo, copo de nieve y Databricks.
Construyendo y manteniendo tuberías por lotes y en tiempo real utilizando tecnologías como Spark y Kafka.
Emocionado por explorar nuevas tecnologías y crear pruebas de conceptos que equilibren la innovación técnica con la experiencia del usuario y la adopción.
Disfrute de entrar en los detalles técnicos para administrar, implementar y optimizar la infraestructura de datos de bajo nivel.
Campeón para la privacidad y la integridad de los datos, y siempre actúe en el mejor interés de los consumidores.

$ 204,120 – $ 360,000 al añoEl salario de la base objetivo para este rol es de entre $ 204,120 y $ 360,000 por año. La compensación adicional en la (s) Forma (s) de Equidad y/o Comisión depende del puesto ofrecido. Plaid proporciona un plan de beneficios integral, que incluye médico, dental, visión y 401 (k). El pago se basa en factores como (entre otros) alcance y responsabilidades del puesto, la experiencia laboral y el conjunto de habilidades del candidato y la ubicación. El pago y los beneficios están sujetos a cambios en cualquier momento, de acuerdo con los términos de cualquier compensación o plan de beneficios aplicables.

Expected salary:

Location: San Francisco, CA

Job date: Wed, 11 Dec 2024 02:07:38 GMT

Apply for the job now!