Saltar al contenido principal

Beta JOBUS.org está en beta pública.

JOBUS.org

Ingeniero sénior de datos Sr. Data Engineer

PadSplit

  • Remoto (EE. UU.)
  • $180,000 – $200,000 por año
  • Tiempo completo
  • Publicado hace 8 horas
Traducción automática del anuncio original en inglés.

Se postulará en el sitio web original.

Sobre este empleo

### **El puesto que necesitamos** PadSplit está ampliando su plataforma de análisis y necesita un ingeniero sénior de datos que trabaje directamente junto con nuestro actual líder de ingeniería de datos (DE). Esta persona desarrollará y mantendrá pipelines de ingesta y transformación en Dagster (o Airflow), dbt y Snowflake, además de realizar tareas de apoyo con Python, Airbyte y AWS. El puesto combina la creación de nuevos pipelines y modelos de datos con la cobertura efectiva de procesos críticos, especialmente el flujo diario Postgres → Snowflake → dbt y las cargas desde API de terceros. Todo se implementa mediante solicitudes de cambios (pull requests) revisadas, no con scripts aislados. ### **La persona que buscamos** Buscamos a un profesional que piense de forma natural en dimensiones, hechos y dimensiones lentamente cambiantes; alguien que sepa cuándo usar una actualización completa en lugar de una carga incremental y cómo afecta esa decisión a la idempotencia y a las recargas históricas (backfills). Esta persona redacta solicitudes de cambios claras y fáciles de revisar, y también realiza revisiones igual de cuidadosas, prestando atención a que los cambios tengan un alcance definido, incluyan pruebas adecuadas y contemplen los modos de falla. Se siente cómoda con flujos de datos complejos en Python y tiene conocimientos suficientes de AWS para analizar roles de tareas, buckets y acceso entre cuentas, sin necesidad de hacerse cargo de toda la ingeniería de plataforma. ### Esto es lo que harás día a día: - **Implementación mediante solicitudes de cambios:** Abrir y combinar solicitudes de cambios para trabajos, activos, programaciones y sensores nuevos o actualizados de Dagster, además de modelos, pruebas y documentación de dbt. - **Ajustes de infraestructura:** Escribir ocasionalmente código de Terraform para secretos, variables de entorno o dimensionamiento de trabajos cuando un pipeline lo requiera. - **Implementación de pipelines:** Crear y depurar pipelines de Python que incluyan sincronizaciones REST/API, extracciones grandes de Postgres, cargas de Parquet y operaciones COPY de Snowflake. - **Administración de Airbyte:** Configurar o solucionar problemas de conexiones de Airbyte cuando la sincronización administrada sea la opción adecuada. - **Monitoreo de producción:** Supervisar las ejecuciones en producción e investigar fallas relacionadas con IAM, OOM, instancias Spot o marcas de agua incorrectas. - **Recargas históricas y actualizaciones pendientes:** Ejecutar recargas históricas y actualizaciones incrementales pendientes, con una explicación clara de qué datos se cargaron y por qué. - **Colaboración en el modelado:** Colaborar con los equipos de análisis y producto en el diseño de dim/fct/x_fct, las estrategias incrementales y la calidad de los datos. - **Revisión de código y guías operativas:** Participar en revisiones de código y preparación de versiones, y redactar guías operativas breves para que otras personas puedan mantener tus pipelines cuando no estés disponible. ### Esto es lo que necesitarás para tener éxito: - **Fundamentos de almacenes de datos:** Buen dominio de las bases de datos relacionales y los patrones de almacén de datos: claves, granularidad, normalización frente a esquema en estrella y cómo se codifica el comportamiento de SCD. - **Experiencia en orquestación:** Experiencia práctica y directa con Dagster (o Airflow), no solo escribiendo SQL en la interfaz de un programador. - **Dominio de dbt:** Experiencia real en la creación y el mantenimiento de modelos, pruebas y documentación en dbt. - **Python a escala:** Comodidad para leer y escribir código Python que mueva datos a escala en las etapas de extracción, transformación y carga. - **Conocimientos prácticos de AWS:** Familiaridad práctica con S3, IAM y ECS/Fargate, al nivel necesario para «depurar mi trabajo». - **Familiaridad con herramientas de extracción y carga:** Experiencia con Airbyte o herramientas similares de extracción y carga. - **Disciplina con las solicitudes de cambios:** Capacidad para redactar solicitudes de cambios que otras personas puedan revisar fácilmente y, a su vez, realizar revisiones igualmente rigurosas. - **Enfoque en la confiabilidad:** Historial de mantener pipelines en buen estado y modelos coherentes tanto en procesos de actualización completa como incremental, sin convertirse en un punto único de falla. ### El proceso de entrevistas: - Una persona del equipo de PeopleOps revisará tu solicitud para determinar los posibles pasos siguientes. - Si cumples los requisitos de elegibilidad, el siguiente paso será una entrevista por video de unos treinta (30) minutos con una persona del equipo de PeopleOps. - Si corresponde, el siguiente paso será una entrevista por video de cuarenta y cinco (45) minutos con nuestro científico principal de datos. - Si corresponde, el siguiente paso será una entrevista por video de una hora y media (1.5) con un panel de partes interesadas clave de PadSplit. - Si corresponde, el siguiente y último paso será una entrevista por video de treinta (30) minutos con una persona líder clave de la empresa. - Si corresponde, ¡pasaremos a hacerte una oferta! ### Compensación, beneficios y ventajas: - Puesto completamente remoto; ¡lo aseguramos! - Paquete de compensación competitivo que incluye un plan de incentivos en acciones y la posibilidad de recibir un bono para toda la empresa. - Planes nacionales de seguro médico, dental y de la vista. - Póliza de seguro de vida proporcionada por la empresa. - Seguros opcionales contra accidentes y beneficios de FSA y DCFSA. - Política de tiempo libre remunerado (PTO) ilimitado, con once (11) feriados reconocidos por la empresa. - Plan 401(k). - Doce (12) semanas de licencia remunerada para madres y padres, tanto biológicos como no biológicos. - La oportunidad de hacer lo que te apasiona en una empresa que está a la vanguardia de la búsqueda de soluciones a la crisis de vivienda asequible. ### Compensación La compensación se determina según el alcance del puesto, los parámetros de referencia del mercado nacional, los conocimientos especializados y la experiencia de la persona, y el impacto de sus contribuciones en los objetivos de negocio de la empresa. ### Información adicional ### **Ten en cuenta: Aunque el anuncio del puesto indica que está en Atlanta, Georgia, este es un puesto completamente remoto. Esto se debe a que nuestro sistema de seguimiento de candidatos exige que indiquemos una ubicación para publicar el puesto en LinkedIn.** **Aviso para las personas solicitantes:** Todos los empleados deben poder acreditar su identidad y autorización para trabajar en Estados Unidos mediante la cumplimentación del Formulario I-9 después de recibir una oferta de empleo. Para este puesto, no podemos ofrecer patrocinio de visas basado en el empleo, ni ahora ni en el futuro. Las personas solicitantes deben estar autorizadas para trabajar en EE. UU. sin necesitar patrocinio de PadSplit. Invitamos a postularse a ciudadanos estadounidenses, residentes permanentes legales, refugiados, asilados y otras personas con autorización de trabajo sin restricciones. PadSplit ofrece igualdad de oportunidades de empleo y no discrimina por motivos de ciudadanía ni de origen nacional.

Anuncio original en inglés

The Role We Need

PadSplit is growing its analytics platform and needs a hands-on Sr. Data Engineer to work alongside our existing DE lead. This person will build and maintain ingestion and transformation pipelines across Dagster (or Airflow), dbt, and Snowflake, with supporting work in Python, Airbyte, and AWS. The role combines building new pipelines and data models with providing real coverage on critical paths — especially the daily Postgres → Snowflake → dbt flow and third-party API loads — all shipped through reviewed pull requests rather than one-off scripts.

The Person We Are Looking For

We're looking for a practitioner who thinks natively in dimensions, facts, and slowly changing dimensions — someone who knows when to use a full refresh versus an incremental load and how that choice affects idempotency and backfills. This person writes clear, reviewable PRs and gives equally thoughtful reviews, with attention to scoped diffs, sensible tests, and failure modes. They're comfortable in complex Python data flows and have enough AWS literacy to reason about task roles, buckets, and cross-account access without needing to own all of platform engineering.

Here's What You'll Be Doing Day-to-Day:

  • PR-driven shipping: Opening and merging pull requests for new or updated Dagster jobs, assets, schedules, and sensors, plus dbt models, tests, and documentation.
  • Infrastructure tweaks: Writing occasional Terraform for secrets, environment variables, or job sizing when a pipeline needs it.
  • Pipeline implementation: Building and debugging Python pipelines covering REST/API syncs, large Postgres extracts, Parquet loads, and Snowflake COPY operations.
  • Airbyte management: Configuring or troubleshooting Airbyte connections wherever managed sync is the right fit.
  • Production monitoring: Watching production runs and investigating failures related to IAM, OOM, Spot instances, or bad watermarks.
  • Backfills & catch-ups: Running backfills and incremental catch-ups with a clear story for what landed and why.
  • Modeling partnership: Working with analytics and product on dim/fct/x_fct design, incremental strategies, and data quality.
  • Code review & runbooks: Participating in code review, release prep, and writing short runbooks so others can operate your pipelines when you're out.

Here's What You'll Need to Be Successful:

  • Warehouse fundamentals: Solid grasp of relational databases and warehouse patterns — keys, grain, normalization vs. star schema, and how SCD behavior gets encoded.
  • Orchestration experience: Practical, hands-on Dagster (or Airflow) experience — not just writing SQL inside a scheduler UI.
  • dbt proficiency: Real experience building and maintaining models, tests, and documentation in dbt.
  • Python at scale: Comfort reading and writing Python that moves data at scale across extract, transform, and load steps.
  • AWS working knowledge: Practical familiarity with S3, IAM, and ECS/Fargate at a "debug my job" level.
  • EL tool familiarity: Experience with Airbyte or similar extract-and-load tools.
  • PR discipline: The discipline to write pull requests others can easily review, and to give equally rigorous reviews in return.
  • Reliability mindset: A track record of keeping pipelines healthy and modeling consistent across full refresh and incremental paths, without becoming a single point of failure.

The Interview Process:

  • Your application will be reviewed for possible next steps by a real human being from the PeopleOps team.
  • If you meet eligibility requirements, the next step would be a video interview with a member of the PeopleOps team for about thirty (30) minutes.
  • If warranted, the next step would be a video interview with our Principal Data Scientist for forty-five (45) minutes.
  • If warranted, the next step would be a video panel interview with key stakeholders at PadSplit for one and a half (1.5) hours.
  • If warranted, the next and final step would be a video interview with a key leader in the company for thirty (30) minutes.
  • If warranted, we move to offer!

Compensation, Benefits, and Perks:

  • Fully remote position - we swear!
  • Competitive compensation package including an equity incentive plan and company-wide bonus opportunity
  • National medical, dental, and vision healthcare plans
  • Company provided life insurance policy
  • Optional accidental insurances, FSA, and DCFSA benefits
  • Unlimited paid-time (PTO) policy with eleven (11) company-observed holidays
  • 401(k) plan
  • Twelve (12) weeks of paid time off for both birth and non-birth parents
  • The opportunity to do what you love at a company that is at the forefront of solving the affordable housing crisis

Compensation

Compensation is based on the role's scope, national market benchmarks, the person's expertise and experience, and the impact of their contributions to our business goals.

Additional Information

Please note: Although the job posting says it's in Atlanta, Georgia, this is a fully remote position. This is a result of our Applicant Tracking System requiring a location to post the role on LinkedIn.

Notice to Applicants:

All employees must be able to establish their identity and authorization to work in the United States by completing Form I-9 after an offer of employment. For this role, we are unable to provide employment-based visa sponsorship, now or in the future. Applicants must be authorized to work in the U.S. without requiring sponsorship from PadSplit. Candidates who are U.S. citizens, lawful permanent residents, refugees, asylees, and others with unrestricted work authorization are welcome to apply. PadSplit is an equal opportunity employer and does not discriminate on the basis of citizenship status or national origin.

Los empleadores en JOBUS nunca le pedirán pagar, comprar equipo ni compartir datos bancarios o de Seguro Social antes de una oferta formal. Confianza y seguridad

Reportar este empleo

Empleos similares