Resumen: Únase al equipo de Data Lake para construir y operar diversos componentes de la plataforma de datos, contribuyendo a servicios API y herramientas analíticas impulsadas por modelos de lenguaje de gran tamaño (LLM), mientras colabora con científicos de datos e ingenieros de aprendizaje automático. Aspectos destacados: 1. Trabajar en inteligencia artificial de vanguardia para la búsqueda y descubrimiento en comercio electrónico. 2. Resolver problemas y mejorar la vida de los clientes y compañeros de trabajo. 3. Contribuir a una plataforma innovadora impulsada por métricas. Sobre nosotros Constructor es la plataforma de próxima generación para la búsqueda y el descubrimiento en el comercio electrónico, diseñada explícitamente para optimizar métricas como ingresos, tasa de conversión y beneficio. Nuestro motor de búsqueda está completamente desarrollado internamente mediante transformadores y modelos de lenguaje generativos de gran tamaño (LLM), y utilizamos su núcleo y sus capacidades de personalización para impulsar desde la propia función de búsqueda hasta las recomendaciones y los agentes de compra. La ingeniería es, con mucho, nuestro departamento más grande, y hemos desarrollado nuestro motor propietario para que sea el mejor del mercado, sin haber perdido nunca una prueba A/B frente a ninguna tecnología competitiva. Nos apasiona mantener este liderazgo y trabajamos en la vanguardia de la inteligencia artificial para lograrlo. Por necesidad, nuestro motor está diseñado para una escala extrema y procesa más de 1000 millones de consultas diarias en 150 idiomas y aproximadamente 100 países. Es utilizado por algunas de las mayores empresas de comercio electrónico del mundo, como Sephora, Under Armour y Petco. Somos un equipo apasionado al que le encanta resolver problemas y quiere mejorar la vida de nuestros clientes y compañeros de trabajo. Valoramos la empatía, la apertura, la curiosidad, la mejora continua y nos entusiasman las métricas que realmente importan. Creemos que empoderar a todas las personas de una empresa para que hagan lo que mejor saben hacer puede conducir a grandes logros. Constructor es una empresa con sede en Estados Unidos que lleva operando en el mercado desde 2019. Fue fundada por Eli Finkelshteyn y Dan McCormick, quienes aún lideran la empresa actualmente. **Descripción del puesto** La plataforma de datos de Constructor es un componente fundamental para todos los equipos internos de datos y de aprendizaje automático. Gestiona la ingesta de más de 2 TB de eventos comprimidos diarios y administra más de 6 PB de datos en nuestro data lake. **La plataforma de datos:** * Es un conjunto integral de herramientas e infraestructura utilizadas diariamente por cada científico de datos e ingeniero de aprendizaje automático de nuestra empresa. * Implementa APIs de cara al público para la ingesta de eventos (FastAPI) y análisis en tiempo real (ClickHouse, Cube). * Gestiona el almacenamiento de datos en formatos adecuados (S3, ClickHouse, Delta). * Facilita el procesamiento de datos mediante tecnologías como Python, Spark/Databricks, ClickHouse, AWS Lambda y Kinesis. * Incluye soluciones robustas de monitorización (Prometheus, OpenTelemetry, PagerDuty, Sentry). * Garantiza pruebas automatizadas de pipelines y calidad de los datos. * Ofrece capacidades de observabilidad y optimización de costos. * Proporciona herramientas integrales para que los desarrolladores creen, ejecuten, prueben y programen pipelines de datos, junto con toda la documentación y soporte necesario. Nuestra plataforma es desarrollada por el equipo de Data Lake y el equipo de Infraestructura de Datos. **Sobre el equipo de Data Lake** Estamos contratando a un Ingeniero de Datos Senior para que trabaje en nuestro equipo de Data Lake. Estas son nuestras actividades cotidianas: * Mantener el marco de trabajo de los trabajos de pipelines de datos. * Desarrollar el marco de calidad de datos (conjunto interno de herramientas para la validación de fuentes de datos internas y externas). * Mantener y desarrollar el servicio de ingesta de datos de cara al público con más de 17 000 RPS. * Mantener y desarrollar los pipelines de datos centrales en modo por lotes y en modo de transmisión. * Ser la última línea de soporte para los usuarios internos de nuestra plataforma. * Participar en la rotación de guardias para incidentes de la plataforma de datos (compartida entre el equipo). **Requisitos** * Inglés fluido. * 4 años o más de experiencia construyendo servicios en producción y pipelines de datos (por lotes y/o en tiempo real). * Amplia experiencia con Python o disposición para adquirirla rápidamente. * Experiencia práctica con al menos un sistema MPP (Spark, Trino, Redshift, etc.). * Experiencia práctica operando servicios en un entorno en la nube (preferiblemente AWS). **Valorable** * Terraform/CloudFormation u otras herramientas IaC. * ClickHouse o bases de datos analíticas similares. * Experiencia con herramientas de calidad/observabilidad de datos. Su principal foco será la construcción y operación de diversos componentes de la plataforma de datos (calidad de datos, pipelines de datos, infraestructura, monitorización), con oportunidades de contribuir a servicios API y herramientas analíticas impulsadas por LLM. Trabajará estrechamente con científicos de datos, ingenieros de aprendizaje automático y equipos de análisis para comprender sus necesidades, recopilar comentarios y mejorar la fiabilidad y usabilidad de la plataforma. A continuación se indican algunos de los proyectos en los que podría participar: * Adoptar la configuración de la plataforma de datos mediante IaC utilizando Terraform. * Participar en el desarrollo del marco de calidad de datos y promover su adopción dentro de la empresa. * Mejorar el autoservicio de BI mediante herramientas impulsadas por LLM. * Migrar cargas de trabajo por lotes a soluciones de transmisión para garantizar la entrega oportuna de los datos. **Beneficios** * Vacaciones ilimitadas: animamos firmemente a todos los empleados a tomar al menos 3 semanas al año. * Equipo totalmente remoto: elija dónde vivir. * Subsidio para trabajar desde casa: queremos que tenga los recursos necesarios para equipar su oficina en casa. * Portátiles Apple proporcionados a los nuevos empleados. * Presupuesto anual para formación y desarrollo: renovado cada año para cada empleado. * Licencia de maternidad y paternidad para empleados calificados. * Trabajar con personas inteligentes que le ayudarán a crecer y a tener un impacto significativo. * Salario base: $80 000–$120 000 USD, según conocimientos, habilidades, experiencia y resultados de las entrevistas. * Opciones sobre acciones: ofrecidas además del salario base. * Reuniones periódicas del equipo fuera de las instalaciones para conectar y colaborar. **Diversidad, equidad e inclusión en Constructor** En Constructor.io estamos comprometidos con cultivar un entorno laboral diverso, equitativo e inclusivo. Como empleador que ofrece igualdad de oportunidades, damos la bienvenida a personas de todos los orígenes y brindamos igualdad de oportunidades a todos los solicitantes, independientemente de su formación académica, diversidad de opiniones, raza, color, religión, género, expresión de género, orientación sexual, origen nacional, genética, discapacidad, edad, condición de veterano o pertenencia a cualquier otro grupo protegido. *Estudios han demostrado que las mujeres y las personas de color pueden ser menos propensas a solicitar empleos a menos que cumplan con todos los requisitos enumerados. Nuestro principal interés radica en encontrar al mejor candidato para el puesto. Le animamos a presentar su solicitud incluso si no cumple con todos los requisitos enumerados.*