Junior
Mantiene temas y consumidores existentes, ajusta configuraciones y atiende alertas.
Ingeniero de Datos en Streaming / Tiempo Real para tu equipo
Un ingeniero que procesa datos según llegan, con Kafka, Flink o Spark Streaming, para alertas, paneles y decisiones en segundos y no al día siguiente.
Tecnologías y competencias habituales
- Kafka
- Flink
- Spark Streaming
- Kinesis
- Pub/Sub
- ClickHouse
También lo buscarás como streaming data engineer, ingeniero Kafka, especialista en Flink y ingeniero de datos en streaming.
Qué hace un ingeniero de datos en tiempo real
Diseña sistemas donde el dato fluye sin pararse. Monta el bus de eventos con Kafka, Kinesis o Pub/Sub, procesa con Flink o Spark Streaming y deja el resultado en almacenes pensados para consulta rápida, como ClickHouse. Gestiona orden, duplicados, retrasos y recuperación tras fallos.
Cuándo necesitas uno
- Necesitas detectar fraude, averías o anomalías mientras ocurren y no en un informe nocturno.
- Tus dispositivos o aplicaciones generan miles de eventos por segundo y el sistema actual no aguanta.
- Tienes un panel de operaciones que debe mostrar el estado real y llega con horas de retraso.
Qué distingue a un buen ingeniero de datos en tiempo real
- Entiende la semántica de entrega de los mensajes y diseña procesos idempotentes para tolerar reintentos.
- Maneja el tiempo de evento frente al de proceso, las ventanas y los datos que llegan tarde.
- Dimensiona particiones, retención y consumidores, y sabe diagnosticar el retraso acumulado de un consumidor.
- Gestiona esquemas y su evolución con registro de esquemas, sin romper a los consumidores.
- Decide cuándo el tiempo real aporta valor y cuándo basta una carga frecuente por lotes, que cuesta menos.
Junior, middle o senior
Middle
Diseña una canalización de streaming completa con su recuperación, su monitorización y sus pruebas.
Senior
Define la arquitectura orientada a eventos de la empresa, la gobernanza de esquemas y la convivencia con los procesos por lotes.
Dos formas de trabajar
On Demand
Se suma a tu equipo el tiempo que lo necesites.
Try & Hire
Trabaja contigo y, tras un tiempo, puedes incorporarlo a tu plantilla sin costes.
¿Necesitas un equipo entero? Mira los Agile Squads.
Preguntas frecuentes
¿Hace falta de verdad tiempo real?
A menudo no. Si la decisión no cambia por tener el dato en segundos en lugar de en una hora, una carga frecuente por lotes es más simple y barata. El tiempo real compensa en fraude, alertas operativas y experiencias de usuario en vivo.
¿Kafka o un servicio gestionado de la nube?
Kafka, ya sea autogestionado o ofrecido como servicio, es el estándar y funciona en cualquier nube. Kinesis y Pub/Sub son más simples si estás atado a AWS o Google Cloud. Importa más el equipo que lo opera que la marca.
¿Flink o Spark Streaming?
Flink está diseñado para eventos con baja latencia y estado complejo. Spark Streaming encaja si ya usas Spark para los procesos por lotes y aceptas latencias algo mayores. Se elige según la latencia requerida y el equipo.
¿Qué diferencia hay con un especialista en arquitectura orientada a eventos?
El especialista EDA diseña cómo se comunican los servicios mediante eventos. El ingeniero de streaming procesa y analiza esos flujos de datos a gran escala. En proyectos pequeños los hace la misma persona.
¿Puedo incorporarlo después a mi plantilla?
Sí. Con la modalidad Try & Hire trabaja contigo y, tras un tiempo, puedes incorporarlo a tu plantilla sin costes.
¿Cómo se factura?
Pagas por el trabajo realmente efectivo: solo las horas trabajadas. La selección, las bajas, las vacaciones y las sustituciones corren de nuestra cuenta.
¿Trabaja en remoto o en nuestras oficinas?
Como lo necesite tu equipo: en remoto, en híbrido o presencial, en España.
Cómo llega un perfil a tu equipo
Vendemos calidad: preferimos presentarte a una persona que encaja antes que a cinco que no.
De cada 20 candidatos que evaluamos, te presentamos a uno.
Nos cuentas qué necesitas
El perfil, el nivel, las tecnologías y cómo trabaja tu equipo.
Validamos a la persona
Nuestro equipo técnico revisa su conocimiento real, también cómo trabaja con IA. De cada 20 candidatos, pasa uno.
Te la presentamos
Conoces a la persona antes de decidir. El 93 % de nuestros clientes contrata a la primera que le presentamos.
Empieza en tu equipo
Pagas solo las horas trabajadas. De la selección, las bajas, las vacaciones y las sustituciones nos ocupamos nosotros.
Suele trabajar con
Ver los 16 perfiles de datos y big dataData Engineer
- Apache Spark
- Kafka
- Airflow
- dbt
Especialista EDA (Event-Driven)
- Apache Kafka
- RabbitMQ
- ActiveMQ
- Amazon SQS
Desarrollador Backend Java
- Java
- Spring
- Spring Boot
- JBoss
Data Analyst
- SQL
- Excel avanzado
- Power BI
- Tableau
Data Scientist
- Python
- R
- Pandas
- Scikit-learn
Experto BI (Business Intelligence)
- Microsoft SSAS/SSIS/SSRS
- MicroStrategy
- IBM Cognos
- SAS
Administrador de BBDD Relacionales (DBA)
- Oracle
- Microsoft SQL Server
- PostgreSQL
- MySQL
Database Developer
- Stored Procedures
- PL/SQL
- T-SQL
- Optimización