SMX Services & Consulting, Inc. is seeking a Data Engineer to build the ecosystem's infrastructure. The role involves designing and deploying automated ingestion pipelines that extract physical records from the bank's server to the cloud environment with minimal latency and ensuring event flow operates with 100% certainty from Week 1.
Responsibilities:
- Construir el "Músculo" del ecosistema
- Diseñar y desplegar el pipeline de ingesta automatizada que extrae los expedientes físicos desde el servidor del banco hasta el entorno en la nube, activando la orquestación tecnológica con una latencia mínima y garantizando que el flujo de eventos funcione con un 100% de certeza desde la Semana 1
Requirements:
- Diseño y configuración de infraestructuras basadas en eventos utilizando Azure Event Grid para detectar el ingreso de documentos (PDFs nativos) y activar automáticamente los entornos de ejecución
- Desarrollo de flujos de ingesta automatizada mediante Azure Logic Apps (o Azure Functions)
- Experiencia sólida en conexiones seguras a repositorios locales, específicamente conectando la nube con servidores FTP / SFTP (Agente 0) utilizando credenciales seguras
- Configuración y orquestación del almacenamiento temporal en Azure Blob Storage, asegurando que los PDFs y los Gemelos Digitales (JSON) transiten de forma eficiente por el embudo de entrada