**Introduction** Uma carreira em Consultoria IBM é baseada em relacionamentos de longo prazo e colaboração próxima com clientes em todo o mundo. Você trabalhará com visionários de diversos setores para aprimorar a jornada de nuvem híbrida e IA para as empresas mais inovadoras e valiosas do mundo. Sua capacidade de acelerar o impacto e promover mudanças significativas para seus clientes é possibilitada pelo nosso ecossistema de parceiros estratégicos e nossas robustas plataformas tecnológicas em todo o portfólio da IBM, incluindo Software e Red Hat. A curiosidade e a busca constante por conhecimento são a base para o sucesso na Consultoria IBM. Em sua função, você será incentivado a desafiar os padrões, investigar ideias fora da sua área de atuação e apresentar soluções criativas que resultem em impacto inovador para uma ampla rede de clientes. Nossa cultura de evolução e empatia se concentra em oportunidades de crescimento e desenvolvimento profissional a longo prazo, em um ambiente que acolhe suas habilidades e experiências únicas. **Your role and responsibilities** As Data Engineer at IBM you will harness the power of data to unveil captivating stories and intricate patterns. You'll contribute to data gathering, storage, and both batch and real-time processing. Collaborating closely with diverse teams, you'll play an important role in deciding the most suitable data management systems and identifying the crucial data required for insightful analysis. As a Data Engineer, you'll tackle obstacles related to database integration and untangle complex, unstructured data sets. In this role, your responsibilities may include: * Implementing and validating predictive models as well as creating and maintain statistical models with a focus on big data, incorporating a variety of statistical and machine learning techniques * Designing and implementing various enterprise seach applications such as Elasticsearch and Splunk for client requirements * Work in an Agile, collaborative environment, partnering with other scientists, engineers, consultants and database administrators of all backgrounds and disciplines to bring analytical rigor and statistical methods to the challenges of predicting behaviors. * Build teams or writing programs to cleanse and integrate data in an efficient and reusable manner, developing predictive or prescriptive models, and evaluating modeling results **Required technical and professional expertise** Buscamos profissionais com experiência com Data engineer esteira de AWS com o conhecimento técnico de: * Plataformas de dados - AWS * Projetar e desenvolver pipelines de dados: criar pipelines robustos para processar, transformar dados e ingerir dados derivados da origem ao destino. * Implementar processos ETL/ELT * Desenvolvimento de funções Lambda para desenvolvimento de APP * CI/CD, IaC * Proficiência com ferramentas AWS: experiência demonstrável em AWS Glue, AWS Lambda, Amazon Athena, Amazon DynamoDB, Amazon Cloudwatch, Amazon SNS e AWS Step Functions. * Grande experiência com linguagens de programação como Python, Pyspark. * Conhecimento profundo de tecnologias de banco de dados e tecnologias de ecossistema de Big Data: AWS RDS. * Experiência com AWS Data Lakes * Grande conhecimento em pipeline de implantação usando AWS Cloud Formation • Grande conhecimento em Git. * Grande conhecimento em SQL. IBM is committed to creating a diverse environment and is proud to be an equal-opportunity employer. All qualified applicants will receive consideration for employment without regard to race, color, religion, sex, gender, gender identity or expression, sexual orientation, national origin, caste, genetics, pregnancy, disability, neurodivergence, age, veteran status, or other characteristics. IBM is also committed to compliance with all fair employment practices regarding citizenship and immigration status.