13.431 Empregos para Apache Spark - Brasil

Overview

Somos especialistas em transformação tecnológica , unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 7.400 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1.000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.

Importante : se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

• Atuar como protagonista na transformação digital da empresa, contribuindo para a construção de soluções inovadoras em engenharia de dados em um ambiente colaborativo.
• Desenvolver e otimizar pipelines de dados utilizando Apache Spark, assegurando a eficiência no processamento e análise de grandes volumes de dados.
• Colaborar com equipes multidisciplinares para projetar, implementar e manter soluções de integração e manipulação de dados que impactem positivamente o negócio.
• Aplicar boas práticas de desenvolvimento de software, assegurando a qualidade, escalabilidade e manutenibilidade dos sistemas.
• Liderar iniciativas de melhoria contínua nos processos de engenharia de dados, orientando desenvolvedores juniores e promovendo uma cultura de aprendizado e excelência técnica.
• Realizar a coleta, transformação e análise de dados, garantindo a integridade e qualidade da informação.
• Manter e aprimorar continuamente os sistemas de dados existentes, buscando inovações e atualizações tecnológicas.

• Sólida experiência em desenvolvimento Java, com forte compreensão dos fundamentos de engenharia de dados.
• Experiência prática em Apache Spark, incluindo o desenvolvimento de trabalhos de ETL e análise de dados distribuídos.
• Conhecimento em bancos de dados relacionais e não-relacionais, bem como em ferramentas de gerenciamento de dados.
• Familiaridade com ferramentas de orquestração de dados, como Apache Airflow ou similar.
• Experiência com integração de APIs REST para consumo de dados externos.
• Compreensão de arquiteturas de dados em nuvem, preferencialmente em ambientes AWS ou Azure.
• Habilidade em trabalhar com equipes ágeis e metodologias Scrum/Kanban.
• Familiaridade com ferramentas de controle de versão, como Git e GitHub.

• Conhecimento em containers e orquestração, como Docker e Kubernetes.
• Experiência em framework de testes automatizados, como JUnit ou Mockito.
• Compreensão e aplicação de princípios de arquitetura como Data Lake e Data Warehouse.
• Conhecimento em cloud OCI (Oracle).
• Desejável conhecimento em práticas de Ciência de Dados e Machine Learning.
• Desejável familiaridade com ferramentas de visualização de dados (ex: Tableau, Power BI).

• Plano de saúde e odontológico;
• Vale alimentação e refeição;
• Auxílio-creche;
• Licença parental estendida;
• Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;
• Participação nos Lucros e Resultados (PLR);
• Seguro de Vida;
• Plataforma de aprendizagem contínua (CI&T University);
• Clube de descontos;
• Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;
• Curso gestante e parentalidade responsável;
• Parceria com plataformas de cursos online;
• Plataforma para aprendizagem de idiomas;
• E muitos outros

Mais detalhes sobre os nossos benefícios aqui:

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Assim, podemos garantir o suporte e as adaptações que você merece.

Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.

Responsibilities:

1. Data Support: Provide daily data extraction and processing services for projects initiated by business units and other operational teams.

2. Data Products: Develop and optimize data products (e.g., reports/dashboards) to monitor business performance and ensure operational continuity.

3. Data Auditing: Conduct daily performance calculations and data verification for business teams.

4. Metrics Framework:Collaborate with business units and operational teams to design and refine data metrics frameworks, addressing diverse analytical needs.

Basic Requirements:

1. Experience with data support;

2. Bachelor’s degree or higher is preferred;

3. Proficiency in SQL, Python, common data analysis tools, and office software.

4. Strong data sensitivity and ability to independently solve problems.

5. Excellent logical thinking, communication skills, and fast learning agility.

6. Detail-oriented, responsible, and team-oriented work ethic.

Responsibilities:

1. Data Support: Provide daily data extraction and processing services for projects initiated by business units and other operational teams.

2. Data Products: Develop and optimize data products (e.g., reports/dashboards) to monitor business performance and ensure operational continuity.

3. Data Auditing: Conduct daily performance calculations and data verification for business teams.

4. Metrics Framework:Collaborate with business units and operational teams to design and refine data metrics frameworks, addressing diverse analytical needs.

Basic Requirements:

1. Experience with data support;

2. Bachelor’s degree or higher is preferred;

3. Proficiency in SQL, Python, common data analysis tools, and office software.

4. Strong data sensitivity and ability to independently solve problems.

5. Excellent logical thinking, communication skills, and fast learning agility.

6. Detail-oriented, responsible, and team-oriented work ethic.

Responsibilities:

1. Data Support: Provide daily data extraction and processing services for projects initiated by business units and other operational teams.

2. Data Products: Develop and optimize data products (e.g., reports/dashboards) to monitor business performance and ensure operational continuity.

3. Data Auditing: Conduct daily performance calculations and data verification for business teams.

4. Metrics Framework:Collaborate with business units and operational teams to design and refine data metrics frameworks, addressing diverse analytical needs.

Basic Requirements:

1. Experience with data support;

2. Bachelor’s degree or higher is preferred;

3. Proficiency in SQL, Python, common data analysis tools, and office software.

4. Strong data sensitivity and ability to independently solve problems.

5. Excellent logical thinking, communication skills, and fast learning agility.

6. Detail-oriented, responsible, and team-oriented work ethic.

We are seeking a statistical expert with deep expertise in data analysis to contribute to the development of high-quality academic and training content.

The ideal candidate will have advanced knowledge in statistics and be able to bring practical insights from their domain expertise. They will ensure accuracy, relevance, and alignment with learning objectives while working closely with cross-functional teams.

• Develop, review, and validate data-related content, assessments, and training material.
• Ensure accuracy, clarity, and adherence to industry standards.
• Support in creating real-world problem statements, case studies, and project ideas.

Key qualifications include an advanced degree (Master's/PhD preferred) in a statistics discipline, proven expertise in the subject area with research/teaching experience, and strong communication and technical writing skills.

Responsibilities:

1. Data Support:
Provide daily data extraction and processing services for projects initiated by business units and other operational teams.

2. Data Products:
Develop and optimize data products (e.G., reports/dashboards) to monitor business performance and ensure operational continuity.

3. Data Auditing:
Conduct daily performance calculations and data verification for business teams.

4. Metrics Framework:
Collaborate with business