Contato
Agradecemos seu interesse! No momento, não estamos aceitando novas candidaturas para esta vaga, mas temos várias outras oportunidades esperando por você.
05/02/2022 | 1 Vaga
Descrição
Responsabilidades:
Irá atuar diretamente responsáveis pelos produtos para entender os requisitos, fornecer orientação sobre opções adequadas e ajudá-los a impulsionar as soluções de engenharia de dados em seus produtos. Terá como responsabilidade criar cargas ETL com base em requisitos definidos em conjunto ao longo do pipeline de dados, incluindo ingestão, validação, transformação e armazenamento dos dados de vários sistemas de origem no data lake de acordo com a finalidade do uso. Deverá trabalhar em estreita colaboração com os desenvolvedores de backend, grupo de arquitetura e cientista de dados e TI . Definir e criar pipelines de dados para produtos de analytics de dados – usar estruturas padronizadas (p.ex: Apache Airflow) para essa finalidade. Auxiliar na correção de bug e análise de performance ao longo do pipeline de dados. Fornecer expertise em SQL, data warehouses e data lakes à equipe de desenvolvimento. Seguir uma metodologia de desenvolvimento ágil.
Esperamos que você tenha:
Formação em ciência da computação, engenharia, matemática, estatística ou área relacionada
Experiência em gestão de dados.
Sólidas habilidades analíticas, comunicação, documentação e atitude prática
Experiência em ferramentas de ETL (Pandas, NumPy)
Experiência na linguagem de programação Python
Manipulação de arquivos com extensões do tipo Parquet, AVRO, ORC e etc.
Experiência com computação distribuída e Cloud Computing (Hadoop, Dask, Hive, Spark, EMR etc.)
Além disso, será incrível se você tiver:
Experiência em linguagens de programação
Shell Script, R, Terraform
Ferramentas de data pipeline como NIFi, Sqoop e etc.
Tecnologias em nuvem (Google, Azure, AWS).
Conhecimento em arquitetura Lambda
Nossos benefícios:
Assistência médica;
Day off de aniversário;
Horário Flexível e home office;
Casual every day (incluindo bermuda para homens);
Vale Transporte (quando voltarmos para o escritório);
Restaurante Interno;
Seguro de Vida;
Acesso ao conteúdo digital completo do Estadão;
Descontos exclusivos em instituições de ensino.
Irá atuar diretamente responsáveis pelos produtos para entender os requisitos, fornecer orientação sobre opções adequadas e ajudá-los a impulsionar as soluções de engenharia de dados em seus produtos. Terá como responsabilidade criar cargas ETL com base em requisitos definidos em conjunto ao longo do pipeline de dados, incluindo ingestão, validação, transformação e armazenamento dos dados de vários sistemas de origem no data lake de acordo com a finalidade do uso. Deverá trabalhar em estreita colaboração com os desenvolvedores de backend, grupo de arquitetura e cientista de dados e TI . Definir e criar pipelines de dados para produtos de analytics de dados – usar estruturas padronizadas (p.ex: Apache Airflow) para essa finalidade. Auxiliar na correção de bug e análise de performance ao longo do pipeline de dados. Fornecer expertise em SQL, data warehouses e data lakes à equipe de desenvolvimento. Seguir uma metodologia de desenvolvimento ágil.
Esperamos que você tenha:
Formação em ciência da computação, engenharia, matemática, estatística ou área relacionada
Experiência em gestão de dados.
Sólidas habilidades analíticas, comunicação, documentação e atitude prática
Experiência em ferramentas de ETL (Pandas, NumPy)
Experiência na linguagem de programação Python
Manipulação de arquivos com extensões do tipo Parquet, AVRO, ORC e etc.
Experiência com computação distribuída e Cloud Computing (Hadoop, Dask, Hive, Spark, EMR etc.)
Além disso, será incrível se você tiver:
Experiência em linguagens de programação
Shell Script, R, Terraform
Ferramentas de data pipeline como NIFi, Sqoop e etc.
Tecnologias em nuvem (Google, Azure, AWS).
Conhecimento em arquitetura Lambda
Nossos benefícios:
Assistência médica;
Day off de aniversário;
Horário Flexível e home office;
Casual every day (incluindo bermuda para homens);
Vale Transporte (quando voltarmos para o escritório);
Restaurante Interno;
Seguro de Vida;
Acesso ao conteúdo digital completo do Estadão;
Descontos exclusivos em instituições de ensino.
Requisitos
Área: Dados
Plataforma: Python
Especialidade: Big Data
Nível: Pleno
Contratação CLT.
Vagas Relacionadas
