Vaga de Engenheiro de Dados em São Paulo - SP - Fifteen Hundred C E Ltda

Empresa que transforma dados em resultados para os negócios, Mais de 20 anos de experiência em Business Inteligence. Soluções com Inteligencia Artificial Investe em pesquisa.

Empresa Inovadora preocupada com o desenvolvimento profissional de seus colaboradores

Estamos em busca de Engenheiro de Dados. Atividades: - Arquitetura de orquestração e ingestão de dados estruturados e não-estruturados de diversas fontes de dados (bancos relacionais, noSQL, queues, hdfs, cloud storage, apis, arquivos, etc) de maneira síncrona e assíncrona; - Modelagem física e lógica de estrutura de dados; - Tuning de banco de dados, estratégias de indexação e consultas SQL/noSQL; - Definir melhores práticas no que se refere à manipulação dos dados em todo o seu ciclo de vida para garantir integridade, confidencialidade, segurança e eficiência; ·-Documentar os processos e manter o catálogo de dados.

- SQL e Oracle; - NoSQL e MongoDB; - Full-text search e ElasticSearch; - Plataforma AWS (S3, Glue, DynamoDB, Athena); - Interagir com pessoas de diferentes áreas do conhecimento e especificar seus casos de uso; - Proficiência em inglês; - Metodologia ágil. Conhecimentos desejáveis - Experiência com domínios da área da saúde: EHR, DICOM, deidentificação e anonimização; - Integração e monitoramento de ETLs: Ensemble, Cloudera, Apache AirFlow, AWS Glue ou similares; - Dados estruturados em formatos otimizados para processamento em massa em plataforma Hadoop: ORC e Parquet; - Processamento massivo de dados em cloud, serviços de data flow como streaming e mensagerias: conceito de MapReduce, Hadoop, Spark, etc.