<img src="https://secure.leadforensics.com/77233.png" alt="" style="display:none;">

Carreiras

É mais do que um trabalho. É trabalhar com um propósito.

Engenheiro de Dados

Reportando-se ao Diretor de Engenharia de Dados, a Blackline Safety está procurando um Engenheiro de Dados para ajudar a construir e impulsionar nossa Plataforma de Dados Blackline, focada em promover análises e inovação. Contamos com um sistema de segurança conectado de nível internacional e estamos construindo uma plataforma de dados de nível internacional à altura dele.

Você será responsável por criar tarefas de streaming e transformação de dados em tempo real usando Java/Scala na plataforma EMR-Spark e tecnologias de Big Data de última geração.
As responsabilidades incluem o desenvolvimento, a construção e a otimização de nossa arquitetura de pipeline de dados nova e existente, voltada para clientes internos e externos. O pipeline precisa ser escalável, robusto, repetível e utilizar as melhores e mais recentes práticas do setor em Big Data, CI/CD e DataOps. Você trabalhará na expansão da plataforma de dados Blackline ao lado das equipes de Produto, Arquitetura e Engenharia, focadas em decisões, produtos e análises orientadas por dados. A arquitetura de dados, a estrutura e a pilha de tecnologias incluem IoT, EC2, RDS MySQL, RedShift, Spark, EMR, Kafka, Kinesis (Streams, Firehose, Analytics), Lambda, Datalakes, Deltalakes, Event bus, DataDog, pipelines de CD/CI, CloudFormation, Jenkins, Terraform, Python, Java e muito mais.

ID DA VAGA: PSDATENG

Quem é você?

Você acredita que o big data ajuda as empresas a resolver problemas do mundo real. Você tem aptidão para engenharia, arquitetura de big data e manipulação de diversas estruturas de dados, incluindo, entre outras, armazenamento de dados, modelagem, análise e integrações a partir de várias fontes de dados. Você é curioso e inovador, não se limita a uma única ferramenta ou plataforma e é capaz de resolver problemas de maneira criativa. Você é proficiente em diferentes linguagens de programação, como SQL, Java, Python, Scala etc., e aspira aprender formas alternativas de resolver problemas. Você é apaixonado por tudo que envolve dados e busca aproveitar dados, análises e insights para resolver problemas de negócios. Você é um profissional que trabalha em equipe, é automotivado, adora colaborar, é criativo e está animado para fazer a diferença para as pessoas e os produtos consumidos no mundo real.

Requisitos

  • Mais de 5 anos de experiência na função de engenheiro de dados, com pós-graduação em Ciência da Computação, Estatística, Informática, Sistemas de Informação ou outra área quantitativa.
  • Experiência na criação, arquitetura e otimização de pipelines de dados de “big data”, utilizando uma combinação de Java, Scala, Python, Ruby, Glue, Sagemaker, EMR, Lambda, Step Function, CloudFormation e Terraform.
  • Experiência com ferramentas de big data: Hadoop, Spark, Flink, Kafka, DataDog, EventBus; serviços em nuvem da AWS: EC2, EMR, RDS, Redshift, Redshift Spectrum; chamadas de API; geração de API
  • Possui ampla experiência na concepção de estruturas ETL voltadas para o Apache Spark Streaming e Batch
  • Possui ampla experiência na integração de dados provenientes de diversas fontes e formatos no datalake, em formatos estruturados como Parquet e arquivos CSV.
  • Experiência prática com a implementação de tecnologias de armazenamento de dados em nuvem (Snowflake, Redshift) e Big Data, incluindo conhecimento dos princípios de DWH relacionados a fatos, dimensões, carregamentos incrementais, CDC e SCD.
  • Ampla experiência em desenvolvimento e manutenção de pipelines de streaming Kafka.
  • Um histórico de sucesso na manipulação, processamento e extração de valor de grandes conjuntos de dados desconectados, utilizando metodologias ETL/ELT e tecnologias como Deltalake, Databricks, Matillion etc., além da integração de dados de silos a uma fonte de dados mestre
  • Possui ampla experiência na criação de tarefas de transformação em Spark para lidar com formatos complexos de dados JSON aninhados e na junção de dados em fluxo com arquivos Parquet no Datalake.
  • Bons conhecimentos em administração de Datalake utilizando o Lake Formation e as funções.
  • Oferecer suporte a cargas de trabalho de produção (em S3, Hadoop, Hive, Spark, Flink, Kafka etc.) e criar processos que abranjam a transformação de dados, estruturas de dados, metadados, dependências e gerenciamento de cargas de trabalho.
  • Possui ampla experiência na tradução de requisitos de negócios e na implementação de verificações de qualidade de dados (DQ) e melhores práticas para garantir uma compilação e implantação sem interrupções.
  • Experiência na criação e operação de sistemas distribuídos de alta disponibilidade para extração, ingestão e processamento de grandes conjuntos de dados
  • Experiência na criação incremental de produtos de dados e na integração e gestão de conjuntos de dados provenientes de várias fontes
  • Experiência em liderança técnica e orientação de outros engenheiros sobre as melhores práticas na área de engenharia de dados
  • Bons conhecimentos práticos sobre filas de mensagens na AWS, processamento de fluxos e repositórios de dados de “big data” altamente escaláveis.

Sobre a Blackline Safety

A Blackline Safety é líder mundial no desenvolvimento e na fabricação de produtos de segurança conectados sem fio. Oferecemos o portfólio mais amplo e completo disponível no setor. Nossos produtos são projetados para salvar vidas e monitoramos o pessoal que trabalha sozinho em áreas populosas, instalações internas complexas e regiões remotas do nosso planeta. Os produtos da Blackline são utilizados para garantir a segurança das pessoas em caso de quedas, falhas no check-in, desmaios e exposição a gases explosivos ou tóxicos. Nossas atividades de design, desenvolvimento, vendas, marketing, suporte e produção são todas realizadas internamente em nossa sede em Calgary, AB. A Blackline Safety é uma empresa de capital aberto (TSX: BLN). Para saber mais sobre nossa empresa, visite www.blacklinesafety.com

A Blackline Safety é impulsionada pela diversidade de nossos talentosos funcionários. Somos uma empresa que promove a igualdade de oportunidades. Consideramos todos os candidatos, independentemente de idade, religião, raça, cor, ascendência, gênero, identidade ou expressão de gênero, deficiência, nacionalidade, raça ou orientação sexual. Incentivamos vivamente todas as pessoas a se candidatarem a vagas que correspondam às suas paixões. Venha fazer parte da nossa equipe inclusiva e comece a colaborar conosco em projetos empolgantes!

Inscreva-se hoje mesmo

Para se candidatar a esta vaga, preencha o seguinte formulário: