No mundo em que vivemos atualmente, existem muitos dados circulando pela internet, porém somente com dados não é possível compreender certa situação. Assim, é preciso passar por um processo de coleta, tratamento e posteriormente análise de dados, para transformar em informações e conseguir compreender a situação por completo.
Dessa forma, uma ação muito importante que precisa ser feita na parte dos dados e que irá ser muito comentada durante este texto é a parte de limpeza de dados, em que é um processo essencial para preparar dados brutos. Assim, esta parte é muito importante, pois nos dados coletados pode conter dados faltantes, erros e influenciar de forma incorreta certo modelo de previsão ou análise de dados.
Assim, iremos falar de profissionais que estão envolvidos com essa parte de dados e muitas vezes as pessoas se confundem sobre o que cada uma das profissões fazem. Com isso, espero que com este texto possa ajudar quem possui dúvida com respeito às atribuições de cada profissão.
Estatístico
Sobre a estatística já foi falado um pouco no nosso blog: “Mas afinal, o que faz um estatístico?” e irei complementar com algumas outras informações.
O estatístico está envolvido em todas as partes da metodologia científica. Assim, consegue fazer a parte de amostragem, em que calcula o número de amostra desejado de acordo com o tamanho do erro, para depois poder coletar os dados. Sendo que a elaboração do questionário para a coleta é desenvolvida por estatísticos também, estando envolvidos em pesquisas de mercado e opinião pública, para uma diversidade de pesquisadores e de empresas.
Após a coleta dos dados, é preciso analisar e interpretar os dados, utilizando os testes mais adequados. Assim, fazendo conclusões e desenvolvendo relatórios explicando todos os métodos utilizados e apresentando gráficos e tabelas para facilitar a visualização dos dados. Dessa forma, com as análises é possível tomar decisões importantes e com um alto nível de confiabilidade, tentando ao máximo transmitir de forma clara e objetiva as informações obtidas.
Cientista de dados
Os cientistas de dados recebem uma quantidade enorme de dados, podendo estar em diversos formatos, entre eles: csv, xlsx, pdf ou também dados que não estão em formato legível para seres humanos apenas para máquinas, como por exemplo Bson. Tendo softwares diversos para a leitura dos dados, como por exemplo Rstudio, Python, mongodb. Assim, a estatística e a ciência de dados estão entrelaçadas.
Assim, os cientistas de dados recebem todos esses dados e utilizam da computação e da programação para limpar, tratar e organizar os dados, para dessa forma conseguir analisar da melhor maneira. Além disso, estes dados “limpos” podem ser usados para realizar a modelagem de previsão de novas observações. Após este período inicial de análise, é preciso que o trabalho seja automatizado e levar as informações mais relevantes para o pesquisador ou para a empresa interessada.
Dessa forma, o cientista de dados precisa ter conhecimento de diversas áreas do conhecimento, entre elas está, estatística, matemática, machine learning e ciência da computação. Assim esta área vem crescendo cada vez mais, por conta da quantidade de dados que está sendo gerado no mundo atual.
Analista de dados
O analista de dados são os responsáveis pelo trabalho de limpeza, organização e processamento dos dados para construir relatórios, gráficos, dashboards e processos de análise. Assim, deve dominar bem técnicas para realizar as ações e ferramentas como Power BI, Python, R e SQL.
Dessa forma, nesta profissão é preciso ter conhecimento sobre bancos de dados (planilhas em que os dados estão localizados), para poder manipulá-lo e armazenar resultados. Assim, os analistas de dados precisam dominar as visualizações profissionais e que transmitam o resultado da análise, por meio do Power BI, por exemplo.
Engenheiro de dados
Os engenheiros de dados tendem a trabalhar em projetos ligados à infraestrutura de dados. Assim, o profissional planeja e executa a pipeline de dados, garantindo que os dados estejam disponíveis para uso com segurança e dentro dos padrões.
Para lidar com dados que podem ter registros que podem ter registros duplicados ou com algum erro, o engenheiro de dados deve contar com ferramentas para extrair, transformar e carregar dados. Dessa forma, é preciso ter domínio sobre sistemas operacionais. Além disso, os engenheiros de dados geralmente coletam dados de diferentes fontes, transformar os dados em diferentes formatos e, em seguida, entregam os dados para cientista de dados ou Analista de dados.
REFERÊNCIAS:
Autor: Rubens Cortelazzi Roncato
