Ciência de dados com Python
- #Python
Vamos falar um pouco de Big Data e Inteligência Analítica
E analise de interpretação de grandes volumes de dados em variadas fontes, utilizando métodos quantitativos e qualitativos com ferramentas cada vez mais avançadas, para obter os dados necessário para seu fins de uso.
Separar em dois bloco:
- BIG DATA
- INTELIGÊNCIA ANALÍTICA
Big Data
O que é Big Data?
E tudo aquilo que está disponível na rede mundial de computadores, ou seja, são um conjunto de informações que estão interligados entre si, que são guardados em servidores de banco de dados. Como podemos acessar de qualquer lugar do mundo para coletar essas informações.
Os 5V's do Big Data
1- Volume
É o ponto de partida, todos dados gerado no dia, oferece um imenso volume de informações.
2- Velocidade
Os dados são armazenados, baixados e transferidos em uma velocidade surpreendente, conforme o conteúdo sendo atualizado e expandido em tempo real.
3- Variedade
Os dados são criados com diferentes formatos, tamanhos, cores, linguagem e estruturas de vídeo, planilhas e imagens. É não são homogêneos.
4- Veracidade
É um conjunto de dados estatísticos de uma fonte aonde são coletado com confiabilidade, para mitigar os dados em uma determinada tomada de decisão.
5- Valor
É a parte mais substancial que pode ser encontrado no big data, agregar valor ao cliente de uma forma como dados, otimizando processos e melhorando o desempenho de uma maquina ou negócios.
Inteligência Analítica
O que é Inteligência Analítica?
O conceito de inteligência analítica (termo inglês, analytics) é um campo multidimensional e abrangente, com técnicas matemáticas, estatística, machine learning e modelagem preditiva.
Com computadores potentes para armazenar grandes quantidades de dados, e dispondo de algoritmos para gerar rápidos insights (compreensão súbita de alguma coisa) e tornando decisões baseadas em fatos.
Os 3 métodos analíticos mais usados na inteligência analítica
- Estatística descritiva
- Análise preditiva
- Análise prescritiva
Estatística descritiva - é a descrição de dados a fim de entender um fenômeno do presente. Buscando todas as análises quantitativas de dados.
Análise preditiva - trabalha com dados olhando para o futuro, analisando as relações entre causas e efeitos e identificar padrões e correlações entre os dados que indiquem a probabilidade de acontecimentos futuros.
Análise prescritiva - ela é a partir das análises descritiva e preditiva, para prescrever medidas e estratégias para os cenários analisados, dando um subsídio à tomada de decisões e oferecer resposta em tempo real.
As ferramentas mais usadas por profissional de Big Data e Inteligência Analítica
- Power BI
- Tableau
- Anaconda
- Splunk
