O que é Big Data? O básico – Significado e uso

Atualizado em June 2025: Pare de receber mensagens de erro que tornam seu sistema mais lento, utilizando nossa ferramenta de otimização. Faça o download agora neste link aqui.

1. Faça o download e instale a ferramenta de reparo aqui..
2. Deixe o software escanear seu computador.
3. A ferramenta irá então reparar seu computador.

O Big Data não é nada de especial. O hype em torno dele é uma coisa bem grande para confundi-lo. Este artigo dá uma olhada no que é Big Data. Ele também contém um exemplo de como o NetFlix usou seus dados, ou melhor, Big Data, para melhor atender às necessidades de seus clientes.

O que é Big Data

Os dados que estavam nos servidores da sua empresa eram apenas dados até ontem – classificados e arquivados. De repente, a gíria Big Data ficou popular, e agora os dados na sua empresa são Big Data. O termo cobre todos e cada pedaço de dados que sua organização armazenou até agora. Ele inclui dados armazenados em nuvens e até mesmo as URLs que você marcou. Sua empresa pode não ter digitalizado todos os dados. Você pode não ter estruturado todos os dados já. Mas então, todos os dados digitais, documentos, estruturados e não estruturados com sua empresa agora são Big Data.

Em resumo, todos os dados – categorizados ou não – presentes nos seus servidores são coletivamente chamados de BIG DATA. Todos esses dados podem ser usados para obter resultados diferentes usando diferentes tipos de análise. Não é necessário que todas as análises utilizem todos os dados. As diferentes análises usam diferentes partes dos grandes dados para produzir os resultados e as previsões necessárias.

Big Data são essencialmente os dados que você analisa para resultados que você pode usar para previsões e outros usos. Ao usar o termo Big Data, de repente sua empresa ou organização está trabalhando com tecnologia da informação de alto nível para deduzir diferentes tipos de resultados usando os mesmos dados que você armazenou intencionalmente ou não intencionalmente ao longo dos anos.

Quão grande é o Big Data



Essencialmente, todos os dados combinados são Big Data, mas muitos pesquisadores concordam que Big Data – como tal – não pode ser manipulado usando planilhas normais e ferramentas regulares de gerenciamento de banco de dados. Eles precisam de ferramentas especiais de análise como o Hadoop (vamos estudar isso em um post separado) para que todos os dados possam ser analisados de uma só vez (podem incluir iterações de análise).

Ao contrário do exposto acima, embora eu não seja um especialista no assunto, eu diria que dados com qualquer organização – grande ou pequena, organizada ou não organizada – são Big Data para essa organização e que a organização pode escolher suas próprias ferramentas para analisar os dados .

Normalmente, para analisar dados, as pessoas costumavam criar conjuntos de dados diferentes com base em um ou mais campos comuns para que a análise se torne fácil. No caso de Big Data, não há necessidade de criar subconjuntos para analisá-los. Agora temos ferramentas que podem analisar dados independentemente do seu tamanho. Provavelmente, estas ferramentas categorizam os dados mesmo quando estão a analisá-los.

Acho importante mencionar duas frases do livro Big Data de Jimmy Guterman:

Big Data:
quando os requisitos de tamanho e desempenho para o gerenciamento de dados se tornarem fatores de projeto e decisão significativos para implementar um sistema de gerenciamento e análise de dados

.

-and-

Para algumas organizações, enfrentar centenas de gigabytes de dados pela primeira vez pode acionar a necessidade de reconsiderar as opções de gerenciamento de dados. Para outras, podem ser necessárias dezenas ou centenas de terabytes antes que o tamanho dos dados se torne uma consideração significativa.

Então você vê que tanto o volume quanto a análise são uma parte importante do Big Data.

Ler
: O que é Data Mining?

Conceitos de Big Data

Este é outro ponto em que a maioria das pessoas não concorda. Alguns especialistas dizem que os Conceitos de Big Data são três V’s:

1. Volume
2. Velocidade
3. Variedade

Alguns outros adicionam mais alguns V’s ao conceito:

1. Visualização
2. Veracidade (Confiabilidade)
3. Variabilidade e
4. Valor

Vou cobrir os conceitos de Big Data em um artigo separado, já que este post já está ficando grande. Na minha opinião, os primeiros três V’s são suficientes para explicar o conceito de Big Data.

Exemplo de Big Data – Como o NetFlix o usou para corrigir seus problemas

Em 2008, houve uma queda na NetFlix devido à qual muitos clientes foram deixados no escuro. Enquanto alguns ainda podiam acessar os serviços de streaming, a maioria deles não podia. Alguns clientes conseguiram obter os seus DVDs alugados, enquanto outros falharam. Um post no Wall Street Journal diz que o Netflix tinha acabado de começar o streaming on-demand.

A interrupção fez a gerência pensar sobre os possíveis problemas futuros e o daqui; ele virou-se para Big Data. Ele analisou áreas de alto tráfego, pontos suscetíveis, e throughput de rede, etc. usando esses dados e trabalhou sobre ele para reduzir o tempo de inatividade se um problema futuro surgir como ele se tornou global. Aqui está o link para o Blog do Wall Street Journal, se você quiser conferir os exemplos de Big Data.

O acima resume o que é Big Data na linguagem de um leigo. Você pode chamá-lo de uma introdução muito básica. Pretendo escrever mais alguns artigos sobre fatores associados como – Conceitos, Análise, Ferramentas, e usos de Big Data, Big Data 3 V’s, etc. Enquanto isso, se você gostaria de adicionar alguma coisa ao acima, por favor comente e compartilhe conosco.

RECOMENDADO: Clique aqui para solucionar erros do Windows e otimizar o desempenho do sistema