O Desafio do Big Data: Uma Análise da Tecnologia NoSQL

Estamos todos a viver numa era de enormes stocks de dados, mas o Big Data e a sua tecnologia subjacente NoSQL estão também a tornar-se uma palavra de ordem na Internet. Para empresas globais da Internet como a Google, o Facebook e a IBM, a utilização de NoSQL, um inventário de bases de dados não relacionais altamente escaláveis, ultrapassou frequentemente a das bases de dados relacionais. De facto, no processo de alguns dos problemas dos dados massivos e dos dados semi-estruturados, nasceu uma série de novos produtos de bases de dados, a que chamamos NoSQL.

Nos dias 26 e 27 de abril de 2013, realizou-se no Renaissance Beijing Renaissance Hotel a Cimeira Global de Tecnologia de Big Data 2013, organizada pela marca WOT (World Of Tech) do 51CTO Media Group, onde foi apresentada uma vasta gama de produtos NoSQL, com diferentes caraterísticas e propostas de valor, o que dificulta muitas vezes a escolha. O repórter falou com Ming Lei, um especialista em desenvolvimento de software de Silicon Valley, que trabalhou na Oracle, Microsoft e Google, e analisou o NoSQL na vida real, resumindo alguns pontos para referência dos internautas.

c

Sr. Ming Lei (à esquerda)

Sistemas distribuídos e NoSQL

Um sistema distribuído é composto por muitas camadas diferentes, incluindo a camada de aplicação, a camada de dados, a camada de desempenho, etc. Agora estamos falando principalmente sobre a camada de aplicação e a camada de dados, que são ambos componentes importantes de um sistema distribuído, a camada de aplicação geralmente não tem estado, e a camada de dados está constantemente fazendo aritmética para salvá-lo. A camada de dados é a camada mais difícil e mais profunda de um sistema distribuído.

O ponto de vista de Ming Lei é que o NoSQL é uma memória num sistema distribuído, é um tipo de sistema distribuído. Ou melhor, é um nível de sistema distribuído.

Comparação da cache NoSQL com a cache CDN

No lado NoSQL da cache é representado pelo Memcached, a cache NoSQL e a cache CDN, a maior diferença é que a cache NoSQL refere-se à camada de dados da cache, não à camada de aplicação da cache, não à camada de rede da cache, pelo que a sua cache é mais primitiva. Por exemplo, se a transação na lógica da aplicação não é o resultado final para o utilizador ver, então fazemos cache na camada de rede, a tecnologia mais comum é chamada CDN, que se chama ContentDeliveryNetwork, geralmente no fim da rede, perto do fim da rede do utilizador, em alguns servidores Web para armazenar em cache algumas das páginas Web específicas.