Você quer big data? Você não dá conta de big data…

Ecossistema F5 | 10 de outubro de 2016

A infraestrutura atual não consegue lidar com o crescimento explosivo previsto de dados, conexões e tráfego à medida que o mundo avança rumo à economia digital.

crescimento da IoT e do big data

Falamos sobre a economia digital, mas raramente nos aprofundamos no que isso realmente significa. Significa que documentos em papel e telefonemas estão sendo substituídos por trilhas de auditoria e e-mails. Significa que faturas e arquivos de clientes estão sendo gradualmente substituídos por recibos eletrônicos e registros em bancos de dados.

Nossa migração para os dados digitais um dia será vista como um marco histórico de impacto comparável à transição das tábuas de pedra para o papiro. A cada evolução nos métodos que nós, seres humanos, usamos para registrar dados, tornamos esse processo mais barato, rápido e eficiente. Isso significa que não estamos apenas criando dados, mas também acumulando-os em um ritmo nunca antes visto na história da humanidade.

Não há fim à vista. Os primeiros sinais da economia digital surgiram quando passamos a conseguir registrar enormes volumes de dados naqueles tão eficientes 1s e 0s. Mas o processo ainda era, em grande parte, manual. A inserção de dados e os arquivos de log eram responsáveis pela maior parte dos dados coletados nos primórdios da Internet.

Agora sabemos como coletar dados automaticamente. Com transistores minúsculos e assistência robótica, reduzimos o poder computacional de prédios inteiros ao tamanho da cabeça de um alfinete. E o colocamos em tudo. Lâmpadas. Relógios. Sensores de movimento. Câmeras. Filtros de água. Carros. Geladeiras. Relógios. Telefones. Ursinhos de pelúcia. Brinquedos.

Se existe algo que não esteja conectado à internet e, portanto, não faça parte da crescente Internet das Coisas, não sei o que seria. E sim, também já ouvi falar daquele brinquedo adulto. Não precisa compartilhar detalhes; afinal, este é um blog para todas as idades.

Crédito da foto: https://www.flickr.com/photos/jdlasica/4034430734/

Mas a existência não significa uso, e estamos apenas começando a vivenciar o crescimento explosivo das coisas. Isso significa que, nos próximos anos, haverá mais dispositivos na Internet. Muitos, muitos mais dispositivos, todos transmitindo e recebendo muito mais dados do que a Internet jamais viu. Projeções do setor estimam que haverá 50 bilhões de dispositivos conectados em todo o mundo até 2020 — ou 7 dispositivos para cada pessoa no planeta.

Consigo contar três dos meus dispositivos de onde estou sentado agora. E isso sem contar o restante da casa. Aqui estão algumas estatísticas úteis, caso uma olhada ao redor da sua própria mesa ainda não tenha convencido você.

carro conectado

Somente os carros estão se conectando às redes celulares mais rapidamente do que qualquer outro dispositivo, segundo estatísticas compiladas pela Chetan Sharma Consulting para o segundo trimestre deste ano. Considerando todas as operadoras dos EUA, cerca de 1,4 milhão de carros foram conectados às redes celulares no trimestre, em comparação com 1,2 milhão de celulares e menos de 900 mil tablets.

caminhão inteligente

Ao eliminar a condução humana de paleteiras nos centros de distribuição, a Giant Eagle aumentou a produtividadeentre 10% e 30%. Cada veículo possui sensores para coletar dados. E todos os dados — como o tamanho da carga coletada, o tempo necessário para entregá-la, a localização do veículo nas instalações e o tempo de inatividade do veículo — são enviados para o aplicativo Seegrid Supervisor.

geladeira conectada

A Chick-fil-A instalou sensores de temperatura em seus freezers e refrigeradores para garantir a segurança dos alimentos. Os métodos anteriores de monitoramento eram manuais e exigiam a verificação visual de cada termômetro, um processo que apresentava riscos consideráveis quando os restaurantes estavam fechados e não havia ninguém monitorando. Agora, os sensores funcionam 24 horas por dia e enviam relatórios a cada hora, podendo evitar um prejuízo estimado entre US$ 15.000 e US$ 20.000 com a reposição do estoque caso uma falha em um equipamento de refrigeração passe despercebida.

Tenho muitos outros exemplos, mas, a esta altura, está bem claro que big data é gerado, transmitido e armazenado a cada segundo de cada dia em todo o mundo. E uma parcela significativa desses dados não é voltada para o consumidor. É o que o setor chama de dados “industriais”, destinados, acima de tudo, ao monitoramento de operações e processos. Hoje, há milhões de sensores por toda parte, e cada um deles gera dados.

Muitos dados.

Há atualizações em segundo plano à medida que os dispositivos enviam informações, verificam se há novas instruções e trocam os dados coletados. Cada dispositivo tem um aplicativo com o qual se comunica diariamente. Esse aplicativo está em algum lugar, em um data center ou na nuvem. Não importa onde esteja hospedado; o importante é que ele existe. Isso porque há infraestrutura e serviços entre o dispositivo e esse aplicativo, e eles não estão preparados para o crescimento explosivo.

Não acredite apenas na minha palavra. Um artigo da Forbes citou uma pesquisa da Bain & Company realizada com 325 empresas globais e constatou que “59% acreditam não ter os recursos necessários para extrair insights de negócios relevantes de seus dados. Em outra pesquisa da Bain com 250 empresas, 85% afirmaram que precisarão fazer investimentos substanciais para atualizar sua plataforma de dados atual, o que inclui consolidar e limpar dados, simplificar o acesso e o gerenciamento de direitos, além de melhorar o acesso a fontes de dados externas.” [grifo meu]

a evolução dos usuários

No centro dessa explosão de dados (isso é “big data”, para quem está jogando bingo de jargões hoje. De nada) está, é claro, a plataforma de dados. Ou seja, o banco de dados — e há uma infinidade de comentários e análises de especialistas a favor e contra bancos de dados NoSQL (não relacionais), como MongoDB e Heroku, bem como a favor e contra bancos de dados SQL (relacionais), como Oracle, MySQL e Microsoft.

Mas o que muitas vezes é ignorado nas discussões sobre big data, dashboards e obtenção de insights operacionais é que existe toda uma infraestrutura que sustenta a escala e o acesso a essas fontes de dados. Poucos responsáveis por áreas de negócio ou executivos de alto escalão ficam debruçados sobre um teclado, escrevendo suas próprias consultas para extrair valor dos dados. Isso também é feito por aplicativos.

Se há uma verdade incontestável sobre a economia digital, provavelmente é esta: existe algum aplicativo responsável por controlar o acesso aos dados.

E esse aplicativo precisa de infraestrutura. Precisa de segurança, precisa de escalabilidade e, em um mundo onde as coisas não sabem ver as horas, precisa estar disponível 24 horas por dia.

A infraestrutura atual foi criada para a web. Na verdade, ela foi criada para pessoas e aplicativos. Ambos continuam sendo essenciais, mas agora temos o desafio adicional de lidar simultaneamente com os requisitos de escala, segurança e disponibilidade das coisas. Precisamos reavaliar o que isso significa para nossas redes, nossa infraestrutura e os processos operacionais que dimensionam e protegem os aplicativos e dispositivos que fazem a intermediação entre usuários e aplicativos. E, quando digo usuários, também me refiro a coisas e sistemas.

Precisamos repensar a forma como gerenciamos a autenticação e a autorização. Como priorizamos e processamos solicitações e respostas. E como protegemos nosso ativo empresarial mais crítico (os dados) para que não seja exposto à pessoa (ou coisa) errada.

Se quisermos lidar com “big data” e tudo o que isso implica, temos muito trabalho pela frente.

Compartilhar
Tags: 2016

Sobre o autor

Lori Mac Vittie
Lori Mac VittieEngenheiro Emérito e Evangelista-Chefe | F5

Lori MacVittie é engenheira distinta e evangelista-chefe no Escritório do CTO da F5, com ampla experiência em entrega de aplicações, estratégia de automação e infraestrutura. Ela é conhecida por transformar complexidade em clareza, seja definindo diretrizes para agentes de IA, analisando arquiteturas multinuvem frágeis ou investigando os limites de sistemas escaláveis. Ela acumula mais de trinta anos de experiência no setor, abrangendo desenvolvimento de aplicações, arquitetura de TI e operações de redes e sistemas. Antes de ingressar na F5, atuou como editora de tecnologia e recebeu diversos prêmios. MacVittie tem mestrado em Ciência da Computação e é uma autora prolífica, com publicações que abrangem segurança, nuvem e arquitetura empresarial. Ela também é uma entusiasta de jogos de tabuleiro e videogames, além de ter opiniões assumidamente fortes sobre queijos.

Mais publicações de Lori Mac Vittie

Publicações relacionadas no blog

Entrega e proteção de agentes de IA em fábricas de IA: F5 para a arquitetura de referência NVIDIA OpenShell para agentes de IA seguros
Ecossistema F5 | 21/10/2026

Entrega e proteção de agentes de IA em fábricas de IA: F5 para a arquitetura de referência NVIDIA OpenShell para agentes de IA seguros

As soluções da F5 ampliam a Arquitetura de Referência NVIDIA OpenShell para agentes de IA seguros.

Como medir – e minimizar – o custo total de propriedade do seu Kubernetes
Ecossistema F5 | 10/12/2020

Como medir – e minimizar – o custo total de propriedade do seu Kubernetes

O Kubernetes pode ser baixado e executado gratuitamente, mas sua manutenção está longe de não ter custos. Assim como outras grandes plataformas de código aberto que são “gratuitas” apenas em um sentido simplista, o Kubernetes quase certamente exigirá investimentos para ser implantado e operado.

As-Code: a pilha de TI contínua
Ecossistema F5 | 08/10/2018

As-Code: a pilha de TI contínua

Infraestrutura, configuração, pipeline, operações. De repente, tudo é “como código”. Lori MacVittie busca esclarecer a terminologia e identificar os diferentes componentes de uma stack contínua de TI.

O estado da entrega de aplicações em 2017: automação, APIs e DevOps
Ecossistema F5 | 17/04/2017

O estado da entrega de aplicações em 2017: automação, APIs e DevOps

Explore o relatório State of Application Delivery de 2017. Leia o blog retrospectivo da F5 sobre o início da ascensão das redes declarativas e dos pipelines de DevOps.

DevOps Summit: onde a rede foi convidada para a festa
Ecossistema F5 | 11/06/2015

DevOps Summit: onde a rede foi convidada para a festa

No DevOps Summit NY, falou-se muito não apenas sobre DevOps, mas também sobre contêineres, IoT e microsserviços. As sessões se concentraram não só na mudança cultural necessária para crescer em escala com uma abordagem DevOps, mas também fizeram questão de incluir...

F5 e Nutanix convergem em infraestrutura no .NEXT
Ecossistema F5 | 08/06/2015

F5 e Nutanix convergem em infraestrutura no .NEXT

Aplicações empresariais como Microsoft SharePoint e Exchange, juntamente com a VDI, continuam sendo a espinha dorsal da sua empresa. A produtividade, embora não seja tão atraente quanto o lucro, é um fator essencial para o sucesso das operações empresariais atuais. Deixar de...