{"id":12395,"date":"2018-04-10T13:01:06","date_gmt":"2018-04-10T18:01:06","guid":{"rendered":"https:\/\/gsb.lat\/seis-tendencias-de-analise-de-dados-definidos-para-dominar-2018\/"},"modified":"2018-04-10T13:01:06","modified_gmt":"2018-04-10T18:01:06","slug":"seis-tendencias-de-analise-de-dados-definidos-para-dominar-2018","status":"publish","type":"post","link":"https:\/\/gsb.lat\/pt\/seis-tendencias-de-analise-de-dados-definidos-para-dominar-2018\/","title":{"rendered":"Seis tend\u00eancias de an\u00e1lise de dados definidos para dominar 2018"},"content":{"rendered":"

Juntamente com as tecnologias sociais, m\u00f3veis e de nuvem, a an\u00e1lise e as tecnologias de dados associadas t\u00eam surgido como perturbadores de neg\u00f3cios centrais na era digital. \u00c0 medida que as empresas deixaram de ser geradoras de dados para se tornarem organiza\u00e7\u00f5es orientadas por dados em 2017, os dados e a an\u00e1lise tornaram-se o centro de gravidade para muitas empresas. Em 2018, estas tecnologias devem come\u00e7ar a gerar valor. Estas s\u00e3o as abordagens, pap\u00e9is e preocupa\u00e7\u00f5es que ir\u00e3o orientar as estrat\u00e9gias de an\u00e1lise de dados no pr\u00f3ximo ano.<\/span><\/p>\n

Os lagos de dados devem provar o seu valor comercial ou n\u00e3o ir\u00e3o durar
\n<\/strong>Os dados t\u00eam vindo a acumular-se na empresa a um ritmo vertiginoso h\u00e1 anos. A Internet das Coisas (IoT) apenas acelerar\u00e1 a cria\u00e7\u00e3o de dados \u00e0 medida que as fontes de dados se deslocam da web para dispositivos m\u00f3veis, e depois para m\u00e1quinas.<\/p>\n

“Isto criou uma grande necessidade de escalar os canais de dados de uma forma rent\u00e1vel”, disse Guy Churchward, CEO do fornecedor da plataforma de dados em tempo real DataTorrent.<\/p>\n

Para muitas empresas, impulsionadas por tecnologias como o Apache Hadoop, a resposta foi criar lagos de dados – plataformas de gest\u00e3o de dados para armazenar todos os dados de uma organiza\u00e7\u00e3o em formatos nativos. Os lagos de dados prometeram quebrar silos de informa\u00e7\u00e3o, fornecendo um \u00fanico reposit\u00f3rio de dados que poderia ser utilizado por toda a organiza\u00e7\u00e3o para tudo, desde a an\u00e1lise de neg\u00f3cios \u00e0 extrac\u00e7\u00e3o de dados. Os lagos de dados em bruto e sem governo estabeleceram-se como um grande“apanha-tudo”<\/em>e“cura-tudo<\/em>” de dados.<\/p>\n

“O lago de dados funcionou fantasticamente bem para as empresas durante a era dos dados ‘em repouso’ e ‘em lote'”, observou Churchward. “Em 2015, come\u00e7ou a tornar-se evidente que esta arquitectura estava a ser demasiado utilizada, mas agora tornou-se o calcanhar de Aquiles para uma verdadeira an\u00e1lise de dados em tempo real. O estacionamento de dados, e depois a sua an\u00e1lise, coloca as empresas numa enorme desvantagem. Quando se trata de obter informa\u00e7\u00e3o e tomar medidas t\u00e3o rapidamente quanto o c\u00e1lculo permite, as empresas que dependem de dados de eventos obsoletos criam um eclipse total de visibilidade, ac\u00e7\u00e3o e quaisquer poss\u00edveis solu\u00e7\u00f5es imediatas. Esta \u00e9 uma \u00e1rea onde “suficientemente boa” ser\u00e1 estrategicamente fatal.<\/p>\n

Monte Zweben, CEO da Splice Machine, concorda.<\/p>\n

“A era da desilus\u00e3o do Hadoop atinge tudo; com muitas empresas a afogarem-se nos seus lagos de dados, incapazes de obter um ROI devido \u00e0 complexidade dos motores de computador baseados no Hadoop”, Zweben previu para 2018.<\/p>\n

Para sobreviver a 2018, os lagos de dados ter\u00e3o de come\u00e7ar a provar o seu valor comercial, acrescentou Ken Hoang, vice-presidente de estrat\u00e9gia e alian\u00e7as na Alation, especialista em cat\u00e1logo de dados.<\/p>\n

“A nova lixeira de dados – lagos de dados – passou por implementa\u00e7\u00f5es experimentais ao longo dos \u00faltimos anos, e come\u00e7ar\u00e1 a fechar a menos que provem que podem fornecer valor”, disse Hoang. “A marca de um lago de dados bem sucedido ser\u00e1 um cat\u00e1logo de empresas que re\u00fane pesquisa e gest\u00e3o de informa\u00e7\u00e3o, juntamente com intelig\u00eancia artificial para fornecer novos conhecimentos ao neg\u00f3cio.<\/p>\n

No entanto, Hoang n\u00e3o acredita que tudo esteja perdido para os lagos de dados. Ele previu que estes e outros grandes centros de dados poder\u00e3o encontrar uma nova oportunidade com aquilo a que ele chama “super centros”, que podem oferecer “contexto como servi\u00e7o” atrav\u00e9s da aprendizagem de m\u00e1quinas.<\/p>\n

“Grandes implementa\u00e7\u00f5es de centros de dados nos \u00faltimos 25 anos (por exemplo, armaz\u00e9ns de dados, gest\u00e3o de dados principais, lagos de dados, Salesforce e ERP) criaram mais silos de dados dif\u00edceis de compreender, relacionar ou partilhar”, disse Hoang. “Um centro que re\u00fana todos os centros proporcionar\u00e1 a capacidade de ligar bens dentro deles, permitindo o contexto como um servi\u00e7o. Por sua vez, ir\u00e1 gerar informa\u00e7\u00e3o preditiva mais relevante e poderosa para melhores e mais r\u00e1pidos resultados comerciais operacionais.<\/p>\n

“Veremos cada vez mais empresas a tratar computa\u00e7\u00e3o em termos de fluxos de dados, em vez de dados que s\u00e3o apenas processados e desembarcados numa base de dados”, disse Dunning. “Estes fluxos de dados captam os principais eventos empresariais e reflectem a estrutura do neg\u00f3cio. Um tecido de dados unificado ser\u00e1 a base para a constru\u00e7\u00e3o destes sistemas em grande escala, baseados em fluxos.<\/p>\n

Langley Eide, chief strategy officer da Alteryx, especialista em an\u00e1lise de dados de auto-atendimento, disse que as TI n\u00e3o ser\u00e3o as \u00fanicas a fazer os lagos de dados gerarem valor: os analistas da linha de neg\u00f3cio (LOB) e os chief digital officers (CDOs) tamb\u00e9m ter\u00e3o de assumir a responsabilidade neste 2018.<\/p>\n

“A maioria dos analistas n\u00e3o explorou a vasta quantidade de recursos n\u00e3o estruturados, tais como dados de clickstream<\/em>, dados de IoT, dados de registo, etc., que inundaram os seus lagos de dados; em grande parte porque \u00e9 dif\u00edcil faz\u00ea-lo”, disse Eide. “Mas francamente, os analistas n\u00e3o est\u00e3o a fazer o seu trabalho se deixarem estes dados intocados. \u00c9 amplamente entendido que muitos lagos de dados s\u00e3o bens de baixo desempenho: as pessoas n\u00e3o sabem o que est\u00e1 l\u00e1 dentro, como aceder a eles, ou como criar insights a partir dos dados. Esta realidade ir\u00e1 mudar em 2018, uma vez que mais CDOs e empresas querem um melhor ROI para os seus lagos de dados”.<\/p>\n

Eide previu que em 2018 os analistas ir\u00e3o substituir ferramentas de “for\u00e7a bruta” – tais como Excel e SQL – por mais t\u00e9cnicas e tecnologias program\u00e1ticas, tais como cataloga\u00e7\u00e3o de dados, para descobrir e obter mais valor a partir dos dados.<\/p>\n

O CDO atingir\u00e1 a maioridade
\n<\/strong>Como parte deste novo push para uma melhor compreens\u00e3o dos dados, a Eide tamb\u00e9m previu que o papel do CDO se desenvolver\u00e1 plenamente em 2018.<\/p>\n

“Os dados s\u00e3o essencialmente o novo petr\u00f3leo, e o CDO est\u00e1 a come\u00e7ar a ser reconhecido como a pe\u00e7a principal na abordagem de uma das quest\u00f5es mais importantes nos neg\u00f3cios de hoje: o valor de condu\u00e7\u00e3o dos dados”, disse Eide. “Muitas vezes com um or\u00e7amento de menos de 10 milh\u00f5es de d\u00f3lares, um dos maiores desafios e oportunidades para os CDO \u00e9 realizar a muito publicitada oportunidade de auto-servi\u00e7o, trazendo os bens de dados corporativos aos utilizadores da linha de neg\u00f3cio. Em 2018, os CDO que trabalham para encontrar um equil\u00edbrio entre uma fun\u00e7\u00e3o centralizada e capacidades LOB integradas acabar\u00e3o por obter os maiores or\u00e7amentos”.<\/p>\n

Ascens\u00e3o do curador de dados?
\n<\/strong>Tomer Shiran, CEO e co-fundador da empresa<\/em> de an\u00e1lise Dremio, uma for\u00e7a motriz por detr\u00e1s do projecto de c\u00f3digo aberto Apache Arrow, previu que as empresas ver\u00e3o a necessidade de um novo papel: o curador de dados.<\/p>\n

Shiran disse que o curador de dados \u00e9 encontrado entre os consumidores de dados (analistas e cientistas de dados que utilizam ferramentas como Tableau e Python para responder a perguntas importantes com dados), e engenheiros de dados (as pessoas que movem e transformam dados entre sistemas utilizando linguagens de scripting, Spark, Hive e MapReduce). Para terem sucesso, os curadores de dados devem compreender o significado dos dados, bem como o significado das tecnologias que se aplicam aos mesmos.<\/p>\n

“O curador de dados \u00e9 encarregado de compreender os tipos de an\u00e1lises que precisam de ser realizadas por diferentes grupos dentro da organiza\u00e7\u00e3o, que conjuntos de dados est\u00e3o devidamente equipados para o trabalho, e os passos no processo de tomar os dados no seu estado natural e mold\u00e1-los na forma necess\u00e1ria para o trabalho que um consumidor de dados ir\u00e1 realizar”, observou Shiran. “O curador de dados utiliza sistemas, tais como plataformas de dados de auto-servi\u00e7o, para acelerar o processo de ponta a ponta<\/em> de fornecer acesso a conjuntos de dados essenciais aos consumidores de dados sem fazer c\u00f3pias infinitas da informa\u00e7\u00e3o”.<\/p>\n

As estrat\u00e9gias de governa\u00e7\u00e3o de dados ser\u00e3o quest\u00f5es-chave para todos os executivos de n\u00edvel C.
\n<\/strong>O Regulamento Geral de Protec\u00e7\u00e3o de Dados da Uni\u00e3o Europeia (GDPR) entrar\u00e1 em vigor a 25 de Maio de 2018, e est\u00e1 a surgir como um espectro sobre o campo da an\u00e1lise, embora nem todas as empresas estejam prontas.<\/p>\n

A GDPR aplicar-se-\u00e1 directamente em todos os estados membros da UE, e mudar\u00e1 radicalmente a forma como as empresas devem procurar o consentimento para recolher e processar os dados dos cidad\u00e3os da UE, explicou os advogados da Morrison & Foerster’s Global Privacy + Data Security Group Miriam Wugmeister, co-presidente da Global Privacy; Lokke Moerel, especialista europeu em privacidade; e John Carlin, presidente da Global Risk and Crisis Management (e ex-procurador-geral adjunto da Divis\u00e3o de Seguran\u00e7a Nacional do Departamento de Justi\u00e7a dos EUA).<\/p>\n

“As empresas que dependem do consentimento para todas as suas opera\u00e7\u00f5es de processamento deixar\u00e3o de poder faz\u00ea-lo, e necessitar\u00e3o de outras bases jur\u00eddicas (isto \u00e9, necessidade contratual e interesse leg\u00edtimo)”, explicaram eles. “As empresas ter\u00e3o de implementar um ecossistema completamente novo para receber notifica\u00e7\u00f5es e consentimentos”.<\/p>\n

“Quando o boom do Y2K aconteceu, todos estavam a preparar-se para as probabilidades que podem ou n\u00e3o enfrentar”, disse Scott Gnau, CTO da Hortonworks. “Hoje, parece que ningu\u00e9m se est\u00e1 a preparar adequadamente para quando o GDPR ser\u00e1 implementado em Maio de 2018. Porque n\u00e3o? Encontramo-nos actualmente numa fase em que as organiza\u00e7\u00f5es n\u00e3o s\u00f3 est\u00e3o a tentar lidar com o que est\u00e1 para vir, como est\u00e3o a lutar para manter e abordar as quest\u00f5es que precisam de ser resolvidas na altura. \u00c9 prov\u00e1vel que muitas organiza\u00e7\u00f5es dependam dos chefes de seguran\u00e7a para definir as regras, sistemas, par\u00e2metros, etc., para ajudar os seus integradores de sistemas globais a determinar o melhor curso de ac\u00e7\u00e3o. Isto n\u00e3o \u00e9 uma expectativa realista para o papel de uma pessoa individual”.<\/p>\n

Para fazer cumprir correctamente a GDPR, a suite C precisa de ser informada, preparada e comunicativa com todas as facetas da sua organiza\u00e7\u00e3o, disse Gnau. As organiza\u00e7\u00f5es necessitar\u00e3o de uma melhor gest\u00e3o da gest\u00e3o global dos seus activos de dados. Mas grandes infrac\u00e7\u00f5es, tais como a infrac\u00e7\u00e3o Equifax que veio a lume em 2017, significam que ter\u00e3o dificuldade em equilibrar o fornecimento de acesso de auto-servi\u00e7o aos dados por parte dos empregados, protegendo ao mesmo tempo esses dados de potenciais amea\u00e7as.<\/p>\n

Como resultado, Gnau previu que a governa\u00e7\u00e3o de dados ser\u00e1 um ponto focal para todas as organiza\u00e7\u00f5es em 2018.<\/p>\n

“Um objectivo-chave deveria ser o desenvolvimento de um sistema que equilibre a democratiza\u00e7\u00e3o dos dados, o acesso, a an\u00e1lise e a regulamenta\u00e7\u00e3o do self-service”, disse Gnau. “No futuro, a forma como concebemos os dados com seguran\u00e7a ter\u00e1 um impacto em todos: clientes nos EUA e no estrangeiro, os meios de comunica\u00e7\u00e3o social, os seus parceiros e muito mais.<\/p>\n

Zachary Bosin, director de marketing de solu\u00e7\u00f5es para a Veritas Technologies, especialista em gest\u00e3o de dados multi-nuvem, previu que uma empresa americana ser\u00e1 capaz de oferecer aos seus clientes uma solu\u00e7\u00e3o para o problema. ser\u00e1 um dos primeiros a ser multado ao abrigo do GDPR.<\/p>\n

“Apesar do prazo iminente, apenas 31% das empresas inquiridas pela Veritas em todo o mundo acreditam estar em conformidade com o GDPR”, disse Bosin. “As san\u00e7\u00f5es por incumprimento s\u00e3o \u00edngremes, e este regulamento afectar\u00e1 todas e cada uma das empresas que lidam com cidad\u00e3os da UE”.<\/p>\n

A prolifera\u00e7\u00e3o da gest\u00e3o de metadados continua
\n<\/strong>N\u00e3o se trata apenas de GDPR, \u00e9 claro. O dil\u00favio de dados continua a crescer, e os governos de todo o mundo est\u00e3o a impor novas regulamenta\u00e7\u00f5es como resultado disso. Dentro das organiza\u00e7\u00f5es, as equipas t\u00eam mais acesso aos dados do que nunca. Tudo isto contribui para a crescente import\u00e2ncia da governa\u00e7\u00e3o de dados, juntamente com a qualidade dos dados, integra\u00e7\u00e3o de dados e gest\u00e3o de metadados.<\/p>\n

“Gerir metadados e assegurar a privacidade dos dados para regulamentos como a GDPR junta-se a tend\u00eancias anteriores como a IA e a IdC, mas a tend\u00eancia inesperada de 2018 ser\u00e1 a converg\u00eancia das tecnologias de gest\u00e3o de dados”, observou Emily Washington, vice-presidente s\u00e9nior<\/em> software de gest\u00e3o de produtos do fornecedor de dados e an\u00e1lises Infogix. “Cada vez mais, as empresas est\u00e3o a avaliar formas de optimizar a sua pilha<\/em> tecnol\u00f3gica global porque querem aproveitar grandes dados e an\u00e1lises para criar uma melhor experi\u00eancia do cliente, atingir objectivos comerciais, ganhar uma vantagem competitiva e, em \u00faltima an\u00e1lise, tornar-se l\u00edderes de mercado.<\/p>\n

A extrac\u00e7\u00e3o de conhecimentos significativos e o aumento da efici\u00eancia operacional exigir\u00e3o ferramentas flex\u00edveis e integradas que permitam aos utilizadores ingerir, preparar, analisar e controlar rapidamente os dados, diz Williams. A gest\u00e3o de metadados, em particular, ser\u00e1 essencial para apoiar a governa\u00e7\u00e3o de dados, o cumprimento da regulamenta\u00e7\u00e3o e as exig\u00eancias de gest\u00e3o de dados em ambientes de dados empresariais.<\/p>\n

A an\u00e1lise preditiva ajuda a melhorar a qualidade dos dados
\n<\/strong>\u00c0 medida que os projectos avan\u00e7am para a produ\u00e7\u00e3o, a qualidade dos dados \u00e9 cada vez mais preocupante. Isto \u00e9 especialmente verdade \u00e0 medida que a IdC abre mais as comportas. Infogix diz que em 2018 as organiza\u00e7\u00f5es ir\u00e3o recorrer a algoritmos de aprendizagem de m\u00e1quinas para melhorar a detec\u00e7\u00e3o de anomalias na qualidade dos dados. Ao utilizar padr\u00f5es hist\u00f3ricos para prever resultados futuros de qualidade de dados, as empresas podem detectar dinamicamente anomalias que de outra forma poderiam ter passado despercebidas, ou que poderiam ter sido encontradas muito mais tarde apenas atrav\u00e9s de interven\u00e7\u00e3o manual.<\/p>\n

“\u00c0 medida que mais dados s\u00e3o gerados atrav\u00e9s de tecnologias como a IdC, torna-se cada vez mais dif\u00edcil de gerir e aproveitar”, disse Washington. “Ferramentas integradas de auto-servi\u00e7o fornecem uma vis\u00e3o hol\u00edstica do panorama de dados de uma empresa para se chegar a conclus\u00f5es significativas e oportunas. A transpar\u00eancia total nos activos de dados da empresa ser\u00e1 crucial para o sucesso das iniciativas anal\u00edticas, abordando as necessidades de governa\u00e7\u00e3o e privacidade de dados, monetizando os activos de dados, e muito mais \u00e0 medida que avan\u00e7amos para 2018\u2033.<\/p>\n

-Thor Olavsrud, CIO.com – CIOPeru.pe<\/em><\/p>\n

 <\/p>\n

Fonte: CIO M\u00e9xico<\/em><\/p>\n","protected":false},"excerpt":{"rendered":"

Juntamente com as tecnologias sociais, m\u00f3veis e de nuvem, a an\u00e1lise e as tecnologias de dados associadas t\u00eam surgido como perturbadores de neg\u00f3cios centrais na era digital. \u00c0 medida que as empresas deixaram de ser geradoras de dados para se tornarem organiza\u00e7\u00f5es orientadas por dados em 2017, os dados e a an\u00e1lise tornaram-se o centro…<\/p>\n","protected":false},"author":3,"featured_media":0,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[546,553,554],"tags":[],"class_list":["post-12395","post","type-post","status-publish","format-standard","hentry","category-artigos","category-tecnologia-pt","category-tendencias-pt","category-546","category-553","category-554","description-off"],"_links":{"self":[{"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/posts\/12395","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/users\/3"}],"replies":[{"embeddable":true,"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/comments?post=12395"}],"version-history":[{"count":0,"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/posts\/12395\/revisions"}],"wp:attachment":[{"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/media?parent=12395"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/categories?post=12395"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/gsb.lat\/pt\/wp-json\/wp\/v2\/tags?post=12395"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}