• English English
  • Português (Brasil) Português (Brasil)
  • Español Español
  • Prestação de Contas
  • Transparência
  • Privacidade e Proteção de Dados
  • Assinador Digital
  • HOD
  • PSS Serpro
  • Intranet
Área do Cliente
  • Loja
  • Soluções
    • Por Público
      • Empresas
        • Certificação Digital
        • Datavalid
        • SNE
        • NeoID
        • Integra Loja Franca
        • Vio
        • Renave
        • Nova Placa Veicular
        • Consulta Denatran
        • Inteligência de Negócio
        • Conexão de Redes Anexadas
        • Arquivos Estatísticos Denatran
        • Integra COMEX
        • Biovalid
      • Governo
        • Certificação Digital
        • Infovia
        • Margem Consignável
        • Radar
        • Autua
        • SNE
        • Integra Siafi
        • NeoID
        • Vio
        • DaaS
        • Govdata
        • ProID
        • Serpro Mail
        • Conexão de Redes Anexadas
        • Cartório Data
        • Biovalid
      • Cidadão
        • Certificação Digital
        • SNE
        • CDT Carteira Digital de Trânsito
        • Vio
        • NeoID
        • ProID
    • Por Linha de Negócio
      • Operações de Governo
        • SNE
        • CBIO
        • Notificação e Registro de Recall
        • Consulta Denatran
        • Emplaca
        • Integra Loja Franca
        • Painel de Inteligência Veicular
        • Renave
      • Informação e Análise
        • DaaS
        • Cartório Data
        • Plataforma de Inteligência de Negócios
        • GovData
        • Biovalid
        • Datavalid
        • Consulta CND
        • b-Cadastros
      • Software
        • SerproMail
        • Gestão de Margem Consignável
        • Radar
        • ProID
        • VendasGov
        • Cidades GOV.BR
      • Ambientes e Conectividade de TI
        • Serpro MultiCloud
        • Infovia
      • Privacidade e Segurança
        • Emissão de Carimbo de Tempo
        • Certificação Digital
        • Hospedagem de Autoridade Certificadora
        • NeoID
        • PSBio
        • Serpro LGPD
        • Vio
        • GovShield
    • Por Cliente
      • Receita Federal
      • Senatran
      • Secretaria de Portos
      • Tesouro Nacional
      • Ministério da Economia
      • Secex
      • MRE e PF
  • Suporte
    • Central de Ajuda
    • Central de Serviços
    • Atendimento Gestão de Consignação
      • Sistema de Consignação
      • Preço dos serviços
      • Cronograma Vigente
      • Cronograma 2020
      • Cronograma 2021
      • Cronograma 2022
    • Treinamentos
    • Central de Serviços - Transformação Digital da Justiça
  • Insights
  • Imprensa
  • A empresa
    • Estrutura Organizacional
    • Transparência
    • Endereços
    • Visite o Serpro
    • Livro da Marca
    • Eventos
      • 1ª Semana Serpro de Privacidade e Proteção de Dados
        • Participantes
      • Serpro Talks
      • HackSerpro
        • Hackathon - Compras Governamentais
        • Hackathon Rede +Brasil
      • Semana Nacional de Ciência e Tecnologia
      • Webinar Serpro
        • Riscos à Privacidade e Proteção de Dados
        • Inteligência Artificial - Desafios para a privacidade e proteção de dados
        • Avaliação de adequação à LGPD
        • Serpro e Fecomércio MG
        • Escritório Virtual
        • LGPD e Open Banking
        • LGPD: desafios e perspectivas
        • Pix - Pagamentos Instantâneos
        • Identificação digital e experiência do cliente
        • Privacidade e proteção de dados
      • Desafio Cultural POG
      • Lançamento da Plataforma LGPD Educacional
      • 1º Prêmio Serpro de Privacidade e Proteção de Dados
        • Aviso de Privacidade
      • 2º Prêmio Serpro de Privacidade e Proteção de Dados
        • Aviso de Privacidade
    • Eleições CA - 2022
    • Processo Seletivo COAUD
    • Certificações e Reconhecimento
  • Contato
  • Acesso à informação
  • Área do Cliente
    Redefine Cookies
    Info

    Notícias

    notícias

    Artigo

    Na era dos dados

    Data Lake e Big Data são tendência no uso de dados públicos

    Conceitos envolvem não só técnicas de análise de informações, mas ferramentas e plataformas para cruzamentos e comparações que trazem precisão na criação e no monitoramento de políticas públicas
    • Facebook
    • Linkedin
    • Twitter
    • Whatsapp
    by Comunicação Institucional - Curitiba, com colaboração de Rodrigo Hjort, gerente de Ciência de Dados do Serpro — 16 de october de 2017

    Dois conceitos merecem atenção do setor público brasileiro nos próximos anos: Data Lake e Big Data. Ambos são vistos como responsáveis por possibilitar uma nova forma de formular e prover políticas públicas para o cidadão, e tanto empresas de tecnologia estatais quanto privadas já promovem o seu uso em algumas ferramentas que estão em produção.

    Um Data Lake (lago de dados), por exemplo, possibilita que grandes volumes de dados estruturados e não estruturados sejam armazenados de forma flexível e elástica em formatos próximos aos de origem. O objetivo de um lago de dados é apresentar uma visão não refinada das informações para ajudar os profissionais que com eles trabalham a explorar técnicas de análise de dados, independentemente das restrições que possam existir em um armazém de dados tradicional.

    Já Big Data refere-se a ativos de informação de alto volume, velocidade e variedade que exigem formas de processamento economicamente viáveis e inovadoras para uma melhor compreensão e tomada de decisão. Para tanto, novas tecnologias precisam ser empregadas no armazenamento e no processamento de dados massivos, mantendo-se economicamente viáveis. Em Big Data, o valor do negócio reside nas conclusões a que se chega a partir dos dados, os quais não podem ser disponibilizados nas tecnologias convencionais devido a restrições inerentes às características desses dados.

    O cenário público

    Os gestores públicos no Brasil ainda carecem de soluções tecnológicas que apoiem a elaboração e o acompanhamento da execução de políticas públicas. Existem inúmeras bases de dados governamentais que serviriam de insumo para essas soluções, porém o volume massivo desses dados, a heterogeneidade das bases e o alto custo de implementação impedem que tecnologias convencionais de armazenamento e processamento de dados sejam empregadas nessas soluções.

    É justamente nesses casos que novos paradigmas são necessários. Uma plataforma de Big Data sustentada por um ambiente tecnológico de Data Lake pode ser usada para gerar informações estratégicas para um órgão público, por meio de ferramentas de descoberta e mineração de dados e de análises estatísticas. Essa plataforma possibilita ainda o cruzamento e a comparação das informações de forma robusta, embasando com maior precisão o desenvolvimento e o monitoramento de políticas públicas, em especial no combate a fraudes e na melhoria da prestação de serviços.

    Uma solução construída pelo Serpro que utiliza Data Lake e Big Data é a Plataforma de Análise de Dados do Governo Federal – GovData, que também contou com a colaboração da Dataprev e do Ministério do Planejamento. Nessa plataforma, que pode ser acessada por todos os órgãos do Sistema de Administração de Recursos de Tecnologia de Informação do governo federal (SISP), estão disponíveis dezenas de bases de dados governamentais integradas com diversas ferramentas analíticas avançadas. Por exemplo, a ferramenta de exploração de dados Spotfire e o ambiente de desenvolvimento científico-estatístico R Studio.

    E o setor privado?

    O Serpro oferece ao setor privado uma oportunidade de uso de grandes volumes de dados públicos, direto da fonte governamental. É o caso das APIs Gov, um conjunto de interfaces de acesso a bases de informação de caráter público, como o CPF, o CNPJ e a Nota Fiscal Eletrônica, de forma instantânea. O acesso a essas informações é feito de forma segura, utilizando uma chave digital criptografada e certificados digitais.

    Doormat

    Soluções

    Por Público
    Por Linha de Negócio
    Proteção de Dados

    Suporte

    Central de Ajuda
    Central de Serviços
    Acesso Remoto (SAR)
    Consignatários
    Downloads

    Institucional

    Marca Serpro
    Quem Somos
    Integridade
    Transparência
    Carreiras
    Simplifique

    Contato

    Contatos
    Imprensa

    Empregado

    Intra Serpro
    PAS Serpro
    Plano Odontológico

    Serpro Sede

    SGAN Quadra 601 Módulo "V"

    CEP: 70836-900

    FAX: (61) 2021-8531

    Horário de atendimento: 8h às 18h

    Serpro Ministério da Fazenda Governo Federal

    Contato

    • Quero Adquirir uma Solução
    • Problemas com uma Solução
    • Assessoria de Imprensa
    • Ouvidoria
    • Outro Assunto