Impulsione insights com an√°lise de dados  

Gere insights dos dados do seu mainframe com o Apache Spark on z/OS e o Jupyter Notebooks

Last updated

Muitas vezes, as organiza√ß√Ķes precisam prover os usu√°rios de dados de processamento, mas n√£o podem afetar os ambientes dos aplicativos transacionais cr√≠ticos. Ao aplicar tecnologias de an√°lise e visualiza√ß√£o diretamente ao dado, √© poss√≠vel gerar relat√≥rios e insights de forma r√°pida e escal√°vel, sem causar um impacto negativo nos sistemas.

By Animesh Singh, Andy Shi

Overview

Os dados s√£o os novos recursos naturais! Em uma empresa moderna, os dados podem ser o produto de maior valor. Com o passar do tempo, sua organiza√ß√£o acumula quantias enormes de dados. Por√©m, como eles podem ser analisados para que voc√™ possa aproveit√°-los ao m√°ximo? Muitas empresas de grande porte usam os mainframes e o sistema operacional z/OS para armazenar grandes quantidades de dados. Analisar os sistemas que guardam esses dados √© outro desafio. Pelo menos, √© o que tem acontecido at√© o momento. O Apache Spark, uma estrutura de computa√ß√£o em cluster open source, √© a nova ferramenta para trabalhar com cargas intensas de dados. O Spark funciona em um sistema operacional altamente escal√°vel, seguro e de alto desempenho, como o z/OS. Ao combinar o Spark com o Jupyter Notebooks, voc√™ obt√©m um sistema em que usu√°rios podem analisar um grande n√ļmero de dados corporativos de maneira acess√≠vel e escal√°vel.

Flow

  1. O usuário entra no dashboard de serviço de análise de dados da plataforma z/OS para Apache Spark. Então, ele inicia o cluster de serviço Spark e preparar o processamento dos dados.
  2. O usu√°rio faz upload dos dados do DB2 e do VSAM para o esse sistema.
  3. Ele escolhe o programa Scala para analisar os dados. O programa usa o formato de arquivo .jar e o ponto de entrada principal precisa ser especificado. Depois disso, o usu√°rio pode enviar a tarefa.
  4. Após a conclusão da tarefa, o usuário pode visualizar a execução e o resultado em um arquivo stdout.
  5. O usu√°rio inicia o Jupyter Notebook para se conectar ao Spark. O programa Scala acessa os dados do DB2 e do VSAM e realiza a an√°lise.
  6. O usu√°rio executa o programa Scala para realizar v√°rias opera√ß√Ķes, como, por exemplo, unir ou transformar os dados, e criar gr√°ficos estat√≠sticos.

Components

Jupyter Notebook

Um aplicativo Open Source da web que permite criar e compartilhar documentos com live codes, equa√ß√Ķes, visualiza√ß√Ķes e texto explicativo.

IBM z/OS for Apache Spark

An√°lise local, otimizada e em tempo real de dados corporativos estruturados e n√£o estruturados.

IBM DB2 for z/OS

Um servidor de dados corporativos para analytics e transa√ß√Ķes de neg√≥cios.

Technologies

Analytics

Localizando padr√Ķes em dados para gerar informa√ß√Ķes.

Cloud

Acesse recursos de tecnologia da informação e computadores pela internet.

Sistemas

V√°rios hardwares e sistemas operacionais que funcionam como servidores ou hosts para aplicativos

Related Blogs

Nenhuma publicação correspondente ao seu critério de busca foi encontrada

Related Links