Grupo Pentaho de Goiás

2012 promete ser o ano do Big Data

2012-01-29T05:16:00.000-08:00

(http://computerworld.uol.com.br/gestao/2011/12/30/2012-promete-ser-o-ano-do-big-data)

Por Computerworld (Portugal)

Publicada em 30 de dezembro de 2011 - 18h16

Atualizada em 30 de dezembro de 2011 - 18h23

Segundo os analistas, as companhias serão mais pressionadas a encontrar soluções para gerenciar a montanha de informações.

O crescimento exponencial dos dados dentro das empresas está criando um novo cenário para 2012. Segundo os analistas, as companhias serão mais pressionadas a encontrar uma solução para dominar o volume de informações que aumenta a cada segundo, principalmente com o avanço das mídias sociais e dos conteúdos multimídia.
O fenômeno Big Data levanta questões importantes que precisam ser resolvidas com urgência para evitar atrasos para as organizações, dizem os especialistas.
Eles afirmam que o próximo ano é definido como uma grande oportunidade para as empresas se integrarem neste ambiente novo.
O termo Big data é usado para denominar o crescimento exponencial dos dados que as empresas precisam ou podem tratar para extrair informação útil. O maior desafio é a análise de dados não estruturados.
O conceito dá um peso grande ao volume de informações que precisa ser administrado e que os departamentos de TI terão de se concentrar para resolver essa questão. Eles terão de classificar dados importantes para os negócios e estabelecer meios para acesso.
Os analistas do Gartner alertam que esse trabalho implicará um investimento maciço nos próximos dois ou três anos. Servirá sobretudo para resolver outros problemas como a melhoria da infraestruturas de TI, que pode não estar preparada para esse fenômeno.
Mas 2012 será um ano decisivo na evolução para um novo ambiente por muitas outras razões. O volume de informação digital crescer no mundo inteiro a uma taxa anual de 59%.
É um aumento baseado no crescimento das transações e outros tipos de dados mais tradicionais, mas também na emergência de novos tipos de dados, especialmente de multimídia e de streaming. O elevado volume de dados poderá causar problemas de armazenamento.
Mas a diversidade de dados também leva a problemas sobre a sua análise. O Gartner afirma que os líderes de TI sempre tiveram problemas em administrar grandes volumes de informação transacionais.
Contudo, hoje há cada vez mais informação para analisar, principalmente produzidas pelas mídias sociais e pelos dispositivos móveis. As dificuldades de análise aumentam com a adição de dados não estruturados como e-mail, vídeo e imagens.

COMPUTERWORLD - Missão TI: controlar montanha de dados

2011-04-07T03:50:00.000-07:00

(http://computerworld.uol.com.br/tecnologia/2011/04/07/missao-ti-controlar-montanha-de-dados)

Por Redação da Computerworld-EUA

Publicada em 07 de abril de 2011 - 07h30

Informações corporativas crescem de forma exponencial e demandam ferramentas avançadas.

A oportunidade de controlar os processos que fazem análise em lote e em tempo real das montanhas de informação existentes na forma de dados não estruturados é, para a área de tecnologia de informação (TI), uma chance de se firmar de vez como agente de negócios. E as ferramentas que estão surgindo para essas finalidades são as que desenham esse cenário para TI. Um dos destaques é a plataforma em código aberto Apache Hadoop.
Especialistas do mercado explicam que as empresas sentem cada vez mais a necessidade de aprimorar a análise das enormes quantidades de dados estocados em bancos de dados paralelos para saber tudo sobre o hábito e a necessidade dos clientes. Isso permite que as companhias trabalhem melhor o planejamento estratégico e a noção de marketing.
A montanha de informações (que os norte-americanos chamam de big data) abrange todas as coletadas nos sistemas computacionais internos, as de transações financeiras e buscas na web, metadados de e-mail, consultas a mecanismos de busca, além de atividades em redes sociais.
De acordo com levantamentos do cientista chefe da empresa de cloud Joyent, Jason Hoffman, somente no ano de 2010 foram gerados 1,5 bilhão de Terabytes em informações do gênero. As companhias, coletivamente, preencheram espaços de armazenamento com cerca de 16 milhões de Terabytes de dados no mesmo ano.
Algumas companhias já estão encontrando maneiras de dissecar os dados com as ferramentas mais modernas. A Barnes & Noble, por exemplo, iniciou a análise de todas as informações possíveis de seus clientes virtuais para deliberar seus comportamentos e fatores determinantes para suas decisões de compras.
Segundo o vice-presidente de retenção de mercados e fidelidade, Marc Parrish, os logs web que indicavam como os usuários estavam utilizando leitores e livros eletrônicos, produziram 35 Terabytes de dados em 2010 e devem gerar mais 20 Terabytes em 2011. “Já tomamos decisões importantes, com o auxílio de ferramentas de análise, sobre os próximos passos da empresa e sobre como lidar com o imaginário do cliente.”
Em outro caso, a rádio norte-americana National Public Radio (NRP) utiliza ferramentas de relatórios para manter controle sobre os conjuntos de dados em constante crescimento e determinar tendências sobre o uso do website. O software utilizado cria logs e métricas, além de capturar dados e índices de outras aplicações, servidores e rede, tudo em um único repositório que pode ser pesquisado.
A NPR estava usando o software de análise web Omniture, mas a analista de métricas da NPR, Sondra Russel, sentiu que a ferramenta não era suficiente para lidar com os volumes de dados em constante crescimento da organização. “Eu só queria saber quantas vezes alguém ouvia a um determinado programa e um período de tempo determinado”, diz Sondra. “Com o Splunkt, nosso novo software, não há mais atrasos entre a aparição dos dados em uma pasta de consulta e a aparição dos mesmos dados em relatórios. Posso ter gráficos de demonstração sem precisar de uma semana de preparação”, conta.
O analista da RedMonk Stephen O´Grady, aponta que o mercado será dos sistemas de gestão de bancos de dados projetados para trabalhar com múltiplos tipos de dados e fontes. Ele afirma que a plataforma Apache Hadoop, por exemplo, já é usada por grandes bancos, empresas de publicidade, além das indústrias de ciências e farmacêutica.

Mercado global de BI crescerá quase 10% neste ano

2011-02-24T08:44:00.000-08:00

Fonte: ti inside

O mercado mundial de software de business intelligence (BI) tende a gerar receita de US$ 10,8 bilhões neste ano, apurando uma expansão de 9,7% na comparação com 2010, segundo estudo divulgado nesta sexta-feira, 18, pelo Gartner.

A consultoria aponta que o segmento continuará a registrar avanço nos próximos três anos, porém este deve ser menos acelerado até 2013, mas ainda sim ficando na casa de um dígito alto.

De acordo com o Gartner, o mercado de BI será um dos setores da indústria de software corporativo que terá crescimento mais intenso, apesar do aumento lento da economia na maioria das regiões do globo. As empresas continuam a recorrer ao BI como uma ferramenta vital para concretizar negócios de maneira mais inteligente, ágil e eficiente, disse a consultoria.

"O contínuo crescimento dos investimentos em BI é um sinal da importância estratégica da ferramenta", acrescentou Ian Bertram, vice-presidente do Gartner.

Quase 30% dos softwares empresariais são open source

2011-02-14T12:30:00.000-08:00

Fonte: ItWeb
por Alison Diana | InformationWeek EUA
14/02/2011
Flexibilidade, aumento da inovação, menor tempo de desenvolvimento e processos mais rápidos são as principais razões para usar a opção

Os softwares de open source continuam a ganhar força nas empresas. Mais da metade dos questionados em uma pesquisa dizem que eles adotaram o software como parte de sua estratégia de TI, de acordo com um novo estudo do Gartner.

Durante os últimos cinco anos, as empresas têm estendido a sua adoção de software open source (OSS) em detrimento ao próprio software, de acordo com a pesquisa do Gartner. Há cinco anos, o open source representava menos de 10% do portfólio de software das empresas, mas é esperado que represente mais de 30% nos próximos 18 meses. Ao mesmo tempo, aumentou a utilização de software desenvolvido internamente, sugerindo que o OSS agora é mais usado junto a softwares customizados, e não como uma substituição total de software escrito sob encomenda.

Contudo, apesar da popularidade crescente do open source, apenas um terço dos participantes tem uma política de OSS, disse o relatório. Flexibilidade, aumento de inovação, menor tempo de desenvolvimento e processos mais rápidos de contratos foram os motivos que impulsionaram a adoção de quase um terço dos entrevistados citando essas razões como os motivos para a adoção.

No estudo, 22% adotaram consistentemente o OSS em todos os departamentos da empresa, enquanto 46% estão usando o OSS em departamentos ou projetos específicos. É esperado que o uso cresça, já que 21% dos questionados disseram que estão em processo de análise das vantagens.

O Gartner ainda descobriu que outros setores, tais como saúde, também estão adotando as soluções. Enquanto organizações médicas investem em registros de saúde eletrônicos (EHRs) e as trocas em informações de saúde (HIEs), alguns estão considerando a open source como uma proteção contra o lock-in do fornecedor.

Em novembro, por exemplo, o Department of Defense Health Information Management System (DHIMS) contratou o programa com open source HIE que desenvolve Mirth para empresas de software e suporte de desenvolvimento em implementação do Mirth Connect.

Fórum Goiano de Software Livre

2010-12-09T15:38:00.000-08:00

A Cogniz estará presente no Fórum Goiano de Software Livre

No dia 11 de dezembro das 15:00 às 16:00, o consultor Bruno Póvoa Leal, estará presente no Fórum Goiano de Software Livre, onde ministrará uma palestra sobre a ferramenta de BI Open Source Pentaho. Nessa palestra serão apresentadas suas principais funcionalidades e as vantagens de adotá-la em empresas públicas ou privadas.
O fórum será realizado na Faculdade Cambury - Av T-2, 3531, Setor Sol Nascente, Goiânia - GO.

Confira a programação completa: http://fgsl.aslgo.org.br/fgsl7/papers/pub/programacao.php

E-commerce no país cresceu 40% no primeiro semestre

2010-08-11T06:22:00.000-07:00

Acompanhe as notícias também pelo site www.cogniz.com.br, ou assine a nossa RSS

Fonte: IDG Now!

De acordo com pesquisa "WebShoppers", faturamento do setor foi de R$ 6,7 bi, aumento de 40% em relação aos R$ 4,8 bi do 1º semestre de 2009.
Os primeiros seis meses do ano foram aquecidos para o comércio eletrônico no Brasil. De acordo com dados da 22ª edição do relatório “WebShoppers”, elaborado pela e-bit, com o apoio da Câmara Brasileira de Comércio Eletrônico (camara-e.net), o faturamento do setor foi de R$ 6,7 bilhões, aumento de 40% em relação aos R$ 4,8 bilhões do primeiro semestre de 2009.
Depois de passar praticamente inabalado pela crise global que afetou a economia do final de 2008 até meados de 2009, o e-commerce vem se fortalecendo.
Segundo o diretor geral da e-bit, Pedro Guasti, o primeiro semestre do ano foi turbinado pela Copa do Mundo. “A primeira metade de 2010 foi excelente em faturamento. Com certeza, a Copa influenciou os resultados, já que as pessoas adquiriram produtos de maior valor agregado, como TVs de tela plana. Além disso, por conta do final da redução do IPI, os consumidores decidiram antecipar a compra de produtos de linha branca para aproveitar impostos ainda reduzidos”, disse Guasti.
As categorias de produtos mais vendidas no 1º semestre foram: ‘Livros e Assinaturas de Revistas e Jornais’;‘Eletrodomésticos’; ‘Saúde, Beleza e Medicamentos’ e ‘Informática’ e ‘Eletrônicos’. A compra média foi de R$ 379.
De acordo com a pesquisa, o setor caminha a passos largos para mais um recorde de faturamento, já que, historicamente, a segunda metade do ano é geralmente mais relevante e pode representar até 55% do faturamento total do canal. No 2º semestre, espera-se que as lojas virtuais alcancem R$ 7,6 bilhões em vendas de bens de consumo – isso sem incluir a venda de automóveis e sites de leilão virtual.
Com isso, a projeção é que o faturamento seja de R$ 14,3 bilhões ao final de 2010, um crescimento de 35% em relação a 2009, quando o setor faturou cerca de R$ 10,6 bilhões. Esses números também superariam a previsão inicial feita pela e-bit e março, de R$ 13,6 bilhões.
Em 2010, o número de pessoas que fizeram pelo menos uma compra na internet deverá aumentar consideravelmente, diz o estudo. A projeção é de 23 milhões de e-consumidores. Ao final de 2009, a e-bit havia registrado 17,6 milhões. Na última Copa do Mundo, na Alemanha, havia apenas 6 milhões de "e-shoppers".
De acordo com os dados levantados pela e-bit, cerca de 55% dos e-consumidores que fizeram uma compra pela internet estimulados por rede social são mulheres, o que pode indicar maior propensão do público feminino em ser seduzido pelas ofertas ou recomendações nesse canal.
No comércio eletrônico em geral, a divisão é igual: 50% são homens, 50% mulheres. Em relação à idade, os compradores provenientes de redes sociais são, em média, sete anos mais jovens que os do mercado: 34 contra 41. A categoria preferidas dos e-consumidores vindos de redes sociais é “Moda e acessórios”, com cerca de 20% do volume.
Pesquisa de resistência a compra
Nessa edição do relatório, a e-bit preparou uma pesquisa sobre resistência à compra, além dos principais motivos que levam o e-consumidor a não finalizar o pedido.
O estudo descobriu que, entre os e-consumidores que visitaram sites e decidiram não comprar produtos, 62% disseram ter consultado preço, valor do frete ou o custo total, além de ter procurado por promoções e descontos.
Dos entrevistados, 86% disseram que apenas olharam alguns itens e saíram da loja, não chegando a começar o processo de compra. Já 14% disseram que deram inicio, mas acabaram não concluindo o procedimento.
Para o diretor de Marketing da e-bit, Alexandre Umberti, acompanhar esse tipo de comportamento dos consumidores é de suma importância para as lojas online. “Conhecer os motivos pelos quais seus consumidores abandonam a compra pode ser uma maneira eficaz de evitar perda de receita, além de permitir traçar estratégias interessantes para fidelizar o novo e-consumidor, que está acessando o site pela primeira vez”, diz Umberti.

Novo Site Cogniz

2010-07-13T06:07:00.000-07:00

É com muita satisfação que anunciamos o lançamento do novo site da Cogniz Inteligência de Negócios e Sistemas de Informação. Esse é mais um canal de comunicação da Cogniz com a comunidade Pentaho e de Business Intelligence em geral.

Serão disponibilizados vários recursos criados pela Cogniz para colaborar com a comunidade Pentaho do Brasil, como vídeos, guias, links e muito mais. Para começar, preparamos um Guia de Utilização do Pentaho User Console (Visão Analítica) que está disponível gratuitamente para toda comunidade à partir do endereço http://www.cogniz.com.br/index.php?option=com_jdownloads&view=viewcategories&Itemid=25.

Além do contato com a comunidade o site servirá também como interface da Cogniz com os clientes, através do site eles poderão conhecer melhor os serviços prestados pela empresa, enviar mensagens e até mesmo solicitar visitas.

Entre agora no nosso site - www.cogniz.com.br - e saiba o que a Cogniz pode fazer por você.

Review do livro Pentaho 3.2 Data Integration: Beginner's Guide

2010-05-27T04:42:00.000-07:00

Excelente livro, realmente recomendado para os que são iniciantes ou não! Escrito no estilo passo a passo, torna-se fácil de ler. Mesmo os analistas experientes podem se beneficiar com essa fonte. Posso dizer que é essencial ter este livro em mãos quando se trabalha com PDI.

Como um bom brasileiro eu não poderia deixar de comentar sobre os exemplos usando jogos de futebol, seria melhor usar dados de 1958, 1962, 1970, 1994 ou 2002, mas tudo bem, isso não compromete a qualidade da obra. ;-)

Alguns destaques:

==Capítulo 1==
Explicação do funcionamento do fluxo entre steps e hops.
Descrição da Interface.

==Capítulo 2==
Manipulando arquivos TXT, XML e XLS.
Expressões regulares.
Executando tranformações via linha de comando utilizando Pan.
Formatação de campos numéricos e de data.
Utilização de variáveis do PDI (kettle.properties)

==Capítulo 3==
Descrição dos steps Calculator, Formula e alguns outros steps de transformação.
Utilizando agrupamentos no PDI.
Utilização de Filtros.
Descrição do step Stream Lookup.

==Capítulo 4==
Trabalhando com múltiplos fluxos.
Descrição do step Switch/Case.
Steps para junção de streams.

==Capítulo 5==
Step JavaScript.
Utilizar parâmetros.
Utilizar Scripts de Inicialização e Finalização.
Constantes pré-definidas.
Utilizando classes Java a partir de JavaScript.

==Capítulo 6==
Converter Linhas em Colunas, Colunas em Linhas e Trabalhar com conjuntos de linhas.
Trabalhando com passagem de variáveis.

==Capítulo 7==
Depuração e tratamento de erros.
Limpeza de dados, steps Null If, etc.

==Capítulo 8==
Utilizar Bancos de Dados

==Capítulo 9==
Operações avançadas em Bancos de Dados
Modelagem Dimensional
Carga de DW

==Capítulo 10==
Jobs

==Capítulo 11==
Uso de variáveis em Jobs
Jobs avançados

==Capítulo 12==
Desenvolvimento de um Data Mart

==Capítulo 13==
Melhores Práticas do PDI
Utilizando Plugins
Integração do PDI com o BI Server

==Apêndice A==
Trabalhando com Repositórios

==Apêndice B==
Pan e Kitchen: Executando Transformações e Jobs via linha de comando

==Apêndice C==
Referência Rápida a Steps e Jobs

==Apêndice D==
Atalhos do Spoon

==Apêndice E==
Características do PDI 4

Pentaho 3.2 Data Integration: Beginner's Guide

2010-05-11T09:13:00.000-07:00

Quero agradecer à PACKT Publishing que muito gentilmente disponibilizou uma cópia do livro "Pentaho 3.2 Data Integration: Beginner's Guide" para avaliação.

Mais informações sobre o livro podem ser encontradas no seguinte link http://www.packtpub.com/pentaho-3-2-data-integration-beginners-guide/book?utm_source=ademargomes.com&utm_medium=bookrev&utm_content=blog&utm_campaign=mdb_003049

A tabela de conteúdo do livro está disponível em https://www.packtpub.com/toc/pentaho-32-data-integration-beginners-guide-table-contents

O capítulo “Developing and Implementing a Simple Datamart” pode ser conferido através do link
https://www.packtpub.com/sites/default/files/9546_PDI%20Beginner%27s%20guide_SampleChapter.pdf

Tradução do JPivot para Português do Brasil

2010-01-19T09:45:00.000-08:00

Ano novo, vida nova, projetos novos...

Após um período de férias estou de volta, sei que estou um pouco atrasado, mas gostaria de desejar um próspero ano novo para todos.

Para iniciar bem o ano quero apresentar o meu novo projeto, que é a tradução para português do Brasil da interface com o usuário do JPivot, que é a interface visual utilizada pela Pentaho para o Mondrian na versão community, a versão enterprise utiliza o Pentaho Analyzer Enterprise Edition, conforme já mencionei em outros posts.

Decidi traduzir o JPivot porque alguns dos meus clientes não são muito proficientes na lingua inglesa, por consequencia, sentiam alguma dificuldade em se acostumar com a ferramenta, apesar de muito pouca coisa estar em Inglês. Aqui eu abro um parêntese para agradecer ao Prof. Coruja que providenciou a tradução do PUC para português e disponibilizou para a comunidade. Portanto, o meu trabalho com o JPivot é um complemento ao trabalho do Prof. Coruja com o PUC.

No final do post é possivel ter acesso ao link para download do arquivo de tradução, sintam-se à vontade para baixar, avaliar, criticar, utilizar e comentar.

Dentro do arquivo compactado há um arquivo LEIAME.txt, esse arquivo não está lá por acaso, são informações indispensáveis para que a instalação da tradução aconteça sem surpresas.

Link para a tradução http://www.cogniz.com.br/arquivos/jpivot_pt_BR.0.1.zip

Atualização: Testado somente na versão 1.8.0 do JPivot.

Se alguém utilizar uma outra versão, por favor, poste um comentário dizendo se funcionou.

Instalação do Pentaho BI Server versão 3.5 em Linux com Repositório Oracle

2009-12-02T04:22:00.000-08:00

Esse post descreve as configurações necessárias para o Pentaho BI Server versão 3.5 funcionar remotamente em um ambiente Linux com repositório de soluções em Oracle, é um tutorial que foi criado como uma série de lembretes, irei melhorar sua organização posteriormente, porém, como algumas pessoas tem perguntado sobre o assunto decidi disponibilizá-lo assim mesmo, espero que ajude e como sempre comentários e sugestões são bem vindos.

Configurar tomcat

Altera-se o número da porta na opção "Connector port="8080" para "Connector port="????" do arquivo biserver-ce/tomcat/conf/server.xml.

Pode-se configurar a quantidade de memória utilizada pelo tomcat através do parâmetro "-Xmx????m" no arquivo biserver-ce/start-pentaho.sh

Configurar o Administrator Console

Para utilizar conexões com o ORACLE copie o driver (ojdbc14.jar) para a pasta administration-console/jdbc

Para o Admin Console conseguir visualizar e alterar os agendamentos (schedule) é preciso acrescentar o ip do servidor ao arquivo biserver-ce/tomcat/webapps/pentaho/WEB-INF/web.xml, parâmetro Proxy Trusting Filter

Configurar BI Server (start-pentaho.sh)

Adicionar no inicio do arquivo:
export JRE_HOME=/caminho/do/jdk

Comentar linhas:
#cd "$DIR/data"
#sh start_hypersonic.sh &

Configurar BI Server (Repositório Oracle)

Alterar arquivo para conectar ao oracle:
biserver-ce/pentaho-solutions/system/hibernate/hibernate-settings.xml
Configurar parâmetro config-file para:

system/hibernate/oracle10g.hibernate.cfg.xml

Alterar arquivo oracle10g.hibernate.cfg.xml configurando corretamente a conexão com o banco
    <property name="connection.driver_class">oracle.jdbc.driver.OracleDriver</property>
    <property name="connection.url">jdbc:oracle:thin:@ip_do_servidor_oracle:1521:schema</property>
    <property name="dialect">org.hibernate.dialect.Oracle10gDialect</property>
    <property name="connection.username">????</property>
    <property name="connection.password">????</property>
    <property name="connection.pool_size">10</property>
    <property name="show_sql">false</property>
    <property name="hibernate.jdbc.use_streams_for_binary">true</property>

Alterar arquivo: /biserver-ce/pentaho-solutions/applicationContext-spring-security-jdbc.xml

jdbc.driver=oracle.jdbc.driver.OracleDriver
jdbc.url=jdbc:oracle:thin:@ip_do_servidor_oracle:1521:schema
jdbc.username=????
jdbc.password=????
hibernate.dialect=org.hibernate.dialect.Oracle10gDialect

Alterar no arquivo: biserver-ce/tomcat/webapps/pentaho/META-INF/context.xml
maxWait="10000" username="????" password="????"
driverClassName="oracle.jdbc.driver.OracleDriver" url="jdbc:oracle:thin:@ip_do_servidor_oracle:1521:schema"
validationQuery="SELECT 1 FROM DUAL"

Arquivo: biserver-ce/pentaho-solutions/system/quartz/quartz.properties
DE:
org.quartz.jobStore.driverDelegateClass = org.quartz.impl.jdbcjobstore.StdJDBCDelegate
PARA:
org.quartz.jobStore.driverDelegateClass = org.quartz.impl.jdbcjobstore.oracle.OracleDelegate

Configurar o User Console

Configurar o endereço correto no seguinte parâmetro no arquivo biserver-ce/tomcat/webapps/pentaho/WEB-INF/web.xml

DE:
<context-param>
        <param-name>base-url</param-name>        <param-value>http://localhost:8080/pentaho/</param-value></context-param>

E também o parâmetro abaixo. Deve-se acrescentar o ip do servidor separado por vírgula do loopback.
<param-name>TrustedIpAddrs</param-name><param-value>127.0.0.1</param-value>

PARA:
    <context-param>
        <param-name>base-url</param-name>        <param-value>http://ip_do_servidor_pentaho:????/pentaho/</param-value>    </context-param>

<param-name>TrustedIpAddrs</param-name>            <param-value>127.0.0.1,ip_do_servidor_pentaho</param-value>

Configurar arquivo biserver-ce/pentaho-solutions/system/pentaho.xml com o parâmetro abaixo para não exibir a lista de usuários padrão.
<login-show-users-listfalse</login-show-users-list

Alterar a senha do publisher que é a senha que permite que os usuários publiquem os arquivos no servidor, essa senha fica no arquivo biserver-ce/pentaho-solutions/system/publisher_config.xml

<publisher-config>
    <publisher-password>senha_de_publicacao</publisher-password>
</publisher-config>

Configurar o servidor de email no arquivo biserver-ce/pentaho-solutions/system/smtp-email/email_config.xml

Para utilizar conexões com o ORACLE copie o driver (ojdbc14.jar) para a pasta biserver-ce/tomcat/webapps/pentaho/WEB-INF/lib ou biserver-ce/tomcat/common/lib

Para que os gráficos sejam exibidos em computadores remotos é necessário a configuração do parâmetro base-url no arquivo biserver-ce/tomcat/webapps/pentaho/WEB-INF/web.xml, substituindo-se localhost pelo ip ou nome do servidor.

Aplicativos da suite Pentaho e como se relacionam

2009-11-27T03:40:00.000-08:00

Uma das grandes dificuldades para alguém que começa a trabalhar com o Pentaho é entender o relacionamento entre os diversos aplicativos da suite, neste post descrevo brevemente esses aplicativos e a função que exercem no ciclo de vida de um BI utilizando Pentaho.

BI Platform - Core da suite, tem a função de controlar o repositório e a execução de soluções, os acessos a banco de dados, agendamentos, permissões, serviços de e-mail e mais algumas atividades fundamentais de background, grande parte da sua funcionalidade pode ser configurada através do PAC.

Pentaho Administration Console (PAC) - Interface administrativa do Pentaho, a partir do PAC são definidos usuários, grupos, conexões com bancos de dados e data warehouses (JNDI), possui também algumas ferramentas para limpar os caches da suite, além disso, possibilita a criação de agendamentos públicos nos quais os usuários finais podem subscrever relatórios.

Pentaho Data Integration (PDI) - É o aplicativo responsável pelo ETL (Extraction, Tranformation, Load) na suite. Com o PDI define-se qual a origem dos dados que serão extraídos, as transformações pelas quais deverão passar e onde o resultado final será carregado (normalmente o data warehouse).

Pentaho Schema Workbench (PSW) - Basicamente é uma interface gráfica para a edição de arquivos xml que definem os cubos que serão utilizados pela ferramenta de análise do Pentaho (Mondrian/JPivot), esse aplicativo permite também a publicação dos cubos no BI Server.

Mondrian - Motor OLAP do Pentaho, faz com que consultas escritas na linguagem MDX (Dimensional) sejam convertidas para SQL (Relacional).

JPivot - Interface gráfica OLAP, é a interface gráfica para a criação das consultas MDX, permite visualizar o resultado das consultas na forma de tabelas dinâmicas (pivot tables), adicionalmente inclui também a possibilidade de exibir gráficos dinâmicos baseados no conteúdo das tabelas dinâmicas.

Pentaho User Console (PUC) - Interface para o usuário final, é a partir do PUC que os usuários terão acesso às análises e relatórios criados, poderão ainda - de acordo com as permissões definidas - criar relatórios Ad-Hoc utilizando o WAQR, criar novas visões análíticas utilizando o JPivot, executar relatórios criados previamente com o PRD (ou outro gerador de relatórios suportado), visualizar dashboards, agendar a execução de relatórios e compartilhar qualquer um desses artefatos com outros usuários.

Pentaho Metadata Editor (PME) - Interface gráfica para a definição de metadados, os metadados são arquivos XML que "traduzem" as tabelas do banco de dados para um formato mais intuitivo para os usuários finais, a finalidade principal do PME é publicar metadados que serão utilizados pelo WAQR.

Web-based Adhoc Query and Reporting (WAQR) - Interface para a criação de relatórios simples diretamente pelo usuário final, é acessado através do PUC e utiliza os metadados publicados pelo PME.

Pentaho Report Designer (PRD) - Gerador de relatórios "pixel perfect" da suite, facilita a criação de relatórios "ricos" com uma aparência mais profissional e personalizada, adicionalmente permite a publicação desses relatórios no PUC, permite inclusive que filtros simples sejam publicados diretamente sem a criação de xactions no PDS.

Pentaho Design Studio (PDS) - Plugin para a plataforma eclipse que funciona como uma interface gráfica para a criação de xactions que são arquivos xml interpretados pelo BI Server, são como instruções "passo-a-passo" que dirigem a execução das atividades pelo BI Sever, permitem, por exemplo, a definição de filtros avançados para relatórios e o envio de e-mails com os relatórios executados.

Community Dashboard Framework (CDF) - Framework para a criação de dashboards (painéis de indicadores), utiliza basicamente HTML, JavaScript e CSS para criar dashboards.

Community Dashboard Framework - Dashboad Editor (CDF-DE) - Interface que simplifica a criação de dashboards do CDF, apesar de não ser um aplicativo padrão da Pentaho, é um grande auxiliar na tarefa de criação de painéis de indicadores. É disponibilizado como um plugin do PUC.

Weka - Ferramenta de Data Mining (Mineração de Dados), através do Weka é possível utilizar algoritmos de mining para encontrar padrões não triviais nos dados.

Espero não ter esquecido de nada, comentários, sugestões e correções são sempre bem vindos.

Livro de Business Intelligence e Caridade

2009-11-15T04:43:00.000-08:00

Uma iniciativa louvável foi tomada pelo autor dos livros "Modelagem de Dados" e "BI-Modelagem e Tecnologia" Carlos Barbieri, devido a problemas com editoras, que ele mesmo explica nesse post em seu blog http://blogdobarbi.blogspot.com/2009/10/livros-de-bi-business-intelligence-e.html, resolveu disponibilizar seus dois livros em meio digital pelo valor de R$30,00 pagos à Casa de Apoio à Criança com Câncer.

Conheço o livro "Business Intelligence - Modelagem e Tecnologia" e o considero um livro muito bom, especialmente para aqueles que estão começando agora, é bastante didático e objetivo. Só isso já tornaria a aquisição desses livros vantajosa, se acrescentarmos o fato de que o valor será destinado a uma instituição que cuida de crianças com câncer penso que não há motivo para deixar passar essa oportunidade. Os detalhes para aquisição podem ser conferidos também através do link http://blogdobarbi.blogspot.com/2009/10/livros-de-bi-business-intelligence-e.html

Quero parabenizar em especial o autor Carlos Barbieri, atitudes como essas nos fazem enxergar que é possível sermos profissionais e humanos ao mesmo tempo, rezo para que mais pessoas se espelhem nessa iniciativa e passo-a-passo consigamos transformar o mundo em que vivemos e as empresas em que trabalhamos.

Utilizando JasperReports com Pentaho

2009-10-26T17:48:00.000-07:00

Algumas pessoas (eu me incluo entre elas) não gostam muito do PRD (Pentaho Report Designer), isso pode mudar com a versão 3.5, porém, ainda não tive tempo para testá-lo e tenho usado o iReport da JasperSoft com muito sucesso.

Para quem não conhece, o iReport é um editor de relatórios escrito em Java que utiliza a engine JasperReports. Particularmente acho o iReport um excelente editor, mais intuitivo que o PRD, além de ser uma ferramenta bastante difundida na comunidade Java.

Quando descobri que o Pentaho possuia suporte nativo a JasperReports procurei aprender rapidamente como utilizar isso, após alguns pequenos problemas relacionados à versão consegui fazer os relatórios criados no iReport serem executados pelo Pentaho. O que descrevo a seguir são os passos básicos que precisei seguir para obter sucesso na execução dos relatórios.

Para que o relatório do Jasper funcione com o bi-server é preciso que a engine do bi-server seja a mesma do iReport, para tanto, deve-se copiar o arquivo jasperreports-x.x.x.jar para a pasta biserver-ce\tomcat\webapps\pentaho\WEB-INF\lib e reiniciar o bi-server, outras bibliotecas podem ser necessárias de acordo com as características dos relatórios, por exemplo, para gráficos é necessário adicionar o arquivo jar do jfreechart.

O ideal é que todos os arquivos relacionados ao relatório gerado sejam colocados na mesma pasta do bi-server, pois, em alguns casos é necessário apontar esse local dentro do relatório e dessa forma não é preciso especificar o caminho completo do arquivo, somente o nome do arquivo referenciado, isso acontece, por exemplo, com imagens e subrelatórios. O Design Studio possui um Process Action específico para o Jasper (Report->Other->Jasper).

Isso funcionou para mim e acredito que seja suficiente para quem quiser utilizar o iReport juntamente com o Pentaho, se houver alguma dúvida sobre o procedimento ou problemas com a execução dos relatórios deixem um comentário e ajudarei na medida do possível.

CDF Dashboard Editor

2009-10-24T13:46:00.000-07:00

Quem acompanha as mensagens trocadas através do grupo pentahobr já deve ter percebido que nos últimos dias andei trabalhando com o CDF Dashboard Editor (CDF-DE), vou postar aqui minhas impressões sobre essa fantástica ferramenta.

Primeiramente, devo dar crédito ao seu criador Pedro Alves que é figurinha fácil no grupo e sempre que necessário entra em campo para solucionar nossas dúvidas mais complicadas.

O CDF-DE ainda está na versão 0.1, por isso mesmo estava meio cético ao avaliar a ferramenta, foi um choque perceber que ela está muito estável e é bastante completa, eu imaginava que no máximo seria possível criar um layout básico para dashboards, minha surpresa foi grande ao perceber que é possível criar paineis bastante complexos muito rapidamente. Recomendo enfaticamente o uso da ferramenta, principalmente para aqueles que nunca trabalharam com dashboards no Pentaho.

A arquitetura do CDF-DE permite que a sua instalação seja muito simples, pois foi desenvolvido como um plugin para o Pentaho, o que permite também que a criação e alteração dos dashboards seja feita diretamente pela interface padrão com o usuário da suite (PUC).

Apesar da ferramenta ter sido disponibilizada a muito pouco tempo no Google Code, pelo que avaliei até agora, não deve demorar muito para ser lançada a versão 1.0, o único problema que tive foi com relação a utilização de consultas MDX que continham caracteres especiais, isso me leva a crer que ela já está madura o suficiente para ser avaliada sua utilização até mesmo em produção.

Outro detalhe importante é que testei o CDF-DE nas versões 3.0 e 3.5 do Pentaho e ele funcionou igualmente em ambas.

Para avaliar a ferramenta, clique aqui.
Blog do Pedro Alves

Pentaho BI Suite 3.5 Estável

2009-10-17T17:45:00.000-07:00

A versão 3.5 estável da suite Pentaho já está disponível para download no sourceforge, ainda não tive a oportunidade de avaliar a nova versão, porém, aparentemente as maiores alterações ficam por conta da parte de relatórios da suite que foi reformulada, quem já fez curso comigo sabe que eu não gostava muito do Pentaho Report Designer (PRD) e na prática preferia utilizar o iReport da JasperSoft - que funciona bem com o Pentaho - porém com essa reformulação vou reavaliar essa decisão, pois, apesar do iReport permitir criar relatórios que se integram com o Pentaho a integração nativa com o PRD facilita um pouco as coisas.
Assim que conseguir avaliar essa versão postarei aqui meu parecer sobre os benefícios de mudar para o PRD ou continuar utilizando o iReport.

Pentaho Analyzer Enterprise Edition

2009-10-12T06:42:00.000-07:00

A Pentaho atualmente utiliza a dupla Mondrian+JPivot para a criação de análises OLAP, porém, há uma reclamação dos usuários em geral que o JPivot é "feio" e pouco intuitivo, pensando nisso, a Pentaho anunciou em setembro, durante sua reunião em Barcelona, a aquisição de uma nova ferramenta OLAP. Em outubro foi liberado o vídeo (que pode ser conferido logo abaixo) da nova ferramenta já integrada à suite. A ferramenta adquirida foi a "ClearView" da empresa LucidEra que será empacotado como "Pentaho Analyzer Enterprise Edition" e será oferecido a todos os atuais e futuros usuários da versão enterprise da suite.

Como ficam os usuários da versão Community? Por enquanto o que se sabe é que continuarão com a dupla citada no início do post, porém, há esforços da comunidade para alterar isso, vide PAT - Pentaho Analysis Tool.

Apresentação

2009-09-22T12:44:00.001-07:00

Desde que conheci a suite Pentaho de BI percebi que ela tinha um potencial muito grande e decidi aprofundar meus conhecimentos. A cada passo da caminhada me encantava mais e mais com essa ferramenta. Hoje já possuo um conhecimento bastante sólido sobre o assunto e devo agradecer em grande parte às pessoas anônimas (ou nem tanto) que dedicam parte do seu valioso tempo para compartilhar os conhecimentos que adquiriram. Em virtude disso resolvi criar o grupo pentahogo no Yahoo! e nesse momento inicio a publicação de posts neste blog homônimo.
Não pretendo com a criação desse blog enfraquecer a comunidade já firmemente estabelecida do grupo pentahobr (também no Yahoo!) que é a principal referência em lingua portuguesa sobre Pentaho, criei o pentahogo apenas para facilitar a comunicação regional das pessoas que se interessam pela suite, porém, o pentahogo, tanto no Yahoo! quanto no blogspot estão abertos a todos que quiserem participar, não ficaremos limitados a Goiás.
Durante a minha jornada de estudos sobre Pentaho percebi claramente que é praticamente unânime entre as pessoas que estão começando a reclamação de que não há muito material disponível, confesso que quando iniciei meus estudos eu tive essa mesma impressão, mas com o passar do tempo pude perceber que a informação existe, sobretudo na wiki oficial da Pentaho (wiki.pentaho.com), porém, muitas das vezes não é muito fácil de ser encontrada, por isso, nos meus posts sempre que possível eu colocarei os links que serviram de origem para a informação e tentarei dar dicas de como localizar mais facilmente o que estamos procurando.
Outra coisa que pude perceber durante o tempo que trabalho com a suite Pentaho é que há diversos arquivos de configuração que muitas vezes não são claros e pequenos detalhes nos fazem perder muito tempo, dessa forma, tentarei colocar dicas de configuração para que vocês leitores não tenham as mesmas dificuldades pelas quais eu já tenha passado.
Espero que as informações postadas aqui sejam válidas para aqueles, que como eu, queiram colocar ordem no caos dos dados que as empresas possuem atualmente e extrair todo conhecimento imaginável dessas fontes de dados.
Se gostarem ou não dos posts não deixem de comentar. Vamos em frente e que Deus abençõe a todos.