Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de...

37

Transcript of Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de...

Page 1: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos
Page 2: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Roteiro da apresentação

• Apresentação

• Metodologia utilizada

• Motivação para a pesquisa (contexto)

• Resultados alcançados

Page 3: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Título da pesquisa: Descoberta de Conhecimento em Bases de Dados, com base em técnicas de Análise Preditiva, visando ao auxílio e ao aprimoramento da atividade de controle externo desempenhada pelo TCE-RJ

Page 4: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Questão de pesquisa:

É possível a implementação de técnicas de detecção de fraudes com a utilização de mineração de dados nas auditorias realizadas pelo TCE-RJ?

Page 5: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Objetivo Geral:

Demonstrar a possibilidade da implementação de técnicas de mineração de dados para detecção de fraudes no âmbito de auditorias governamentais.

Áreas de conhecimento envolvidas na pesquisa:

• Auditoria Governamental

• Detecção de Fraudes

• Mineração de Dados (análise de dados/analytics)

Page 6: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Como a pesquisa foi desenvolvida

• Revisão da literatura;

• Estudos de casos (aplicações a bases de dados reais);

Page 7: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Auditoria orientada a dados

Abordagem de auditoria pró-ativa centrada na análise de dados. Implementação fundada no trio: negócio, técnica e tecnologia.

• Negócio: técnicos com conhecimento da área de aplicação: auditoria, licitações, folha de pagamentos, etc.

• Técnica: técnicos com conhecimento das técnicas de mineração de dados

• Tecnologia: técnicos com conhecimento de softwares para implementação de algoritmos de mineração de dados e de bancos de dados

Page 8: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Detecção de Fraudes?

"Detecção de fraude é o processo automatizado de identificação de casos de alto risco" ( Veronique Van Vlasselaer et all: GOTCHA! Network-based Fraud Detection for Social Security Fraud )

Não é novidade. Enorme quantidade de artigos e livros. Área de conhecimento já bem estabelecida.

Em auditoria: Auditoria Forense, Contabilidade Forense

Livros nacionais já publicados fazem muito pouco (ou nenhum) uso de análise de dados…

Page 9: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Detecção de Fraudes? (cont.)

Page 10: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Taxonomia das Técnicas de Detecção Eletrônica de Fraudes, adaptado de (TRAVAILLE et al., 2011).

Page 11: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Softwares utilizados • R (open source)

• SQLServer (disponível no TCE-RJ)

Pacotes do R:

• arules, arulesViz (regras de associação)

• igraph, visNetwork (redes sociais)

• foreach, parallel , snow (processamento em paralelo)

• Quanteda, tm (mineração de texto)

• dplyr, openxlsx, RODBC, sqldf, plyr, stringr, data.table (importação e pré-processamento de dados)

Page 12: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Softwares utilizados (cont.)

Não dá pra alegar falta de software para implementar análise

de dados

Page 13: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dados utilizados Nesta pesquisa foram utilizados os seguintes conjuntos de dados:

• dados de licitações realizadas (jan/11 a ago/15)

• dados de contratos celebrados

• dados de itens licitados

• dados dos participantes

• dados sobre empresas do ERJ (composição acionária)

Page 14: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Regras de Associação

Técnica de mineração de dados que consiste na detecção de associações que ocorrem com frequência entre itens.

Exemplo: (4 primeiras regras)

Page 15: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos
Page 16: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos
Page 17: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Análise de Redes Sociais

As Redes Sociais consistem em estruturas que representam entidades e relacionamentos entre estas.

Exemplo:

Page 18: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Análise de Redes Sociais (Participação societária em comum)

Universo de Empresas com

participação societária em

comum

Page 19: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Applet com demonstração de resultados

Page 20: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Utilizamos grafos direcionados para representar a relação

entre as empresas participantes das licitações, da seguinte

forma:

1. cada empresa é representada por um nó;

2. as empresas que participaram de um mesmo certame

estarão associadas por relações do tipo “perdedor-vencedor”.

Tal relação é representada por uma aresta que se inicia no nó

representativo da empresa participante perdedora para o nó

representativo da licitante vencedora

Análise de Redes Sociais (Indícios de formação de cartéis)

Page 21: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Análise de Redes Sociais (Indícios de formação de cartéis)

Clusterização por meio da

técnica de Detecção de

Comunidades

Page 22: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

1. É alcançada por

uma grande

quantidade de links;

2. É alcançada por

páginas relevantes; e

3. Aponta para

páginas relevantes.

Análise de Redes Sociais (Indícios de formação de cartéis)

Ranqueamento por meio de PageRank

Page 23: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

1. É alcançada por

uma grande

quantidade de links;

2. É alcançada por

páginas relevantes; e

3. Aponta para

páginas relevantes.

1. Sagram-se vencedoras com uma

frequência acima da média,

configurando uma grande

concentração ou monopólio de

mercado;

Análise de Redes Sociais (Indícios de formação de cartéis)

Ranqueamento por meio de PageRank

Page 24: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

1. É alcançada por

uma grande

quantidade de links;

2. É alcançada por

páginas relevantes; e

3. Aponta para

páginas relevantes.

2. Vencem licitações das quais

também participaram outras

empresas relevantes (casos de

rodízio de empresas que detém

forte fatia de um determinado

mercado e atuam de forma

coordenada, alternando-se como

vencedoras em licitações, são

casos típicos em que esta situação

acontece); e

Análise de Redes Sociais (Indícios de formação de cartéis)

Ranqueamento por meio de PageRank

Page 25: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

1. É alcançada por

uma grande

quantidade de links;

2. É alcançada por

páginas relevantes; e

3. Aponta para

páginas relevantes.

3. Costumam participar de certames

em que licitantes relevantes

sagram-se vencedoras. Isto ocorre

em situações em que o papel

preponderante desempenhado por

determinada empresa é o de

figurante ou de “coelho” (uma

empresa atua de forma a elevar os

preços do item licitado, sem ter a

real intenção vencer a licitação).

Análise de Redes Sociais (Indícios de formação de cartéis)

Ranqueamento por meio de PageRank

Page 26: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

PageRank

Análise de Redes Sociais (Indícios de formação de cartéis)

Page 27: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 28: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 29: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 30: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 31: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 32: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Dashboard com demonstração de resultados

Page 33: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

A pesquisa evidenciou ser possível a incorporação de

técnicas de mineração de dados nas auditorias realizadas

pelo TCE-RJ.

Conclusão

Page 34: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Situação atual:

• Técnicos com bom conhecimento do negócio

• Carência de conhecimentos em análise de dados

• Cultura de controle fortemente baseada em análise

documental

Conclusão (cont.)

Page 35: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Sugestões de melhoria:

• Considerar a capacitação em análise de dados como

elemento estratégico;

• Investir em treinamento em métodos quantitativos e software adequados

Conclusão (cont.)

Page 36: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Sugestões de melhoria:

• Treinamento em auditoria forense

• Aumento da maturidade analítica do TCE-RJ

• Criação de uma comunidade de prática

Conclusão (cont.)

Page 37: Roteiro da apresentação - Rio de Janeiro Tardes.pdf• Considerar a capacitação em análise de dados como elemento estratégico; • Investir em treinamento em métodos quantitativos

Pesquisas futuras:

• Utilização de técnicas supervisionadas

• Auditorias preditivas

Conclusão (cont.)