INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca ›...

17
INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE DESEMPENHO PARA A INOVAÇÃO: REALIZAÇÃO DE UMA REVISÃO BIBLIOGRÁFICA SISTEMÁTICA Bruna Andrino Pinto (UFSCar ) [email protected] Fabiane Leticia Lizarelli (UFSCar ) [email protected] A concorrência entre organizações tem causado a necessidade de maior atenção à inovação. Para a identificação se os esforços nos processos de gestão e de implementação da inovação estão gerando resultados é necessário mensurá-los. Dessa manneira, é importante que as organizações implantem um sistema de medição da inovação e que por meio de indicadores consiga identificar problemas e bons resultados e, dessa forma, realizar ações de mudança que tragam benefícios à empresa. Entretanto, sistemas de medição para a inovação é um tema relativamente recente, em que o foco são sistemas de medição de P&D, que muitas vezes não abrangem os diferentes aspectos da gestão da inovação. Para uma maior compreensão dos diferentes tipos de sistemas de medição, foi realizada uma Revisão Bibliográfica Sistemática no período de 2000-2015, em que foram identificados os principais modelos de sistemas de medição para a inovação, indicadores de inovação mais citados, principais autores no tema e as revistas em que esses trabalhos são publicados. Palavras-chave: Inovação, Sistema de Medição de Desempenho, Gestão da Inovação XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil João Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016.

Transcript of INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca ›...

Page 1: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

INVESTIGAÇÃO SOBRE SISTEMAS E

INDICADORES DE DESEMPENHO PARA

A INOVAÇÃO: REALIZAÇÃO DE UMA

REVISÃO BIBLIOGRÁFICA

SISTEMÁTICA

Bruna Andrino Pinto (UFSCar )

[email protected]

Fabiane Leticia Lizarelli (UFSCar )

[email protected]

A concorrência entre organizações tem causado a necessidade de

maior atenção à inovação. Para a identificação se os esforços nos

processos de gestão e de implementação da inovação estão gerando

resultados é necessário mensurá-los. Dessa manneira, é importante

que as organizações implantem um sistema de medição da inovação e

que por meio de indicadores consiga identificar problemas e bons

resultados e, dessa forma, realizar ações de mudança que tragam

benefícios à empresa. Entretanto, sistemas de medição para a inovação

é um tema relativamente recente, em que o foco são sistemas de

medição de P&D, que muitas vezes não abrangem os diferentes

aspectos da gestão da inovação. Para uma maior compreensão dos

diferentes tipos de sistemas de medição, foi realizada uma Revisão

Bibliográfica Sistemática no período de 2000-2015, em que foram

identificados os principais modelos de sistemas de medição para a

inovação, indicadores de inovação mais citados, principais autores no

tema e as revistas em que esses trabalhos são publicados.

Palavras-chave: Inovação, Sistema de Medição de Desempenho,

Gestão da Inovação

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016.

Page 2: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

2

1. Introdução

As primeiras tentativas de desenvolver indicadores para fornecer informações sobre ciência,

tecnologia e inovação datam de meados dos anos 60 e foram levadas a cabo no âmbito da

OCDE (Organização para Cooperação e Desenvolvimento Econômico) (CANIBANO;

GARCIA; SANCHEZ, 2001). Os mesmos autores relatam que a percepção de que o processo

de inovação é interativo, complexo descontínuo e dependente de feedbacks, estimulou o

interesse das análises de mecanismos de mensuração da inovação.

A avaliação do desempenho da inovação é importante para o ganho de competitividade das

organizações, porém, o sistema de medição tem que considerar o tipo de organização e de

processos de inovação que estão sendo avaliados (OLIVEIRA; CLEMENTE;

CAULLIRAUX, 2009). Oliveira (2010) discorre sobre a dificuldade da medição de

desempenho para a inovação, devido à dificuldade da coleta de dados, comparação entre

empresas e mensuração dos resultados.

Medição de desempenho pode ser definida como a aquisição e análise de informações sobre a

realização efetiva dos objetivos da empresa e planos, e sobre os fatores que podem influenciar

esta realização (KERSSENS-VAN DRONGELEN; BILDERBEEK, 1999). O que se procura

responder com um sistema de medição de desempenho (SMD) e indicadores de desempenho,

no caso, com o foco em inovação, é: o que deve ser medido; de que forma deve ser medido o

desempenho da inovação e por que deve ser medido (PEREZ-FREIJE; ENKEL, 2007).

Grande parte da literatura existente centra-se na descrição detalhada de métricas, sobre os

princípios de sistemas de medição, e os prós e contras de diferentes sistemas (PEREZ-

FREIJE; ENKEL, 2007).

A forma de avaliação da inovação se dá por meio de indicadores de desempenho de inovação,

diversos autores trabalharam nesta temática, como Moser (1985), Sbragia (1987), Tidd

(2001), Tidd, Bessant e Pavitt (2008), entre outros. Há a tentativa de separar os indicadores de

desempenho em alguns tópicos, como indicadores de P&D, de patentes, de inovações

significativas, de divulgação de produtos, de conhecimento dos funcionários, e de julgamento

dos especialistas para facilitar a análise de desempenho e uma visão global do processo

(TIDD, 2001). Porém não há uma análise profunda e sistemática sobre quais são os sistemas

Page 3: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

3

de medição existentes e quais são os indicadores que podem ser utilizados (OLIVEIRA,

2010).

O objetivo deste artigo é de identificar os principais sistemas e indicadores de desempenho de

inovação por meio de uma Revisão Bibliográfica Sistemática (RBS) considerando o período

de 2000-2015. A RBS possibilitará também o desenvolvimento de um retrato da área,

identificando os principais autores, a publicação por ano e as principais revistas. A RBS a

cerca de sistemas de medição e indicadores de desempenho para a inovação visa investigar o

modo que está sendo avaliado e medido o desempenho da inovação dentro das organizações.

Portanto, esse trabalho objetiva um melhor entendimento a respeito de SMD para inovação. E

assim, a RBS dará suporte à verificação do estado da arte sobre o tema podendo ser útil a

futuras pesquisas, inclusive práticas em amostras de empresas.

2. Revisão Bibliográfica

Há diversos autores que enfatizam que avaliar a inovação é analisar o desempenho do

processo de P&D, que está inserido na gestão da inovação (KERSSEN-VAN DRONGELEN;

COOK, 1997; PEREZ-FREIJE; ENKEL, 2007). A descrição de processos de medição de

desempenho de P&D são fartamente encontrados na literatura, focando na medição e controle

do departamento de P&D (PEREZ-FREIJE; ENKEL, 2007).

Medir desempenho de P&D é particularmente difícil, pois não é possível observar diretamente

os níveis de esforços e o sucesso do projeto é incerto, influenciado por fatores incontroláveis e

só pode ser avaliado depois de determinado tempo (KERSSEN-VAN DRONGELEN; COOK,

1997; LOCH; TAPPER, 2002). Por outro lado, tem-se a importância dessa avaliação dentro

da organização. As atividades de P&D fornecem base para avaliar se a organização está

progredindo em seus objetivos (KERSSENS-VAN DRONGELEN; BILDERBEEK, 1999).

Sendo assim, Chiesa e Frattini (2007) afirmam que um SMD para atividades de P&D ajuda a

alcançar os objetivos da empresa, além de apoiar a tomada de decisão, melhorar o

desempenho do P&D e motivar funcionários a alcançar os resultados desejados.

Para Stefanovitz (2011) o processo de avaliação do gerenciamento da inovação possui duas

dimensões principais: uma medição relacionada aos resultados dos processos e outra com

Page 4: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

4

ênfase no sistema de gestão em si, avaliando a gestão e buscando melhorias dos processos de

inovação para o aumento do desempenho de todo o sistema.

Há necessidade de indicadores distintos para diferentes atividades de P&D, porém há pouco

na literatura sobre sistemas de medição mais amplos, que consideram a capacidade de

inovação fora da Pesquisa e Desenvolvimento (P&D), englobando outros aspectos da gestão

da inovação (OLIVEIRA; CLEMENTE; CAULLIRAUX, 2009). A medição de desempenho

da gestão da inovação é complexa e deve envolver diferentes perspectivas, não apenas a

financeira (OLIVEIRA, 2010). Um SMD do sistema de gestão da inovação como um todo,

lida com atividades inovativas interdepartamentais e mais amplas do que as atividades de

P&D (PEREZ-FREIJE; ENKEL, 2007).

De acordo com Stefanovitz (2011), os principais processos da gestão da inovação são:

prospecção (identificação de tendências e sinais tecnológicos e mercadológicos); ideação

(geração e avaliação de ideias); construção da estratégia (envolve gestão estratégica do

portfólio e planejamento das ações futuras); mobilização de recursos (gestão operacional de

portfólio e realização de parcerias de P&D e transferência de tecnologia); implantação

(processo de desenvolvimento de produtos e de tecnologia) e avaliação (definição de

indicadores e medição do desempenho inovativo).

Trabalhos como, por exemplo, Kerssels-van Drongelen e Cook (1997), Loch e Tapper (2002),

e Chiesa e Frattini (2007) propõem sistemas de medição de desempenho para a inovação,

focados em P&D. Porém, é preciso salientar que pode haver sistemas que englobem outros

processos relacionados à inovação. Pode-se considerar que há duas classificações de sistemas

de medição de desempenho de inovação: SMD de P&D e SMD de gestão da inovação. Muitas

vezes, essas nomenclaturas são utilizadas como sinônimos, porém há diferenças que pretende-

se identificar na RBS.

É importante que a medição da inovação não esteja focada apenas em medição de resultados e

sim em processos, incluindo os processos de gestão da inovação (ADAMS; BESSANT;

PHELPS, 2006; STEFANOVITZ, 2011). Além disso, existem poucos estudo sobre a medição

do processo de gestão da inovação (ADAMS; BESSANT; PHELPS, 2006).

3. Método

Page 5: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

5

A aplicação da RBS em pesquisas da área de gestão gera contribuições significativas tanto

para a área acadêmica quanto para a prática, aumentando tanto o rigor quanto a relevância da

pesquisa (TRANFIELD; DENYER; SMART, 2003).

Segundo Biolchini et al. (2007), a avaliação sistemática é usada para se referir a uma

metodologia de pesquisa específica, desenvolvida a fim de recolher e avaliar provas referentes

a um tema específico; representando, assim, um estudo secundário que depende de estudos

preliminares para ser realizado. O mesmo autor discorre ainda sobre a importância das etapas

metodológicas, estratégias de busca das evidências e foco no problema definido a fim de que

o autor da RBS possa reproduzir o protocolo e julgar a adequação dos padrões escolhidos.

No mesmo viés da ideia de Biolchini et al. (2007), tem-se que a RBS salienta a importância de

uma trilha de auditoria no processo de revisão para garantir a clareza e aplicabilidade; o que é

indicado para isso é o uso de critérios explícitos na seleção dos artigos, avaliação de qualidade

da literatura e robustez nos resultados encontrados (TRANFIELD; DENYER; SMART,

2003).

Para o processo de condução da RBS utilizou-se as recomendações de Biolchini et al. (2007),

em que as etapas principais são: planejamento, execução e análise (Figura 1). Brereton et al.

(2007) salientam a importância do planejamento, que consiste na elaboração e validação de

um protocolo para a realização da pesquisa, para poupar tempo e obter consistência na

realização da revisão.

No planejamento, foi estabelecido o objetivo da pesquisa e definiu-se 2 questões a serem

respondidas, as quais são ―De que forma estão sendo estruturados os sistemas de medição de

desempenho?‖ e ―Quais indicadores estão sendo utilizados para medir a inovação?‖

Em seguida, foram escolhidas as bases a serem consultadas. Como esperado no planejamento

inicial do projeto, Foram identificadas como pertinentes para a busca uma base nacional, a

Scielo e duas bases internacionais, Web of Science – WOS e Scopus por serem bases

consideradas consistentes pela literatura para os temas investigados.

Foram selecionados os termos e a string de busca. A escolha dos termos de busca ocorreu da

seguinte forma: inicialmente, foram encontrados e lidos alguns poucos artigos que discorriam

Page 6: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

6

sobre desempenho de inovação. A partir desses artigos, foram analisadas as palavras-chave

utilizadas e encontrou-se novos artigos sobre o assunto, os quais também foram analisados a

fim de encontrar novas maneiras de se tratar medição de desempenho de inovação. Dessa

forma, percebeu-se que havia vários tipos de sistemas de inovação, como, por exemplo, o

sistema de medição de P&D. A desse estudo inicial pensou-se em um termo de busca que

abrangesse todas as possibilidades de nomenclatura a respeito de medição, desempenho,

inovação e sistemas.

Figura 1 - Condução da Revisão Bibliográfica Sistemática

Planejamento

da PesquisaExecução

Análise dos

resultadosProtocolo aprovado Execução aprovada

Protocolo não aprovado Execução não aprovada

Elaboração do

Protocolo

Seleção e extração

de dados

Síntese dos

dados

Objetivos;

Base de dados;

Palavras-chave;

Critérios.

Artigos Artigos

Fonte: Adaptado de Biolchini et al. (2007)

Ao final, para as bases internacionais, a string foi composta da seguinte maneira:

"innovation management measurement"or"innovation measurement"or"innovation

performance measurement"or"inovation indicators"or"innovation metrics"or"innovation

measurement system*"or"innovation performance system*"or"product development

measurement"or"product development performance measurement"or"product development

indicators"or"product development metrics"or"product development measurement

system*"or"product development performance system*"or"research and development

measurement"or" research and development performance measurement"or" research and

development indicators"or" research and development metrics"or" research and development

measurement system*"or" research and development performance system*". O mesmo foi

feito com a base Scielo, com os termos em português.

Para finalizar o planejamento, discutiu-se sobre quais seriam os filtros utilizados nas bases.

Decidiu-se por buscar artigos nos idiomas inglês e português; por artigos de revistas, sendo

Page 7: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

7

esses mais conceituados; e pelos anos de 2000 a 2015, para verificar a literatura recente no

tema.

Após a realização e aprovação do protocolo executa-se o que foi planejado, que envolve a

busca e seleção das publicações condizentes (BIOLCHINI et al., 2007). Então foram feitas,

de fato, as buscas na base brasileira Scielo e nas bases internacionais Web of Science e

Scopus. A base Scielo não retornou resultados sobre o tema.

Os resultados das bases WOS e Scopus são mostrados respectivamente na tabela 1 abaixo.

Tabela 1 - Resultado de busca nas bases Web of Science e Scopus no período de 2000-2015

Etapas e filtros do

planejamento da RBS Quantidade de artigos Scopus

Quantidade de artigos Web of

Science

Retorno com a string de busca 290 86

1º Refinamento

Ano: 2000-2015 272 80

2º Refinamento

Idioma: Inglês 260 78

3º Refinamento

Áreas de conhecimento 130

1 622

4º Refinamento

Tipo de Artigo: Revista 72 60

Publicações Selecionadas após

leitura de título e resumo 30 20

1- Economics, Econometrics and Finance, Decisions Science, Engineering, Business Management and

Acoouting; 2- Economics, Econometrics and Finance, Decisions Science, Engineering, Business

Management and Acoouting

Como pôde ser observado na tabela, a seleção preliminar resultou em 50 artigos após a leitura

do resumo e título dos 132 artigos gerados do 4º refinamento, e a partir desse conteúdo,

descartou-se os textos que claramente não tratavam sobre desempenho de inovação. Dentre

os 50 artigos, havia 6 publicações em comum, portanto foram selecionados 44 artigos para a

leitura completa. Após as leituras, 22 artigos foram destinados à extração de informações. Os

artigos restantes foram descartados devido à falta de informação a respeito de modelos de

sistemas de medição de desempenho para inovação e indicadores de desempenho de inovação.

Muitos discorrem sobre o assunto, contém definições e estudos, porém não traziam exemplos,

de fato. Outros traziam apenas comparações entre países, organizações, etc., não sendo esse o

foco do trabalho.

Page 8: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

8

Durante a leitura dos artigos selecionados, novos artigos relacionados ao tema encontrados via

cross reference, ou seja, nas referências dos artigos das bases. Esses artigos foram lidos e

incluídos na análise; e totalizaram mais 10 artigos publicados após o ano de 2000 e em

revistas.

A última etapa da RBS engloba a extração e síntese dos dados para análise posterior

(BIOLCHINI et al., 2007). Portanto, deu-se início a terceira e última fase, a análise dos

resultados. Essa etapa será tratada em na próxima seção com maior detalhamento.

4. Resultados

Para análise do estado da arte sobre SMD de inovação, foram feitas observações em alguns

aspectos: publicações por ano, frequência de aparecimento das principais palavras-chave,

levantamento das revistas que mais possuíam artigos a respeito do assunto publicado, viés do

autor quanto a SMD da inovação e disposição dos indicadores de inovação nos artigos. O

objetivo dessa análise é apresentar a atual situação da literatura em relação a abordagem do

tema SMD para Inovação e Indicadores de Inovação.

A Figura 2 apresenta a distribuição das publicações ao longo dos anos selecionados (2000-

2015). Nota-se uma maior concentração de publicações a partir de 2007, o que evidencia a

maior preocupação com o tema nos últimos anos.

Figura 2 - Publicações a respeito de medição de desempenho de inovação por ano

Page 9: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

9

A Figura 3 contém as palavras-chave mais utilizadas nos artigos, com maior número de

resultados nos artigos selecionados nas bases estudadas. As expressões que mais retornam

resultados quanto ao assunto discutido são: innovation, measurement/metrics/measures e

performance; seguidas de: indicator e R&D/research and development. Na Figura, os termos

considerados como sinônimos estão separados por barras, por esse motivo uma mesma

quantificação pode ter mais de uma palavra chave.

As palavras-chave indicam que não há uma padronização nos termos relacionados aos

indicadores de desempenho e medição de desempenho para a inovação, além disso, existe

ocorrência de palavras-chave relacionadas a P&D, mostrando, que muitas vezes, o sistema de

medição da inovação se refere, na verdade, à área de P&D. A medição da área dificulta a

visão sistêmica da Gestão da Inovação como um sistema que percorre toda a organização.

Figura 3 - Palavras-chave mais utilizadas nos artigos e suas frequências

A Figura 4 apresenta a frequência das revistas em que se encontram os artigos sobre medição

de desempenho da inovação. É possível observar o destaque por quatro principais revistas, as

quais são: Research Policy, Technovation, R&D Management e Technology Management

Innovation.

Figura 4 – Principais revistas que publicaram sobre o tema

Page 10: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

10

Em relação à análise dos sistemas de medição de desempenho, Dewangan e Godse (2014)

relatam que a literatura mostra que adotar uma abordagem multidimensional para a medição

de desempenho de inovação é necessária. Entretanto, nota-se a divergência de opiniões quanto

a essa dimensão. Nesse artigo, o foco foi dado a duas classificações de SMD: sistema de

medição para a gestão de inovação e sistemas de medição para a P&D.

A primeira classificação é mais ampla e estende-se a outras áreas da organização, além do

P&D. O âmbito da medição de inovação é bastante amplo, contendo insumos, infraestrutura e

outros contextos. E assim, como esperado, estatísticas na área demandam um grande número

de dados (MORIS; JANKOWSKI; PERROLLE, 2008).

Haja vista a importância do sistema de medição de gestão de inovação Davila (2000); Adler e

Chen (2011) apud Nilsson e Ritzen (2014) afirmam que sistemas de controle, como medidas

de desempenho, podem ser favoráveis em contextos de elevados níveis de incerteza, como a

inovação.

Em relação à segunda classificação, a medição da P&D, tem-se que, geralmente, há pouca

informação aos gestores para orientá-los a fim de apoiar a P&D de produtos, exatamente

devido a dificuldades com o desenvolvimento e implementação apropriada de medidas de

desempenho gerenciais (DRIVA; PAWAR; MENON, 2000). Medidas de desempenho em

P&D são, principalmente, internas que se concentram na comparação de atividades e

Page 11: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

11

processos às operações e metas anteriores (DRIVA; PAWAR; MENON, 2000). Devido à

natureza diversificada de produtos, processos e clientes, benchmarking externo nesta área é

muitas vezes inadequado. Além disso, não há um conjunto de medidas que permanecerão

definidas ao longo do tempo. As medidas de desempenho, como com a própria organização,

devem ser a flexíveis (DRIVA; PAWAR; MENON, 2000).

Quanto ao que ser medido no sistema de desempenho para P&D, Keller e Holland (1982)

apud Haigh, Kulatunga e Amaratunga (2011) descrevem sobre 3 principais medidas:

produtos técnicos (patentes, publicações técnicas ou citações em publicações técnicas);

benefícios financeiros que emergem de P&D (lucros, vendas); e julgamentos sobre o sucesso

dos projetos individuais de P&D. Estas medidas foram desenvolvidas com base nas saídas e

nos resultados das atividades de P&D.

Como forma de exemplificação dos 2 sistemas acima, o quadro 1 apresenta o viés adotado por

autores presentes na literatura a respeito do assunto.

Pode-se identificar que o SMD de gestão da inovação pode ser definido como uma evolução

do de P&D. Já que o primeiro engloba também o segundo, enquanto esse contempla apenas

um setor da organização, o de P&D.

Quadro 1- Tipos de medição da inovação

Medição Autores

Medição focada no sistema

de gestão da inovação

Adams, Fontana e Malerba (2012); Dereli, Durmusoglu e Daim (2010); Guan e Chen

(2010); Liu et al (2009); Rejeb et al (2008); Zizlavsky (2014); Dewangan e Godse

(2014); Haigh, Amaratunga e Kulatunga; Adams, Bessant e Phelps (2006); Hansen e

Birkinshaw (2007); Pearson, Nixon e Kerssens-van Drongelen; Perez-Freije e Enkel;

Quadros (2008); Stefanovitz (2011); Canibaño; Garcia-Ayuso e Sanchez (2001);

Hansen e Birkinshaw (2007); Franceschini et al (2007)

Medição focada em P&D

Guan e Chen (2010); Schramm et al (2011); Bremser e Barsky (2004); Loch e Tapper

(2002); Perez-Freije e Enkel (2007); Chiesa e Frattini (2007); Driva, Pawar e Menon

(2000)

No que diz respeito à análise dos artigos selecionados, foram encontrados inúmeros

indicadores de inovação, dentre esses foram sumarizados 18 indicadores que apareciam com

Page 12: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

12

maior frequência. Como podem ser notados na Figura 5, os três principais indicadores são:

Número de Patentes, Orçamento em P&D e Número de Novos Produtos Desenvolvidos.

O indicador Número de Patentes diz respeito à quantidade de inventos que foram registrados

como propriedade da organização, em que durante um período de tempo o proprietário tem

direito exclusivo de explorar, produzir e comercializar a invenção. O segundo indicador

Orçamento em P&D denota o valor investido no setor de Pesquisa e Desenvolvimento dentro

da instituição, o que é um dado importante ao julgar o quão inovador a empresa é. Sendo que

empresas inovadoras, geralmente, destinam um valor à investigação e descoberta de novos

conhecimentos em uma determinada área e à aplicação do conhecimento a fim de gerar

novidades ou melhorar produtos/processos já existentes. O último principal indicador Número

de Novos Produtos Desenvolvidos aponta a quantidade de invenções que a empresa

desenvolveu. Esse indicador pode vir acompanhado de um período de tempo, normalmente,

contabiliza-se a quantidade de novos produtos por ano.

Figura 5 - Frequência citações de indicadores de desempenho da inovação nos artigos selecionados

Page 13: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

13

No Quadro 2 é apresentado os autores que apontaram cada um dos indicadores e em qual

SMD de inovação o indicador poderia auxiliar. Nota-se que os indicadores de gestão da

inovação são mais abrangentes, isto é, englobam vários setores e aspectos da organização,

estão relacionados à gestão da inovação, o que confirma, mais uma vez, a maior abrangência

desse SMD em relação ao de P&D.

Os indicadores identificados possibilitam mensurar aspectos técnicos de resultados do

processo de inovação, como número de projetos desenvolvidos, número de patentes, número

de novos processos; também indicam uma preocupação com as questões financeiras, como

lucro e retorno com novos produtos; além da mensuração de aspectos das entradas do

processo inovativo, como número de ideias provenientes de agentes externos e porcentagem

de ideias aprovadas. Os indicadores mostram a extensão da preocupação com a mensuração

da inovação, não ficando restrito apenas aos resultados finais, mas também a medição de

diversas etapas do processo.

Page 14: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

14

Quadro 2 - Indicadores de inovação citados pelos autores

Indicadores de Inovação Autores que citaram

Em qual sistema de medição

de inovação o Indicador

auxiliaria

Número de novos produtos

desenvolvidos

Adams, Fontana e Malerba (2013); Hipp e

Grupp (2005); Liu, Chuang, Huang e Tsai

(2010); Moris, Jankowski e Perrolle (2008);

Zizlavsky (2014); Dewangan e Godse (2014);

Muller, Valikangas e Merlyn (2005); Romijn e

Albaladejo (2002)

P&D / Gestão de Inovação

Número processos inovadores

Adams, Fontana e Malerba (2013); Hipp e

Grupp (2005); Liu, Chuang, Huang e Tsai

(2010); Moris, Jankowski e Perrolle (2008);

Gestão de Inovação

Número de patentes

Adams, Fontana e Malerba (2013); Archibugi e

Cocoa (2005); Flor e Oltra (2004); Hipp e Grupp

(2005); Liu, Chuang, Huang e Tsai (2010);

Moris, Jankowski e Perrolle (2008); Nilsson e

Ritzén (2014); Zizlavsky (2014); Cedergren,

Wall, Norstrom (2010); Dewangan e Godse

(2014); Romijn e Albaladejo (2002)

P&D / Gestão de Inovação

Número de recursos tecnológicos

Baležentisa e Balkienėa (2014); Abreu,

Grinevich, Kitson e Savona (2010); Muller,

Valikangas e Merlyn (2005); Romijn e

Albaladejo (2002)

Gestão de Inovação

Número de produtos novos/total

vendas

Zizlavsky (2014); Cedergren, Wall, Norstrom

(2010); P&D / Gestão de Inovação

Orçamento em P&D

Adams, Fontana e Malerba (2013); Archibugi e

Cocoa (2005); Baležentisa e Balkienėa (2014);

Flor e Oltra (2004); Hipp e Grupp (2005);

Zizlavsky (2014); Abreu, Grinevich, Kitson e

Savona (2010); Cedergren, Wall, Norstrom

(2010); Muller, Valikangas e Merlyn (2005);

Romijn e Albaladejo (2002);

P&D / Gestão de Inovação

Royalties/ taxas de licença Archibugi e Cocoa (2005); Moris, Jankowski e

Perrolle (2008); Gestão de Inovação

Porcentagem de ideias aprovadas Nilsson e Ritzén (2014); Dewangan e Godse

(2014); Muller, Valikangas e Merlyn (2005) Gestão de Inovação

Lucro dos produtos novos/Gastos

com inovação

Zizlavsky (2014); Abreu, Grinevich, Kitson e

Savona (2010); Dewangan e Godse (2014);

Muller, Valikangas e Merlyn (2005)

Gestão de Inovação

Taxa de aumento das vendas Gama, Silva e Ataíde (2007) Gestão de Inovação

Tempo gasto com atividades de

inovação

Nilsson e Ritzén (2014); Zizlavsky (2014);

Muller, Valikangas e Merlyn (2005) Gestão de Inovação

Número de projetos iniciados, em

curso e concluídos Flor e Oltra (2004); Nilsson e Ritzén (2014); Gestão de Inovação

Número de ideias inovadoras

provenientes de agentes externos

Nilsson e Ritzén (2014); Abreu, Grinevich,

Kitson e Savona (2010); Dewangan e Godse

(2014);

Gestão de Inovação

Pesquisa de Opinião com

consumidores finais

Archibugi e Cocoa (2005); Flor e Oltra (2004);

Zizlavsky (2014); Abreu, Grinevich, Kitson e

Savona (2010); Dewangan e Godse (2014);

Gestão de Inovação

Page 15: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

15

5. Conclusões

O SMD para inovação é um método utilizado em organizações a fim de avaliar o desempenho

da inovação e assim auxiliar na visão sistemática de gestores em relação a questões

competitivas, por exemplo. Sendo esse último ponto uma justificativa importante por se

trabalhar com a inovação. A partir do modelo da organização e suas características, cria-se

determinados indicadores de inovação para medição e comparação de resultados, os quais,

muitas vezes, coincidem.

O trabalho apresentou uma RBS que objetivou levantar os sistemas de medição de

desempenho de inovação e os indicadores de inovação presentes na literatura.

Enfim, como resultado temos que o maior número de publicações se concentram a partir do

ano de 2010 e que os principais termos a utilizados como palavras-chave são innovation,

measurement/metrics/measures e performance, o que pode ajudar outros pesquisadores do

tema. Quanto a medição de desempenho de inovação, tem-se que os indicadores mais

frequentes na literatura são: número de patentes, gastos em P&D e quantidade de novos

produtos desenvolvidos. E o SMD de inovação pode ser classificado de duas maneiras: foco

em gestão de inovação e foco em P&D.

REFERÊNCIAS

ABREU, M. et al. Policies to enhance the ‗hidden innovation‘ in services: evidence and lessons from the UK.

The Service Industries Journal, v. 30, n.1, p. 99-118, 2010.

ADAMS, P.; FONTANA, R.; MALERBA, F. The magnitude of innovation by demand in a sectoral system: The

role of industrial users in semiconductors . Research Policy, v. 42, p. 1-14, 2013.

ADAMS, R.; BESSANT, J.; PHELPS, R. Innovation management measurement: A review. International

Journal of Management Reviews, v. 8, n. 1, p. 21-47, 2006.

ARCHIBUGI, D.; COCO, A. Measuring technological capabilities at the country level: A survey and a menu for

choice. Research Policy, v. 34, p. 175-194, 2005.

BALEZENTIS, A.; BALKIENE, K. Innovation policy measurement: analysis of Lithuania‘s case. Economic

Research, v. 27, p. 1-14, 2014.

BLOCH, C.; BUGGE, M. M. Public sector innovation - From theory to measurement. Structural Change and

Economic Dynamics, v. 27, p. 133-145, 2013.

Page 16: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

16

BRERETON, P. et al. Lessons from applying the systematic literature review process within the software

engineering domain. Journal of System and Software, v.80, p. 571-583, 2007.

BIOLCHINI, J. C. et al. Scientific research ontology to support systematic review in software engineering .

Advanced Engineering Informatics, v. 21, p. 133–151, 2007.

BREMSER, W. G.; BARSKY, N. P. Utilizing the balanced scorecard for R&D performance measurement. R&D

Management, v. 34, n. 3, 2004.

CANIBAÑO, L.; GARCIA-AYUSO, M.; SANCHEZ, P. Shortcomings in the Measurement of Innovation:

Implications for Accounting Standard Setting. Journal of Management and Governance, v. 4, p. 319-342,

2001.

CEDERGREN, S.; WALL, A.; NORSTROM, C. Evaluation of performance in a product development context.

Business Horizons, v. 53, p. 359—369, 2010.

CHIESA, V.; FRATTINI, F. Exploring the differences in performance measurement between research and

development: evidence from a multiple case study. R&D Management, v. 37, n. 4, 2007.

CORDERO, R. The measurement of innovation performance in the firm: an overview. Research Policy, v. 19,

n. 2, p. 185-192, 1990.

DEWAGAN, V.; GODSE, M. Towards a holistic enterprise innovation performance measurement system.

Technovation, v. 34, p. 536-545, 2014.

DERELI, T.; DURMUSOGLU, A.; DAIM, T. U.Buyer/seller collaboration through measurement of beliefs on

innovativeness of products. Computers in Industry, v. 62, p. 205–212, 2011.

DRIVA, H.; PAWAR, K. S.; MENON, U. Measuring product development performance in manufacturing

organisations. Int. J. Production Economics, v. 63, p. 147-159, 2000.

FLOR, M. L.; OLTRA, M. J. Identification of innovating firms through technological innovation indicators: an

application to the Spanish ceramic tile industry. Research Policy, v. 33, p. 323–336, 2004.

FRANCESCHINI, F.; GALETTO, M.; MAISANO, D. Management by Measurement: Designing Key

Indicators and Performance Measurement Systems, Springer Science & Business Media, 2007.

GUAN, J.; CHEN, K. Measuring the innovation production process: A cross-region empirical study of China‘s

high-tech innovations. Technovation, v. 30, p. 348-358, 2010.

HANSEN, M. T.; BIRKINSHAW, J. The Innovation Value Chain. Harvard business review, v. 85, n. 6, June,

p. 121, 2007.

HAIGH, R.; AMARATUNGA, D.; KULATUNGA, U. Structured approach to measure performance in

construction research and development, International Journal of Productivity and Performance

Management, v. 60, n. 3, p. 289-310, 2011.

HIPP, C.; GRUPP, H. Innovation in the service sector: The demand for service-specific innovation measurement

concepts and typologies. Research Policy, v. 34, p. 517-535, 2005.

KERSSEN-VAN DRONGELEN, I. C.; BILDERBEEK, J. R&D performance measurement: more than choosing

a set of metrics, R&D Management, v. 29, n. 1, p. 35-46, 1999.

KERSSENS-VAN DRONGELEN, I. C.; COOK, A. Design principles for the development of measurement

systems for research and development processes. R&D Management, v. 27, n. 4, 1997.

LIU, C. et al. Construction of index weight for organizational innovation in Taiwanese high-tech enterprises.

African Journal of Business Management, v. 4, n. 5, p. 594-598, May 2010.

Page 17: INVESTIGAÇÃO SOBRE SISTEMAS E INDICADORES DE …abepro.org.br › biblioteca › TN_WIC_233_358_28998.pdf · A forma de avaliação da inovação se dá por meio de indicadores

XXXVI ENCONTRO NACIONAL DE ENGENHARIA DE PRODUCÃO Contribuições da Engenharia de Produção para Melhores Práticas de Gestão e Modernização do Brasil

João_Pessoa/PB, Brasil, de 03 a 06 de outubro de 2016. .

17

LOCH, C. H.; TAPPER, U. A. S. Implementing a strategy-driven performance measurement system for an

applied research group. Journal of Product Innovation Management, v.19, n. 3, p.185-198, 2002.

MALDONADO, M. U.; DIAS, N.; VARVAKIS,G. Managing Innovation in Small High-technology Firms: A

Case Study in Brazil. Journal Technology Management Innovation, v. 4, n. 2, 2009.

MORIS, F.; JANKOWSKI, J.; PERROLLE, P. Advancing measures of innovation in the United States. J

Technol Transfer, v. 33, p. 123-130, 2008.

MULLER, A.; VALIKANGAS, L.; MERLYN, P. Metrics for innovation: guidelines for developing a

customized suite of innovation metrics. Strategy and Leadership, v. 33, n. 1, 2005.

NILSSON, S.; RITZÈN, S. Exploring the Use of Innovation Performance Measurement to Build Innovation

Capability in a Medical Device Company. Creativity and innovation management, v. 23, n. 2, 2014.

ORGANIZAÇÃO PARA COOPERAÇÃO E DESENVOLVIMENTO ECONÔMICO (OCDE). Manual de

Oslo: Diretrizes para coleta e interpretação de dados sobre inovação. Brasília: 2005.

PEARSON, A. W.; NIXON, W. A.; KERSSEN-van DRONGELEN, I. C. K. R&D as a business: what are the

implications for perfomance measurement?. R&D Management, v. 30, n. 4, 2000.

PEREZ-FREIJE, J.; ENKEL, E. Creative Tension in the Innovation Process: How to Support the Right

Capabilities. European Management Journal, v. 25, n. 1, p. 11-24, 2007.

QUADROS, R. Aprendendo a inovar: Padrões de Gestão da Inovação Tecnológica em Empresas Industriais

Brasileiras. In: Relatório de pesquisa ―Padrões de gestão da inovação tecnológica em empresas brasileiras‖

apresentado ao CNPq. Campinas: Universidade Estadual de Campinas, 2008.

REJEB, H. B.; MOREL-GUIMARÃES, L.; BOLY, V. Measuring innovation best practices: Improvement of an

innovation index integrating thres hold and synergy effects. Technovation, v. 28, p. 838-854, 2008.

ROACH, M.; COHEN, W. M. Lens or Prism? Patent Citations as a Measure of Knowledge Flows from Public

Research. Management Science, v. 59, n. 2, p. 504-525, February 2013.

ROMIJN, H.; ALBADEJO, M. Determinants of innovation capability in small electronics and software firms in

southeast England. Research Policy, v. 31, p. 1053-1067, 2002.

SCHRAMM, L. L.; NYIRFA, W.; GRISMER, K.; KRAMERS, J. Research and Development Impact

Assessment for Innovation-Enabling Organizations. Canadian Public Administration, v. 54, n. 4, p. 567-581,

2011.

STEFANOVITZ, J. P. Contribuições ao estudo da gestão da inovação: proposição conceitual e estudos de

casos. 2011. Tese (Doutorado em Engenharia) - Escola de Engenharia de São Carlos, Universidade de São

Paulo, São Carlos. 2011.

TRANFIELD, D.; DENYER, D.; SMART, P. Towards a methodology for developing evidence-informed

management knowledge by means of systematic review. British Journal of Management, v. 14, p. 207–222,

2003.

ZIZLAVSKY, O. The Balanced Scorecard: Innovative Performance Measurement and Management Control

System. J. Technology Management Innovation, v. 9, n. 3, 2014.