MODELO DE AVALIAO DE DESEMPENHO DE FOGES COM FOCO EM ERGONOMIA, UTILIZANDO O MTODO MCDA-C PERFORMANCE EVALUATION MODEL OF STOVES WITH

ERGONOMIC FOCUS USING THE MCDA-C METHOD Diogo Vegini* E-mail: diogovegini@gmail.com Felipe Tiago E. E. Back* E-mail: febacks@gmail.com Leonardo Ensslin* E-mail: ensslin@deps.ufsc.br Marcel V. Souza* E-mail: marcelviana@hotmail.com Sandra R. Ensslin* E-mail: sensslin@gmail.com Tiago P. S. O. Machado* E-mail: engtp@hotmail.com
*Universidade Federal de Santa Catarina, UFSC, Florianpolis, SC Resumo: Este artigo apresenta uma aplicao do mtodo Multicritrio de Apoio Deciso Construtivista (MCDA-C) em uma situao de avaliao de desempenho de foges. Utilizando tcnicas de estruturao de problemas, o MCDA-C permitiu aos decisores deste contexto visualizar os critrios que devem ser tidos em conta num processo de seleo de foges, auxiliando assim nas decises de elaborao de projetos de desenvolvimento de produtos, bem como permitiu a mensurao ordinal e cardinal do desempenho dos foges. A apresentao do estudo de caso deste trabalho ir utilizar como exemplo a rea de ergonomia dos foges. Palavras-chave: Avaliao de desempenho. Ergonomia. Foges. MCDA-C Abstract: This paper presents an application of multi-criteria decision aid constructivist method (MCDA-C) in a situation of evaluating the performance of stoves. Using techniques for structuring problems, the MCDA-C allows decision makers view the criteria that must be taken into account in the selection of stoves, thereby aiding in the decision-making projects for product development, and to enable ordinal and cardinal measurement of stoves performance. The case study of presented in this paper will use as an example the area of stoves ergonomics. Keywords: Performance evaluation. Ergonomics. Stoves. MCDA-C

1 INTRODUO O processo de desenvolvimento de produtos auxilia a criao de produtos mais competitivos e, dessa forma, permite que as empresas estejam preparadas para as recentes mudanas no ambiente de negcios como a intensificao da concorrncia, a reduo do ciclo de vida dos produtos, o avano das tecnologias e a busca constante por produtos de alta qualidade e baixo custo (FONSECA e
Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 423

ROZENFELD, 2012). As empresas buscam cada vez mais serem vistas como um processo de satisfao do cliente, no como um processo de produo de produtos. Os produtos so transitrios, mas os requisitos dos consumidores so contnuos (KOTLER, 2000). Logo o desempenho estratgico no desenvolvimento de produto est diretamente relacionado com as vantagens competitivas criadas pelas empresas frente aos seus concorrentes, como afirmam (WHEELWRIGHT e CLARK, 1992). Estas vantagens so alcanadas medida que as empresas identificam e traduzem as necessidades dos consumidores em produtos diversificados, onde a grande variedade de produtos gerada atravs de uma combinao eficaz de inovaes tecnolgicas, mantendo-se a competitividade com relao ao custo (CLARK e FUJIMOTO, 1991). Assim verificam-se oportunidades de aperfeioamento em conseguir definir o que realmente importante de forma explcita, atravs de um processo que gere conhecimento visando atender aos consumidores, ao invs de trabalhar com alternativas e, assim, entender quais sero os impactos de suas escolhas perante o seu objetivo geral. Para resolver a grande complexidade que a customizao criou no sistema de manufatura, necessrio utilizar uma ferramenta, para desmembrar a estrutura do produto em partes menores que permitam um melhor gerenciamento. Dessa forma pretende-se desenvolver um modelo de avaliao de desempenho de foges para uma indstria de eletrodomsticos, capaz de identificar, organizar, mensurar e integrar os aspectos julgados pelos decisores como necessrios e suficientes para avaliar um produto. Esse artigo se divide em cinco sees, alm dessa introduo. Na segunda seo se encontra a Fundamentao Terica da presente pesquisa. Na terceira seo apresentada a Metodologia de Pesquisa. Na quarta seo apresentam-se o Estudo de caso realizado para atingir o objetivo de pesquisa. A quinta seo compreende as Consideraes Finais. Por fim, so apresentadas as referncias bibliogrficas utilizadas ao longo do texto.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 424

2 FUNDAMENTAO TERICA O mtodo Multicritrio de Apoio Deciso construtivista selecionado para o presente, busca estruturar o contexto decisional tendo em vista desenvolver modelos nos quais os decisores possam fundamentar suas decises, a partir do que eles acreditam ser o mais adequado (ROY, 1990). Sua consolidao como instrumento cientfico ocorre somente a partir da dcada de 1990 com os trabalhos de (LANDRY, 1995; KEENEY, 1996; ROY, 1996; BANA E COSTA e ENSSLIN, 1999), dentre outros. Segundo (ROY e VANDERPOOTEN, 1996), o apoio deciso parte do pressuposto de que os processos decisrios so complexos e tem em conta os limites da objetividade, tornando-se, assim, de fundamental importncia a construo de modelos que contemplem a subjetividade dos atores envolvidos com a soluo de problemas e/ou com o ato de decidir. Os processos decisrios, nesta viso, passam a ser personalizados (ENSSLIN e VIANNA, 2008) O MCDA-C tem sua origem na Pesquisa Operacional (PO), a qual uma cincia desenvolvida no perodo da Segunda Guerra Mundial para lidar avaliao de desempenho e contextos decisrios (ENSSLIN et al., 2010). Com o passar dos anos a PO evoluiu passando a utilizar-se tambm de conhecimentos de outros ramos da cincia para suas aplicaes. Com isso, dividiu-se em dois grandes grupos: a PO Hard, que procura desenvolver modelos matemticos e a busca de soluo tima para os problemas analisados, e a PO Soft, que est mais voltada em estudar a estruturao dos contextos decisrios, incluindo a inovao, propondo-se a servir como ferramenta de avaliao e apoio deciso (ENSSLIN et al., 2010). Nesse sentido, o MCDA-C tem suas bases na PO Soft, pois tem como objetivo construir conhecimento sobre o contexto decisrio e servir como ferramenta de avaliao e apoio deciso. Alm disso, utiliza na sua aplicao o paradigma Construtivista para caracterizar a sua prtica cientfica, cujo principal diferencial est no desenvolvimento de modelos personalizados que levam em conta fortemente os objetivos e valores dos decisores, possibilitando ao mesmo participar ativamente em

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 425

todas as fases de desenvolvimento do modelo, legitimando-o constantemente (STOLT e ENSSLIN, 2009). (ROY, 1993; LANDRY, 1995) destacam a importncia da viso construtivista no processo decisrio, pois busca desenvolver o conhecimento atravs de um processo metodolgico e cientfico. Conforme (ENSSLIN et al., 2001), cada decisor percebe e interpreta de forma diferente o contexto decisrio. Percebe de forma diferente porque cada decisor tem seu prprio quadro de referncia mental. Interpreta de forma diferenciada porque cada decisor tem diferentes valores, objetivos, crenas, relaes sociais e de poder. Segundo (BRUNSWIK et al., 2001), cada indivduo enxerga um determinado evento e faz julgamentos sobre o mesmo conforme o meio em que est inserido e, principalmente, embasado no seu conhecimento e em suas experincias. Em outras palavras, enxergar com as suas prprias lentes (ENSSLIN et al., 2010). Com o intuito de expandir o conhecimento no decisor nos contextos com as caractersticas expostas, o mtodo MCDA-C utiliza instrumentos de estruturao de informaes capazes de permitir compreenso das conseqncias de decises nos aspectos que o decisor julga relevantes. Dessa forma, o mtodo MCDA-C um instrumento recomendado para aquelas situaes onde o decisor deseja melhorar seu entendimento da situao para poder atuar com consistncia, fundamentao, transparncia, domnio e propriedade para interagir com todos os atores envolvidos (LACERDA et al., 2010). O mtodo MCDA-C reconhece os limites da objetividade como proposto por (BANA E COSTA, 1993; LANDRY, 1995; KEENEY, 1996; ROY, 1996; ENSSLIN et al., 2001; ROY, 2005) e, por meio do uso de instrumentos tais como entrevistas abertas, brainstorming, grafos, mapas de relaes meio-fim, modelos de otimizao, etc..., os operacionaliza. E, assim, desenvolve no decisor um corpo de conhecimentos capaz de lhe permitir compreenso das consequncias de suas decises nos aspectos que ele julga importantes, sem impor os racionalismos da objetividade, to teis na fsica e na matemtica, porm dissociados dos contextos decisrios especficos em que os decisores necessitam de apoio para explicitar e mensurar os valores e preferncias que desejam ter em conta e no valores e preferncias genricos ou de outros casos similares, mesmo os bem sucedidos; desejam compreender e visualizar as

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 426

consequncias de suas decises em seus objetivos; desejam estabelecer os desempenhos de referncias em cada objetivo segundo sua percepo; desejam compreender a contribuio de cada critrio nos objetivos estratgicos e, por fim, desejam valer-se da expanso do conhecimento propiciado pelo processo de apoio deciso para identificar oportunidades de aperfeioamento. 2.1 Ergonomia e Usabilidade A palavra Ergonomia deriva do grego Ergon [trabalho] e nomos [normas, regras, leis]. Esta definida como uma disciplina cientfica relacionada ao entendimento das interaes entre os seres humanos e outros elementos ou sistemas, e aplicao de teorias, princpios, dados e mtodos a projetos a fim de aperfeioar o bem estar humano e o desempenho global do sistema (POLETTO et al., 2008). A usabilidade tem suas razes nas reas da ergonomia, psicologia, engenharias e desenho industrial. uma filosofia que coloca o usurio no centro de todo o processo de desenvolvimento do produto, ou seja, os objetivos do produto, seu contexto de uso e todos os aspectos das tarefas que o produto ir suportar so derivados a partir da perspectiva do usurio (BETIOL, 2004). De acordo com a norma (NBR 9241-11, 2002) usabilidade uma medida pela qual um produto pode ser utilizado por usurios especficos para atingir objetivos especficos com eficcia, eficincia e satisfao em um contexto especfico 3 METODOLOGIA DE PESQUISA A seo de metodologia da pesquisa aborda os procedimentos para a construo do modelo multicritrio.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 427

3.1 Enquadramento Metodolgico A seo de enquadramento metodolgico visa tornar explcitos os

procedimentos e tcnicas utilizadas, alm de facilitar a pesquisa tendo em conta um processo bem definido (BACK et al., 2012 No Prelo). Esta pesquisa pode ser caracterizada como aplicada de carter exploratria, o que segundo (BORTOLLUZZI, 2009), objetiva proporcionar maior familiaridade com o problema, para torn-lo mais explcito. Alm disso a pesquisa se caracteriza como qualiquantitativa. Os procedimentos para coleta de dados so de origem primria e secundria, pois foram obtidas por meio de entrevistas com os decisores e informaes da empresa. Os dados foram utilizados no estudo de caso voltado para avaliao de desempenho de foges, utilizando como instrumento de interveno o mtodo MCDA-C. 3.2 Procedimentos para Construo do Modelo Multicritrio A Figura 1 apresenta graficamente a construo do modelo de avaliao de desempenho que realizada no mtodo MCDA-C em forma sistmica e sistemtica em trs fases que facilitam seu entendimento e aplicao: Fase de estruturao, Fase de avaliao e Fase de recomendaes (BANA E COSTA e ENSSLIN, 1999).

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 428

Figura 1 - Fases do MCDA-C

Fonte: Adaptado de (ENSSLIN et al., 2000)

3.2.1 Estruturao A estruturao a fase inicial do mtodo e se constitui no fator mais crtico ao sucesso, pois visa o entendimento do problema e de todo o contexto onde o mesmo est inserido (ENSSLIN et al., 2005). Essa fase contribui ao identificar, organizar e mensurar ordinalmente as preocupaes que o decisor considera suficientes e necessrias para a situao decisional. A estruturao se divide usualmente em quatro etapas: contextualizao, identificao dos elementos primrios de avaliao (EPAS), construo de mapas de relao meio-fim em paralelo com a construo das estruturas hierrquicas de objetivos e construo dos descritores. A etapa de contextualizao aborda o ambiente onde o problema est inserido, quem so os atores envolvidos e quais os objetivos almejados (BORTOLUZZI et al., 2010) A segunda etapa da estruturao realizada por meio de entrevistas abertas onde o decisor incentivado a mostrar suas preocupaes, desejos e objetivos, denominados Elementos Primrios de Avaliao (EPAs), que so os fatores

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 429

essenciais do sistema de valores dos decisores. A seguir, solicitado ao decisor para expandir o entendimento de cada EPA identificando a direo de preferncia a ele subjacente assim como seu oposto psicolgico associado s conseqncias que se deseja evitar. Cada EPA gera um ou mais conceitos orientados para a ao. Ento, o decisor incentivado a agrupar estes conceitos em clusters. A terceira etapa consiste em demonstrar de uma forma explicativa as preocupaes referentes ao problema construindo mapas de relao meio-fim utilizando os clusters gerados na segunda etapa. Nesta etapa usual que novos conceitos emirjam (ENSSLIN et al., 2001). Cada cluster representa uma dimenso de avaliao compostas por candidatos a Pontos de Vista Fundamentais (PVF). Os conceitos geradores de cada candidato a PVF so utilizados para iniciar a construo dos mapas de relao meio-fim, seguindo o mtodo proposto por (EDEN et al., 1983) para expandir o entendimento do contexto, segundo a percepo do decisor e identificar quais os aspectos julgados como relevantes. Este processo continua at que se tenha alcanado um grau de entendimento que permita estabelecer o conjunto de pontos de vistas que alinhem os objetivos estratgicos representados pelos PVFs do contexto com as propriedades operacionais. O mapa de relaes meio-fim gerado , ento, transformado em uma Estrutura Hierrquica de Valor que representa os pontos de vista do mapa anterior em uma forma explicativa. Finalizando a fase de estruturao so desenvolvidos os descritores, os quais podem ser definidos como escalas ordinais para descrever e mensurar o desempenho dos critrios de avaliao para cada PVF (ENSSLIN et al., 2001). Com o propsito de preparar estes indicadores de desempenho para serem utilizados em um modelo compensatrio so estabelecidos dois nveis de referncia denominados Bom e Neutro utilizando-se o processo proposto por (BANA E COSTA e ENSSLIN, 1999). Com os descritores encerrado o processo de gerao de conhecimento qualitativo.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 430

3.2.2 Avaliao A segunda fase da construo do modelo multicritrio a fase de avaliao que consiste na incorporao de informaes preferenciais dos decisores que permitam transformar as escalas ordinais em cardinais. A avaliao se divide em etapas de Construo das funes de valor e Identificao das taxas de substituio. A funo de valor explicita a diferena de atratividade entre os nveis e as Taxas de Substituio, a relao de compensao entre a atratividade dos intervalos de referncia dos Pontos de Vista considerados (ENSSLIN et al., 2005). Para (ENSSLIN et al., 2001) as funes de valor so um instrumento para auxiliar os decisores a expressar, em forma numrica, suas preferncias. Para todas as funes de valor foram identificados dois nveis de referncia, chamados de nvel Bom e nvel Neutro. O nvel Bom corresponde transio de um desempenho em nvel de mercado para excelncia. O nvel Neutro corresp onde transio do nvel comprometedor para o de mercado. O nvel Neutro da escala foi fixado em 0 (zero) pontos e o nvel Bom em 100 (cem) pontos, fazendo com que os nveis Bom e Neutro tenham uma representatividade equivalente em todos os critr ios de avaliao do modelo (BORTOLUZZI et al., 2010; DIENSTMANN et al., No Prelo). Na segunda etapa da fase de avaliao so identificadas as taxas de substituio, com o objetivo de permitir a avaliao global do modelo. Essas taxas podem ser calculadas com auxilio do software MACBETH X2 (Measuring Attractiveness by a Categorical Based Evaluation Technique) desenvolvido por (BANA E COSTA e VANSNICK, 2005) utilizando-se comparao par a par, permitindo com isso agregar as diversas dimenses de avaliao atravs de uma funo de agregao aditiva na forma de uma soma ponderada. Os modelos construdos pelo mtodo MCDA-C permitem explicitar a avaliao em forma numrica e/ou grfica. Isto facilita a identificao e compreenso da intensidade dos pontos fortes e fracos das alternativas avaliadas.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 431

3.2.3 Recomendaes A terceira fase do projeto a fase de recomendaes, que consiste em gerar aes para melhorar o desempenho em relao situao atual. Essas aes so organizadas em estratgias para aperfeioamento do desempenho que melhor atenda aos objetivos do decisor. Nessa fase tambm possvel verificar a estabilidade das opes de escolha do decisor, realizando uma anlise de sensibilidade no impacto das alternativas nas escalas, nas diferenas de atratividade das escalas cardinais, e nas taxas de compensao (ENSSLIN et al., 2001). possvel verificar que a fase de recomendaes evidencia um processo contnuo de expanso do entendimento do contexto ao buscar compreender as consequncias das possveis decises nos critrios representativos das dimenses consideradas relevantes pelo decisor, bem como no contexto como um todo (ENSSLIN et al., 2001). 4 ESTUDO DE CASO Tendo cincia das incertezas sobre a aceitao de determinados produtos pelos consumidores e, alm disso, da complexidade presente nas atividades dirias dos departamentos de desenvolvimento e inovao de produtos, a aplicao do mtodo MCDA-C neste estudo de caso faz-se necessria e justificada pela capacidade de aprofundar os conhecimentos dos envolvidos sobre o assunto em questo: foges. O MCDA-C tambm permite identificar quais so os pontos mais importantes para os decisores e, desta forma, orienta a atuao em pontos especficos e identifica o que a organizao dever fazer para alcanar nveis de excelncia. O aprofundamento no estudo resultou em um completo modelo de avaliao de desempenho de foges com dezenas de indicadores, que permitiram despertar para algumas oportunidades de inovao. No entanto, para melhor demonstrar a utilizao do mtodo empregado, representar-se- apenas uma das reas de preocupao do modelo: a usabilidade e dentro dela o foco ser a ergonomia.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 432

4.1 Fase de Estruturao Nesta fase ser construdo um modelo de avaliao de desempenho de foges para dois funcionrios de uma organizao que produz produtos da linha branca, os quais trabalham no departamento de desenvolvimento de foges. Portanto, ficam assim definidos como os decisores para a problemtica apresentada e sob as lentes de quem a situao ser percebida e interpretada, ou seja, a quem o modelo de apoio deciso se destina: os Engenheiros de desenvolvimento de foges e consumidores, identificados neste artigo como: Decisor 1 e Decisor 2. Os decisores nesse estudo de caso tem as mesmas atribuies e participam da construo do modelo sempre juntos. Auxiliando na construo do modelo por meio de entrevistas em grupo os tambm engenheiros identificados neste artigo como: Facilitador 1 e Facilitador 2. Os demais atores envolvidos so os chamados intervenientes que influenciam os decisores quanto a seus valores: os colegas de trabalho, a esposa do Decisor 1 e a Me do Decisor 2. Tambm existem aqueles que podem influenciar indiretamente, so os chamados agidos, neste caso, os demais familiares (pais, sogros, irmos) e funcionrios da empresa no diretamente ligados aos decisores. Vale ressaltar que os agidos no participam diretamente do processo proposto pelo MCDA-C. Estes apenas sofrem as consequncias das escolhas dos decisores e podem em algum momento influenciar seus valores e preferncias, porm sem grandes impactos. O Quadro 1 abaixo lista todos os atores envolvidos no contexto do problema.
Quadro 1- Atores Atores Decisores Facilitadores

Descrio dos atores Decisor 1 (Engenheiro de Produto e consumidor) Decisor 2 (Engenheiro de Produto e consumidor) Facilitador 1 (Engenheiro de Processos) Facilitador 2 (Engenheiro de Produto) Colegas de trabalho de ambos Esposa do Decisor 1 Me do Decisor 2 Demais familiares de ambos (pais, sogros, irmos)

Intervenientes

Funcionrios da empresa no diretamente ligados aos decisores Fonte: Elaborado pelos autores (2010).

Agidos

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 433

Definiu-se como sendo o rtulo do problema: Modelo de avaliao de desempenho de foges. Logo nas primeiras reunies os facilitadores solicitaram que os decisores discorressem a respeito do problema e, por meio de suas declaraes foram identificadas as caractersticas do contexto que impactam seus valores. Neste primeiro momento foram listados 83 EPAs, no Quadro 2 esto representados apenas 5 deles. Vale ressaltar que esses 83 EPAS no abordavam somente a rea de usabilidade, mas sim outras reas como esttica e sustentabilidade.
Quadro 2- Alguns EPAs identificados EPA 1 2 3 4 Substituio lmpada Facilidade de usar Enxergar Espao

Descrio

5 Puxador que facilite a pega Fonte: Elaborado pelos autores (2010).

Aps esta etapa, os facilitadores se preocuparam em ampliar o entendimento dos decisores sobre cada EPA, identificando a caracterstica desejvel atravs da nomeao de seu oposto psicolgico mnimo grau aceitvel para aquela caracterstica. O Quadro 3 apresenta os conceitos formados a partir dos EPAs apresentados no Quadro 2. Para entendimento do grau de aceitabilidade das descries, l-se o smbolo ... como ao invs de ou prefervel a. O mesmo trabalho foi realizado com todos os demais EPAs, formando a mesma quantidade de conceitos.
Quadro 3- Alguns Conceitos Conceito Descrio Ter facilidade para trocar a lmpada quando ela queimar No conseguir trocar a C1 lmpada e ter que chamar um tcnico. Ter facilidade para Montar/Desmontar os queimadores Encaixar os queimadores na C2 posio errada Ter um forno com uma boa iluminao Ter que abrir a porta para verificar como est C3 o alimento. Ter flexibilidade para movimentar panelas e formas No poder virar formas no forno C4 ou ter dificuldade para movimentar as panelas na mesa. C5 Ter um fogo que tenha puxador ergonmico Ter dificuldade para abrir o forno. Fonte: Elaborado pelos autores (2010).

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 434

Embasados nos conceitos criados, os decisores foram instigados a refletirem sobre um nmero de trs a cinco grandes preocupaes que explicassem o problema em questo. Um a um os conceitos foram classificados e, ao passo que algum conceito no se encaixasse em nenhuma das reas uma nova rea deveria ser criada. importante e necessrio ressaltar que cada rea deve ser explicada no pelo nome que recebe, mas sim, pelos conceitos que nela esto contidos. Sendo assim, as primeiras reas nomeadas foram: Esttica, Sustentabilidade e Usabilidade. Ainda seguindo uma anlise top down, rea por rea, os decisores refletiram sobre subreas de preocupao, alocando os conceitos da mesma forma que o passo anterior. Desta forma, a Figura 2 revela as trs macro reas de preocupao e oito sub-reas de preocupao e os seus respectivos conceitos.
Figura 2- reas e subreas de preocupao e alocao dos conceitos

Fonte: Elaborado pelos autores (2010).

A partir de ento, passou-se a analisar os conceitos no sentido contrrio, bottom up, ampliando o entendimento sobre cada rea por meio da construo dos mapas meio-fim (BANA E COSTA e ENSSLIN, 1999; ENSSLIN et al., 2000). No caso da subrea de preocupao Manuseio, os conceitos nele contidos foram analisados pelos decisores atravs das seguintes reflexes: Como eu posso obter esse conceito? e Por que esse conceito importante?. Procurando sempre analisar a suficincia e a necessidade de cada um deles. Por meio deste mapa de raciocnio foram identificados 4 (quatro) novos conceitos no lembrados

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 435

anteriormente pelos decisores. No mapa de raciocnio cada conceito-meio deve ser explicado pelos conceitos abaixo dele contidos, formando os chamados clusters grupo de conceitos que explicam uma determinada preocupao. Logo, ao analisar os clusters no sentido bottom up, 3 (trs) subreas dentro de Manuseio foram identificadas: Fcil, Efetivo e Verstil. A Figura 3 apresenta alguns dos subclusters identificados dentro da rea de preocupao Usabilidade, no cluster Manuseio.
Figura 3 - Mapa Meios-fins para o cluster Manuseio

Fonte: Elaborado pelos autores (2010).

Para aumentar o nvel de entendimento sobre o assunto a estrutura de relaes de influncia acima representada deve ser convertida em uma Estrutura Hierrquica de Valor. De acordo com (KEENEY, 1996; ENSSLIN et al., 2001; ROY, 2005) os clusters devem ser analisados quanto a serem: essenciais, controlveis, completos, mensurveis, operacionais, isolveis, no-redundantes, concisos e compreensveis. Assim que os clusters atenderem a esses requisitos eles podero ser convertidos para a Estrutura Hierrquica de Valor, se tornando um Ponto de Vista Fundamental (PVF), como representado na Figura 4 (LACERDA et al., 2011).
Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 436

Da mesma maneira foram analisados os subclusters que deram origem aos chamados Pontos de Vista Elementares (PVEs). Repetiu-se o procedimento at chegar a PVEs que representassem o contexto e que, alm disso, permitissem a mensurao de maneira objetiva e no-ambgua. Sendo assim, para cada PVE construiu-se uma escala ordinal. Primeiramente, definiram-se os nveis ncoras Bom e Neutro e, aps, foram agregados aos descritores nveis de excelncia, aqueles que superam as expectativas dos decisores; nveis comprometedores, aqueles que ficam abaixo do nvel neutro; e os nveis competitivos, ou seja, que ficam entre os nveis ncoras.
Figura 4- Estrutura Hierrquica de Valor

Fonte: Elaborado pelos autores (2010).

A Figura 5 demonstra a rvore de Valor criada para o cluster Ergonomia e os descritores criados para cada PVE. No modelo completo, foram desenvolvidos 120 descritores. Vale ressaltar que durante a construo do conhecimento, novos conceitos foram criados, resultando neste nmero de descritores.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 437

Figura 5- rvore hierrquica de valor, PVEs e escalas ordinais do PVF Ergonomia

Fonte: Elaborado pelos autores (2010).

Finalizando esta etapa, conforme o

mtodo MCDA-C, conseguiu-se

desenvolver o entendimento do contexto e express-lo por meio de escalas ordinais. 4.2 Fase de Avaliao A segunda fase da construo do modelo multicritrio a fase de avaliao que consiste na incorporao de informaes preferenciais dos decisores que permitam transformar as escalas ordinais em cardinais. A avaliao se divide em etapas de Construo das funes de valor e Identificao das taxas de substituio. Devido aos descritores utilizarem escalas ordinais (qualitativas), nesta etapa do processo, no se deve realizar operaes numricas, para isso, deve-se realizar a transformao das escalas ordinais em escalas cardinais (quantitativas). O MCDAC recomenda a participao do decisor, para julgar as diferenas de atratividade

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 438

entre os nveis de impacto dos descritores (ENSSLIN et al., 2001) e auxiliar na construo das funes de valor. 4.2.1 Funes de Valor Para construo das Funes de Valor optou-se por utilizar o software MACBETH 2.3 (Measuring Attractiveness by Categorical Based Evaluation Technique). Primeiramente, so atribudos os nveis Bom e Neutro determinados para cada descritor, que representam a pontuao 100 e 0, respectivamente. O decisor deve ento atribuir a diferena de atratividade para cada nvel de um descritor, utilizando-se de uma escala semntica de sete nveis: Extrema, Muito Forte, Forte, Moderada, Fraca, Muito Fraca e Nula (BANA E COSTA e VANSNICK, 1997). A Figura 6 apresenta o processo completo de transformao de um descritor (escala ordinal) em uma Funo de Valor (escala cardinal): o descritor Fora de abertura da porta; a Matriz de Julgamento; a Funo de Valor, numrica e grfica. Esse procedimento realizado para todos os descritores. A Figura 7 apresenta as escalas cardinais construdas para o PVF Ergonomia.
Figura 6- Transformao do Descritor Fora de abertura da porta em Funo de Valor por meio do MACBETH.

Fonte: Elaborado pelos autores (2010).

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 439

Figura 7 - Escalas cardinais do PVF Ergonomia

Fonte: Elaborado pelos autores (2010).

Nesta etapa do processo ter-se- a mensurao cardinal individual de cada aspecto operacional considerado importante pelo decisor. Porm, ainda no possvel avaliar o desempenho em nveis tticos, atravs dos Pontos de Vista Elementares, e nem dos aspectos julgados estratgicos, atravs dos Pontos de Vista Fundamentais. Para realizar esta avaliao global necessrio realizar o processo de integrao de todos os pontos de vistas, segundo a percepo dos decisores, aplicando-se taxas de substituio conforme (SILVEIRA, 2007), que sero apresentadas na prxima seo. Neste trabalho todas as taxas foram definidas com a participao dos dois decisores, utilizando-se reunies em grupos com os facilitadores para chegar a uma unificao de suas preferncias (LACERDA et al., 2011).

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 440

4.2.2 Taxas de Substituio

A Figura 8 identifica a estrutura hierrquica abaixo do PVE Acesso, que exemplificar a integrao por meio da definio das taxas (W1 e W2), que representam o juzo de valor preferencial do decisor.
Figura 8- Estrutura Hierrquica de Valor com destaque para os PVEs Fatores Ergonmicos e Abertura de Porta.

Fonte: Elaborado pelos autores (2010).

Criam-se ento alternativas potenciais (A1, A2, e A3) que representem a contribuio da passagem do nvel Neutro para o nvel Bom, em cada um dos critrios que se deseja determinar as taxas, assim como uma ao de referncia com desempenho Neutro em todos os pontos de vista, conforme apresentado na Figura 9.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 441

Figura 9 - Alternativas potenciais para determinar as taxas de substituio com a indicao dos respectivos nveis Bom e Neutro

Fonte: Elaborado pelos autores (2010).

Em seguida, realizou-se uma ordenao preferencial das alternativas, por meio de uma matriz de ordenao segundo (ROBERTS, 1979) conforme demonstrado no Quadro 4. Quando o decisor preferir a alternativa da linha, marcase na coluna com a qual est comparando o valor 1, em caso contrrio, zero. Ao final somam-se os valores das linhas e se obtm o grau de preferncia conforme o valor da soma. Gera-se, desta forma, a hierarquizao das alternativas, cuja ordem reflete a preferncia do decisor ao passar do nvel Neutro para o nvel Bom em cada PVE.
Quadro 4- Matriz de Roberts da comparao das alternativas A1, A2 e A3.

Fonte: Elaborado pelos autores (2010).

Na seqncia, utilizando a comparao par a par, atravs do software MACBETH, solicitado ao decisor que julgue semanticamente a diferena de atratividade quando se troca de uma alternativa para outra, como pode ser observado na Figura 10. As categorias semnticas utilizadas so as mesmas empregadas para obter as Funes de Valor.
Figura 10- Taxas de substituio calculadas pelo MACBETH para as alternativas A1, A2 e A3.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 442

Fonte: Elaborado pelos autores (2010).

Este processo realizado para todos os PVEs da estrutura hierrquica. A Figura 11 ilustra a Estrutura Hierrquica de Valor com as Taxas de Substituio do modelo construdo, para os Pontos de Vista. De posse ento das funes de valor e das taxas de substituio possvel calcular o valor da equao global de avaliao do modelo, que ser vista na prxima seo.
Figura 11 - Estrutura Hierrquica de Valor com as Taxas de Substituio

Fonte: Elaborado pelos autores (2010).

4.2.3 Avaliao Global e Perfil de Impacto da Situao Atual Atravs da Estrutura Hierrquica de Valor construda, descritores e taxas de substituio, possvel determinar o impacto global da alternativa escolhida atravs do somatrio dos modelos de cada PVF conforme equao 1:

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 443

(1) V(a) = 0,0810.VPVF1(a) + 0,1015.VPVF2(a) + 0,2385.VPVF3(a) + 0,1420.VPVF4(a) + 0,0580.VPVF5(a) + 0,0875.VPVF6(a) + 0,1575.VPVF7(a) + 0,1050.VPVF8(a) Onde V(a) = Pontuao global para o modelo construdo; Vale destacar que a constante que multiplica cada PVF fruto do produto entre as taxas de substituio do PVF com sua respectiva rea de Preocupao. No caso da primeira constante 0,0810por exemplo da equao 1, obtida atravs da multiplicao de 0,018*0,045 (18 e 45%) ilustrado na figura 11. J com a equao 2 possvel calcular a pontuao de cada PVF:
n

(2) V PVF (a) = W i,k . vi,k (a)

k i=1

Em que: VPVF` : valor global da ao a do PVFk, para k = 1, m;

k

vi,k(a): valor parcial da ao a no critrio i, i = 1, ...n, do PVFk; a: nvel de impacto da ao a; wi,k : taxas de substituio do critrio i, i = 1, ... n, do PVF k; nk: nmero de critrios do PVFk; k: nmero do PVF; Para o PVF7 ilustrado na Figura 11, ter-se-ia a equao (2): (2) VPVF7 = 0,44{0,40*(0,50*VFatores(a) + 0,50*VFora_Abrir(a)) + 0,35*(0,50*VTransp(a) + 0,50*VIntens.(a)) + 0,25*(1,00*VFora_Arrastar) } Aplicando-se o mesmo principio para as reas de preocupao, ter-se- a equao (3) representando o impacto no modelo global de uma ao na rea de preocupao Usabilidade: (3) V(a) = 0,35*{0,25*VPVF6(a) + 0,45*VPVF7(a) + 0,30*VPVF8(a)} Aps aplicar este processo para todas as reas de preocupao, ter-se- o modelo global da anlise multicritrio para a avaliao de desempenho de foges.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 444

Nesta etapa pode-se traar o Perfil de Impacto do status quo, que permite identificar onde esto os pontos fortes de cada avaliao e em quais PVFs residem as principais oportunidades de melhoria, como ilustra a Figura 12.
Figura 12 - Perfil de Impacto do status quo de dois foges avaliados (modelos High e Low).

58,4 35,7

Fonte: Elaborado pelos autores (2010)

Como pode ser verificado, o perfil dos dois foges avaliados esto alinhados com os critrios estratgicos da empresa, por no possurem nenhum PFV em nvel comprometedor. O modelo, ao ser construdo segundo os valores e preferncias do decisor, permitiu visualizar o desempenho comparativo entre os dois foges. Este entendimento ajuda a identificar os locais especficos onde atuar, como o nico PVF em que o Fogo High possui desempenho inferior ao Fogo Low, observado no PVF4 Competitividade, explicado pela empresa devido ao alto custo daquele modelo. Agora, com o entendimento de onde conveniente atuar, a empresa necessita identificar aes e avaliar o impacto das mesmas para o alcance dos objetivos estratgicos. No MCDA-C esta etapa denominada Recomendaes. 4.2.4 Anlise de Sensibilidade Antes de realizar a fase de recomendaes, a MCDA-C recomenda a aplicao de uma Anlise de Sensibilidade, que testa a resposta do desempenho

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 445

das alternativas a variaes dos seus parmetros. Com isso, possvel tambm avaliar a consistncia das aes de aperfeioamento identificadas (ENSSLIN et al., 2000). A taxa de substituio da rea de usabilidade era de 35% e foi obtida atravs dos julgamentos de valor do decisor no MACBETH, este por sua vez permite que a variao nos julgamentos do decisor esteja entre 33% at 38%. Estas taxas no foram suficientes para inverter os resultados do Fogo High pelo Fogo low. Esse procedimento foi realizado para as demais taxas de substituio do mesmo nvel hierrquico e a anlise mostrou que o modelo robusto para qualquer uma das situaes testadas, uma vez que os resultados foram consistentes. 4.3 Fase de Recomendaes na etapa de aperfeioamento que o MCDA-C apresenta o seu diferencial perante os demais mtodos uma vez que esta capaz de identificar de forma explcita o que importante, quantificar de forma cardinal os aspectos julgados relevantes pelo decisor e assim apresentar oportunidades de melhoria (ENSSLIN et al., 2010) O MCDA-C fundamentado em um processo cclico de aperfeioamento que se utiliza de descritores definidos para o modelo de avaliao de desempenho com a participao do decisor que permitem estabelecer o impacto da avaliao atual (status quo) dos desempenhos locais e globais do objeto em questo e apresenta os possveis campos de aes de melhorias e suas respectivas consequncias. O MCDA-C construtivista e por isso capaz de gerar conhecimento durante o processo, proporcionando assim inmeras oportunidades de aperfeioamento para os modelos de foges estudados. Deste modo, os autores recomendam uma priorizao dos PVFs identificados no intuito de se obter os resultados mais eficientes e eficazes. Assim, foi estabelecido um processo composto por cinco etapas: Frum de debate em nvel estratgico para priorizao, Oportunidade nos descritores, Oportunidades nos recursos existentes, Identificao das aes mais convenientes e Justificao das decises (ENSSLIN et al., 2010).

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 446

4.3.1 Frum de debate em nvel estratgico para priorizao Com um representante de cada rea da empresa em nvel estratgico, apresentou-se o resultado da avaliao do desempenho dos modelos de foges low e high os quais apresentaram pontuaes globais de 35,7 e 58,4 respectivamente. Aps anlise dos PVFs de cada modelo assim como sua influncia no desempenho global, ficou clara uma lacuna expressiva para melhorias no modelo low. Alm da constatao acima, o grupo responsvel pelo planejamento e decises estratgicas da empresa, apresentou o plano diretor no qual havia um foco no modelo low, pois o mesmo apresentava resultados financeiros negativos ao passo que o modelo high era lucrativo e ainda apresentava grande aceitao por parte dos seus consumidores. 4.3.2 Oportunidade nos descritores Com base nas informaes levantadas, decidiu-se focar no aperfeioamento do resultado global do modelo low e estabelecendo como plano de aperfeioamento, elevar seus descritores dos nveis atuais ao nvel do modelo high devido ao fato do sucesso comprovado pelo grupo estratgico da empresa e alinhamento com o plano estratgico da empresa. A Figura 14 representa no eixo das abscissas os descritores com seus impactos globais na avaliao de desempenho do modelo low ao passar seus descritores do nvel atual ao nvel do modelo high indicado no eixo das ordenadas, evidenciando a rea de preocupao relacionada a cada descritor, com o objetivo de visualizar graficamente e posteriormente numericamente, a distribuio dos impactos nas reas de preocupaes Esttica, Sustentabilidade e Usabilidade. Ao consolidar os dados foi possvel verificar que ao passar os descritores do modelo low ao nvel do modelo high, seria possvel identificar um aperfeioamento total de 32 pontos no impacto global do modelo de avaliao de desempenho de foges. Desse total de pontos, ficou evidenciado no grfico tambm que apenas 22

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 447

descritores contribuem com 29 pontos, ou seja, se teria aproximadamente 25% dos descritores impactando em 90% do resultado global.
Figura 14 - Impacto no resultado global do modelo low dos 22 primeiros descritores ao pass-los do nvel atual para o nvel do modelo high.

Fonte: Elaborado pelos autores (2010)

4.3.3 Oportunidades nos recursos existentes Na etapa seguinte, resolveu-se considerar os recursos da empresa com relao s oportunidades de melhoria frente s reas de preocupaes Esttica, Sustentabilidade e Usabilidade. Novamente com o grupo estratgico reunido, representantes de todas as reas elaboraram um mapa que correlacionasse as trs reas de preocupao com o intuito de identificar todos os recursos necessrios para os aperfeioamentos desejveis. Com base nesses apontamentos, o grupo verificou que a rea de preocupao Esttica apresentava melhor relao custo x benefcio no impacto global do modelo, alm do fato de estar alinhado com o planejamento estratgico da empresa. 4.3.4 Identificao das aes mais convenientes O planejamento estratgico da empresa apontara para investimentos na direo do aperfeioamento do modelo low e ainda tendo como estratgia, passar

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 448

seus descritores do nvel atual para o nvel do modelo high. Alm disso, pode-se observar no modelo que poucos descritores representavam aproximadamente 90% do impacto global atravs da estratgia selecionada. A rea de preocupao Esttica contribua com 61%, seguida da rea de preocupao Usabilidade 33% e por fim Sustentabilidade com 6%. Nos ltimos anos em que a empresa do estudo de caso registrou seus investimentos e para estes avaliou o resultado de seus projetos. Ficou possvel atravs da anlise do banco de dados que as aes vinculadas Esttica tiveram melhores resultados. Podem-se destacar alguns destaques que foram extrados dos registros: (i) investimentos com cerca de 35% menor face as demais linhas de projetos que tinham que dispor de grande nmero de engenheiros, grande aporte de recursos para modificao fabril, envolvimento das reas suporte, testes, entre outras; (ii) devido ao baixo risco em termos de funcionamento e interao com outros componentes, projetos focados em Esttica tiveram um tero do tempo dos demais, o que permite colher o resultado mais cedo; e (iii) aposta dos diretores e constatao atravs de atividades internas na empresa mostraram tambm que consumidores se apaixonam pelo produto antes mesmo de toc-los, ou seja, a primeira impresso de um produto em um grande centro expositor por exemplo a que fica, sendo um fator que diferencia e aumentam as chances de venda do produto. Desta forma, foi evidenciada a rea de preocupao Esttica como a rea de melhor relao custo x benefcio para a empresa em questo. 4.3.5 Justificao das decises Com base no conhecimento adquirido no modelo e nas anlises realizadas a partir dele, decidiu-se focar no aperfeioamento da rea de preocupao Esttica, pois a mesma representa um possvel aperfeioamento com impacto no resultado global de 19,67 pontos e, alm disso, 11 descritores dos 22 descritores que mais impactam no resultado global estavam relacionados Esttica. Com base nesta deciso traou-se um plano de ao no qual foram relacionados os descritores de

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 449

esttica tendo como meta a passagem do seu nvel atual para o nvel do modelo high (metas). Contando com o sucesso deste plano e o atendimento das metas estabelecidas espera-se que o modelo low alcance uma pontuao global 55,37 pontos, considerando sua pontuao atual de 35,7 pontos. Por fim, com base no conhecimento adquirido atravs do MCDA-C, entendimento da rea conveniente de atuao, identificao dos nveis atuais de desempenho com possibilidade de aperfeioamentos, obteno clara dos impactos tanto locais quanto globais, o grupo de trabalho recomendou o lanamento de um novo fogo com foco das alteraes estticas (Face Lift), j tendo em mos o plano de ao necessrio para obteno do sucesso e ainda, o valor necessrio para obter cada incremento na pontuao global do modelo. Com essa fundamentao possvel ainda demonstrar para os gestores o impacto no resultado final se esses decidirem realizar algum corte no oramento, propiciando a reflexo profunda antes de qualquer ao direcionada apenas pelo vetor custo. Assim, uma etapa que est cada vez mais comum nas empresas com as atividades de oramentao (redues padro de 30%) sem o entendimento do seu impacto tendem a diminuir, atravs do conhecimento gerado com todo o processo. 5 CONSIDERAES FINAIS Com a utilizao do MCDA-C, buscou-se desenvolver um modelo para avaliar o desempenho de foges de uma empresa multinacional, em um contexto especfico e para um grupo de atores definidos, com o objetivo de gerar um melhor entendimento do assunto e servir de subsidio ao processo de gerar aes potenciais de aperfeioamento pelo fato deste mtodo possuir um processo de estruturao dos critrios identificados como relevantes pelo decisor. Dessa forma, esse artigo tem como seu objetivo geral propor um modelo de avaliao de desempenho de foges que possibilite identificar, mensurar e integrar as dimenses julgadas pelo decisor como necessrias e suficientes no produto. Este modelo foi legitimado pelo decisor em cada etapa de sua construo e com sua utilizao, o decisor e a

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 450

empresa fabricante dos foges passaram a contar com um instrumento que oportuniza a melhoria contnua dos produtos, aberto a aes de aperfeioamento de formas inovadoras e mais assertivas. Como limitao da presente pesquisa, pode-se citar que o mtodo proposto (MCDA-C) requer a participao do decisor em todo o processo. Isto decorre em consequncia do foco do processo de trabalho estar centrado no desenvolvimento do entendimento do decisor. Em muitos casos o decisor poder no ter esta disponibilidade. Outro ponto a se ressaltar o carter de personalizao do estudo, no recomendando a aplicao do modelo em outros contextos, uma vez que o modelo foi construdo segundo os valores e preferncias de um decisor especfico. Como sugesto para trabalhos futuros seria interessante construir um modelo voltado para o consumidor final, dessa forma as necessidades do mesmo podero ser mapeadas e esse material pode ajudar a empresa a melhorar seus produtos. REFERNCIAS BACK, F. T.; ENSSLIN, L. e ENSSLIN, S. R. Processo para construir o conhecimento inicial de pesquisa ilustrado ao tema gesto de recursos humanos. Revista Pesquisa & Desenvolvimento em Engenharia de Produo. 2012 No Prelo. BANA E COSTA, C. A. Trs convices fundamentais na prtica do apoio deciso. Pesquisa Operacional, v. 13, n. 1, p. 9-20, 1993. BANA E COSTA, C. A. e ENSSLIN, L. Decision support systems in action: integrated application in a multicriteria decision aid process. European Journal of Operational Research, v. 113, n. 2, p. 315-335, 1999. BANA E COSTA, C. A. e VANSNICK, J. C. Applications of the MACBETH approach in the framework of an additive aggregation model. Journal of Multi Criteria Decision Analysis, v. 6, n. 2, p. 107-114, 1997. BANA E COSTA, C. A. B. e VANSNICK, J. C. A theoretical framework for measuring attractiveness by a categorical based evaluation technique (MACBETH). 2005. p.15 24. BETIOL, A. H. Avaliao de usabilidade para os computadores de mo : um estudo comparativo entre trs abordagens para ensaios de interao . Tese

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 451

(Doutorado em Engenharia de Produo)- Universidade Federal de Santa Catarina, 2004. BORTOLLUZZI, S. C. Avaliao de desempenho econmico-financeiro da empresa Marel Indstria de Mveis SA: a contribuio da metodologia multicritrio de apoio deciso construtivista (MCDA-C). 2009. Dissertao (Mestrado em Contabilidade)- Universidade Federal de Santa Catarina, 2009. BORTOLUZZI, S. C. et al. Proposta de um modelo multicritrio de avaliao de desempenho econmico-financeiro para apoiar decises de investimentos em empresas de capital aberto. CAP-Accounting and Management, v. 3, n. 3, p. 92100, 2010. BRUNSWIK, E.; HAMMOND, K. R. e STEWART, T. R. The essential brunswik: beginnings, explications, applications . Oxford University Press, USA, 2001. CLARK, K. B. e FUJIMOTO, T. Product development performance: strategy, organization, and management in the world auto industry. Harvard Business Press, 1991. DIENSTMANN, J. S. et al. Gesto da Inovao e avaliao de desempenho: processo estruturado de reviso da literatura. Revista Produo Online, No Prelo. EDEN, C.; JONES, S. e SIMS, D. Messing about in problems: an informal structured approach to their identification and management. Pergamon Press (Oxford Oxfordshire and New York), 1983. ENSSLIN, L.; DUTRA, A. e ENSSLIN, S. R. MCDA: a constructivist approach to the management of human resources at a governmental agency. International Transactions in Operational Research, v. 7, n. 1, p. 79-100, 2000. ENSSLIN, L. et al. Avaliao do desempenho de empresas terceirizadas com o uso da metodologia multicritrio de apoio deciso-construtivista. Pesquisa Operacional, v. 30, n. 1, p. 125-152, 2010. ENSSLIN, L.; LONGARAY, A. A. e MACKNESS, J. R. Decision support system to aid a patient with stress to identify opportunities to improve her quality of life. Proceedings of the Annual International Scientific Conference Operations Research, 7-9., 2005. ENSSLIN, L.; MONTIBELLER, G. N. e NORONHA, S. M. Apoio deciso: metodologias para estruturao de problemas e avaliao multicritrio de alternativas. Florianpolis: Insular, 2001. ENSSLIN, L. e VIANNA, W. B. O design na pesquisa quali-quantitativa em engenharia de produoquestes epistemolgicas. Revista Produo Online, v. 8, n. 1, 2008.
Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 452

FONSECA, F. E. A. e ROZENFELD, H. Medio de desempenho para a gesto do ciclo de vida de produtos: uma reviso sistemtica da literatura. Revista Produo Online, v. 12, 2012. KEENEY, R. L. Value-focused thinking: a path to creative decisionmaking. Harvard Univ Pr, 1996. KOTLER, P. Administrao de marketing: a edio do novo milnio: So Paulo: Prentice Hall, 2000. LACERDA, M. R. T.; ENSSLIN, L. e ENSSLIN, S. R. A performance measurement framework in portfolio management: a constructivist case. Management Decision, v. 49, n. 4, p. 9-9, 2011. LACERDA, R. T. O.; ENSSLIN, L. e ENSSLIN, S. R. Um estudo de caso sobre gerenciamento de portflio de projetos e apoio deciso multicritrio. Revista Gesto Industrial, v. 6, n. 1, 2010. LANDRY, M. A note on the concept of'problem'. Organization Studies, v. 16, n. 2, p. 315, 1995. POLETTO, . R.; SCHMITZ, A. L. F. e GONTIJO, L. A. Reviso de aspectos tericos e metodolgicos do uso de mapas cognitivos na ergonomia. Revista Produo Online, v. 8, n. 2, 2008. ROBERTS, F. S. Measurement theory. Addison-Wesley, Reading, MA 1979. ROY, B. Decision-aid and decision-making. European Journal of Operational Research, v. 45, n. 2-3, p. 324-331, 1990. ROY, B. Decision science or decision-aid science? European Journal of Operational Research, v. 66, n. 2, p. 184-203, 1993. ROY, B. Multicriteria methodology for decision aiding . Springer, 1996. ROY, B. Paradigms and challenges, multiple criteria decision analysis-state of the art survey. Multicriteria Decision Analysis: state of the art survey, p. 03-24, 2005. ROY, B. e VANDERPOOTEN, D. The European School of MCDA: emergence, basic features and current works. Journal of Multi Criteria Decision Analysis, v. 5, n. 1, p. 22-38, 1996. SILVEIRA, C. F. Avaliao de desempenho com foco no marketing de relacionamento: um estudo de caso. Dissertao (Mestrado Programa de PsGraduao em Engenharia de Produo - PPGEP)- Universidade Federal de Santa Catarina, UFSC, Florianpolis, 2007.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 453

STOLT, R. e ENSSLIN, L. Avaliao de pilotos da Very Light Jets utilizando-se a MCDA-C. Conexo SIPAER, v. 1, n. 1, p. 85-103, 2009. WHEELWRIGHT, S. C. e CLARK, K. B. Revolutionizing product development: quantum leaps in speed, efficiency, and quality. Free Pr, 1992.

Artigo recebido em 31/12/2010 e aceito para publicao em 07/05/2012.

Revista Produo Online, Florianpolis, SC, v.12, n. 2, p. 423-454, abr./jun. 2012. 454