Metodologia Cientfica Aplicada

Estudo de Caso
Planejamento e Mtodos
Robert K. Yin
Traduo:

Daniel Grassi

Snia Afonso Alunas: Andria Saugo e Lia Geovana Sala

Professora:

Autor
Robert K. Yin
Robert K. Yin, Ph.D., Presidente de uma Corporao (COSMO), que trabalha com pesquisa aplicada em empresas de cincia social que estiveram em operao desde 1980. Durante estes anos, completou centenas de projetos prosperamente para agncias de governo, fundaes privadas, e outros setores empresariais e de organizaes conduzindo vrios projetos de pesquisa ativamente, incluindo mtodos de estudo de caso. autor de numerosos livros e artigos, principalmente em Pesquisa e Aplicaes de Pesquisa de estudo de caso e, em 1998 fundou o " Robert K. Yin Fund " a M.I.T. que apia seminrios em cincias do crebro como tambm outras atividades relacionadas ao avano a estudos no Departamento de Crebro e Cincias Cognitivas.

Sumrio
1. Introduo
(definio dos temas ou problemas a serem estudados) (aspectos do controle de qualidade)

2. Projetando estudos de caso

dados

3. Conduzindo estudos de caso: preparao para a coleta de 4. Conduzindo estudos de caso: coleta de evidncias 5. Analisando as evidncias do estudo de caso 6. Compondo o relatrio de um estudo de caso

3 : 38

O estudo de caso como estratgia de pesquisa

Os estudos de caso representam a estratgia preferida quando: se colocam questes do tipo como e por que; o pesquisador tem pouco controle sobre os eventos; e o foco se encontra em fenmenos contemporneos inseridos em algum contexto da vida real. A clara necessidade pelos estudos de caso surge do desejo de se compreender fenmenos sociais complexos. Ou seja, o estudo de caso permite uma investigao para se preservar as caractersticas holsticas e significativas dos eventos da vida real.

4 : 38

Comparando estudos de caso com outras estratgias de pesquisa

Quando e por que voc desejaria realizar estudos de caso sobre algum tpico? Deveria pensar em fazer um experimento no local? Um levantamento? Uma pesquisa histrica?

Essas e outras escolhas representam estratgias de pesquisa diferentes, cada uma com sua maneira de coletar e analisar provas empricas, seguindo sua prpria lgica, com suas vantagens e desvantagens.
Pode-se utilizar cada estratgia por trs propsitos: exploratrio, descritivo ou explanatrio. Embora cada estratgia tenha suas caractersticas distintas, isso no implica que os limites entre as estratgias sejam claros e bem delimitados, podendo haver sobreposies.

5 : 38

Quando utilizar cada estratgia

Trs condies que consistem: No tipo de questo de pesquisa proposto; Na extenso de controle que o pesquisador tem sobre eventos comportamentais efetivos; e No grau de enfoque em acontecimentos histricos em oposio a acontecimentos contemporneos.
Estratgia Experimento Levantamento Forma da questo de pesquisa Como, por que Quem, o que, onde, quantos, quanto Quem, o que, onde, quantos, quanto Como, por que Como, por que Exige controle sobre eventos comportamentais? Sim No Focaliza acontecimentos contemporneos? Sim Sim

Anlise de arquivos
Pesquisa histrica Estudo de caso

No
No No

Sim/no
No Sim

6 : 38

A mais importante condio para se diferenciar as vrias estratgias de pesquisa identificar nela o tipo de questo que est sendo apresentada. Em geral, questes do tipo o que podem ser tanto exploratrias (em que se poderia utilizar qualquer uma da estratgias) ou sobre predominncia de algum tipo de dado (em que se valorizaria levantamentos ou anlises de registros em arquivos). Questes como e por que estimulam o uso de estudos de caso, experimentos ou pesquisas histricas.

Definir as questes da pesquisa o passo mais importante. Pacincia e tempo suficiente

A chave compreender que as questes de uma pesquisa possuem substncia ex. sobre o que o meu estudo? e forma ex. estou fazendo uma pergunta do tipo quem, o que, por que ou como?
Determinar as questes mais significantes para um determinado tpico e obter alguma preciso na formulao, exige muita preparao. Uma maneira revisar a literatura j escrita sobre aquele tpico, isto um meio para se atingir uma finalidade e no uma finalidade em si.

7 : 38

Definio do estudo de caso como estratgia de pesquisa

a essncia de um estudo de caso tentar esclarecer uma deciso ou um
conjunto de decises: o motivo pelo qual foram tomadas, como foram implementadas e com quais resultados (Schramm, 1971).

Uma falha comum: considerar o estudo de caso como o estgio exploratrio de algum outro tipo de estratgia de pesquisa, e o estudo de caso em si era apenas mencionado em uma ou duas linhas do texto. O estudo de caso como estratgia de pesquisa compreende um mtodo que abrange tudo com a lgica de planejamento incorporando abordagens especficas coleta e anlise de dados. Nesse sentido, o estudo de caso no nem uma ttica para a coleta de dados nem meramente uma caracterstica do planejamento em si, mas uma estratgia de pesquisa abrangente.

8 : 38

Variaes dentro dos estudos de caso como estratgia de pesquisa

A pesquisa de estudo de caso pode incluir tanto estudos de caso nico quanto de casos mltiplos. Pode-se basear os estudos de caso em qualquer mescla de provas quantitativas e qualitativas. E tambm podem incluir, e mesmo ser limitados, s evidncias quantitativas. Como exemplos, alguns experimentos (como estudos de percepes psicolgicas) e algumas questes feitas em levantamentos (como aquelas que buscam respostas numricas em vez de respostas categricas) tem como base evidncias qualitativas, e no quantitativas. Da mesma maneira, a pesquisa histrica pode incluir enormes quantidades de evidncias quantitativas.
Muito embora se pense que os estudos de caso sejam uma pesquisa fcil, a pesquisa de estudo de caso notavelmente complicada. E o paradoxo que quanto mais fcil for uma estratgia de pesquisa, mais difcil ser para realiz-la.

9 : 38

Projetando estudos de caso

Para projetar um estudo de caso necessrio um plano ou um projeto de pesquisa.

Definio de projetos de pesquisa

Cada tipo de pesquisa emprica possui um projeto de pesquisa implcito, se no explcito. Um projeto de pesquisa um plano de ao para se sair daqui e chegar l. como um esquema de pesquisa, que trata de, quatro problemas principais:

quais questes estudar, quais dados so relevantes, quais dados coletar e como analisar os resultados.
10 : 38

Componentes de projetos de pesquisa

Para estudos de caso, so importantes cinco componentes de um projeto de pesquisa:

1- Questes de estudo
Sugere-se a forma da questo em termos de quem, o que, onde, como e por que para obter uma chave importante na escolha da estratgia de pesquisa. Para a estratgia de estudo de caso so mais provveis as questes do tipo como e por que.

11 : 38

2- Proposies de estudo
Cada proposio destina ateno a alguma coisa.
Por exemplo, uma pesquisa sobre uma parceria interorganizacional comeou com a questo: como e por que as organizaes colaboram umas com as outras para prestar servios em associao (por exemplo, um fabricante e uma loja de varejo decidem trabalhar juntos para vender certos produtos)?

Essas questes como e por que (essncia daquilo que realmente se est interessado em responder), levam ao estudo de caso como estratgia apropriada em primeiro lugar. Somente se for obrigado a estabelecer algumas proposies voc ir na direo certa. Por exemplo, pode-se pensar que as organizaes colaboram entre si porque obtm benefcios mtuos. Essa proposio, alm de refletir uma importante questo terica, tambm comea a mostrar onde deve-se procurar referncias relevantes.
Ao mesmo tempo, alguns estudos podem ter uma razo absolutamente legtima para no possuir nenhuma proposio. 12 : 38

3- Unidade(s) de anlise
Relaciona-se com o problema fundamental de se definir o que um caso. Por exemplo, no estudo de caso clssico, um caso pode ser um indivduo (ex. estudos de casos de pacientes clnicos), naturalmente tambm pode ser algum evento ou entidade que menos definido do que um indivduo. A orientao da unidade de anlise (portanto, do caso) est relacionada maneira como as questes iniciais da pesquisa foram definidas.
Suponha, por exemplo, que voc queira estudar o papel dos Estados Unidos na economia mundial. A unidade de anlise para o seu estudo de caso pode ser a economia de um pas, uma indstria no mercado global, uma poltica econmica ou o comrcio ou o fluxo de capital entre dois pases. Cada unidade de anlise exigiria um projeto de pesquisa sutilmente diferente e uma estratgia de coleta de dados. Especificar corretamente as questes primrias da pesquisa traria como conseqncia a seleo da unidade apropriada de anlise. Se as suas questes no derem preferncia a uma unidade em relao a outra, significa que elas esto ou vagas demais ou em nmero excessivo.

13 : 38

4- Ligando os dados a proposies

Uma abordagem promissora para os estudos de caso a idia da adequao ao padro, por meio da qual vrias partes da mesma informao do mesmo caso podem ser relacionadas mesma proposio terica.

5- Critrios para a interpretao das descobertas

Normalmente, no h uma maneira precisa de se estabelecer os critrios para a interpretao das descobertas. O que se espera que os diferentes padres estejam contrastando, de forma clara e suficiente, que as descobertas podem ser interpretadas em termos de comparao de, pelo menos, duas proposies concorrentes.

14 : 38

Critrios para se julgar a qualidade dos projetos de pesquisa

Como se supe que um projeto de pesquisa represente um conjunto lgico de proposies, voc tambm pode julgar a qualidade de qualquer projeto dado de acordo com certos testes lgicos. Quatro testes so utilizados para se determinar a qualidade de qualquer pesquisa social emprica. So eles: Validade do constructo: estabelecer medidas operacionais corretas para os conceitos que esto sob estudo. Validade interna (apenas para estudos explanatrios ou causais): estabelecer uma relao causal, por meio da qual so mostradas certas condies que levem a outras condies diferenciadas. Validade externa: estabelecer o domnio ao qual as descobertas de um estudo podem ser generalizadas. Confiabilidade: demonstrar que as operaes de um estudo como os procedimentos de coleta de dados podem ser repetidas, apresentando os mesmos resultados.

15 : 38

Projetos de estudo de caso

Para a estratgia de estudo de caso, os quatro tipos de projetos so: Projetos de caso nico (holsticos ou incorporados) Projetos de caso mltiplo (holsticos ou incorporados)
Uma distino bsica que deve ser feita ao se projetar estudos de caso entre projetos de caso nico e de casos mltiplos, escolha que deve ser feita antes da coleta de dados, ao se formular as questes da pesquisa. Muitas condies que justificam um experimento nico tambm justificam um estudo de caso nico. Outro fundamento lgico para um caso nico aquele em que o caso representa um caso raro ou extremo. E um terceiro fundamento o caso revelador, situao que ocorre quando o pesquisador tem a oportunidade de observar e analisar um fenmeno previamente inacessvel investigao cientfica.

16 : 38

Estudos de casos incorporados versus holsticos

O mesmo estudo de caso pode envolver mais de uma unidade de anlise. Isso ocorre quando, dentro de um caso nico, se d ateno a uma ou vrias subunidades.
Por exemplo, embora um estudo de caso possa tratar de um simples programa pblico, devem constar na anlise os resultados dos projetos individuais dentro do programa (e possivelmente at mesmo algumas anlises quantitativas de um nmero maior de projetos). Em um estudo organizacional, as unidades incorporadas tambm podem ser unidades de processo como reunies, funes ou locais determinados. Em todas essas situaes, pode-se selecionar as unidades incorporadas atravs de amostragens ou tcnicas de grupo. De qualquer maneira que as unidades sejam selecionadas, o projeto resultante seria denominado projeto de estudo de caso incorporado. Em contraste, se o estudo de caso examinasse apenas a natureza global de um programa ou de uma organizao, um projeto holstico seria a denominao utilizada.

17 : 38

Projetos de caso nico versus de casos mltiplos

O mesmo estudo pode conter mais de um caso nico. Quando isso ocorrer, o estudo precisa utilizar um projeto de casos mltiplos. Projetos de casos mltiplos possuem vantagens e desvantagens distintas em comparao aos projetos de caso nico. As provas resultantes de casos mltiplos so consideradas mais convincentes, e o estudo global visto como sendo mais robusto. Ao mesmo tempo, o fundamento lgico para projetos de caso nico, no pode ser satisfeito por casos mltiplos. provvel que o caso raro ou incomum, o caso crtico e o caso revelador impliquem apenas em casos nicos, por definio.

Qualquer utilizao de projetos de casos mltiplos deve seguir uma lgica de replicao, e no de amostragem. Os casos devem funcionar de uma maneira semelhante aos experimentos mltiplos, com resultados similares (replicao literal) ou contraditrios (replicao terica) previstos explicitamente no princpio da investigao.

18 : 38

3 preparao para a coleta de dados

O pesquisador do estudo de caso: habilidades desejadas

Conduzindo estudos de caso:

Uma pessoa capaz de fazer boas perguntas e interpretar as respostas.

Deve ser um bom ouvinte e no ser enganado por suas prprias ideologias e preconceitos. Uma pessoa capaz de ser adaptvel e flexvel, de forma que as situaes recentemente encontradas possam ser vistas como oportunidades e no ameaas. Deve ter uma noo clara das questes que esto sendo estudadas, mesmo que seja uma orientao terica ou poltica, ou que seja de um modo exploratrio.

Deve ser imparcial em relao a noes preconcebidas, incluindo aquelas que se originam de uma teoria. Uma pessoa sensvel e atenta a provas contraditrias.

19 : 38

Treinamento e preparao para um estudo de caso especfico

Agendar atividades e obter acesso a fontes relevantes de evidncias so atos importantes para a administrao de um estudo de caso. Cada pesquisador precisa saber:

Por que o estudo est sendo realizado Quais provas esto sendo procuradas

Quais variaes podem ser antecipadas (e o que deve ser feito se essas variaes ocorrerem) O que constituiria uma prova contrria ou corroborativa para qualquer proposio dada. O treinamento pode revelar falhas no projeto do estudo de caso ou mesmo na definio inicial do problema do estudo.

20 : 38

O protocolo para o estudo de caso

O protocolo contm os procedimentos e as regras gerais que deveriam ser seguidas ao se utilizar o estudo de caso. O protocolo desejvel para o estudo de caso em qualquer circunstncia, mas essencial quando se utilizar um projeto de casos mltiplo. Deve apresentar as seguintes sees:

Uma viso geral do projeto do estudo de caso Procedimentos de campo

Questes do estudo de caso

para o relatrio do estudo de caso

Guia

So um conjunto de questes substantivas que refletem a investigao real. O protocolo para a coleta de dados a partir de um caso nico e ele no tem por objetivo servir ao projeto inteiro.

21 : 38

Conduzindo estudos de caso:

Coleta de evidncias
Documentos; Registros em Arquivo; Entrevistas; Observao Direta; Observao Participante; Artefatos Fsicos;

As evidncias podem vir de 6 fontes distintas:

22 : 38

Documentos:
Esse tipo de informao pode assumir muitas formas e deve ser o objeto de planos explcitos da coleta de dados. Por exemplo: Catas, memorandos ; Agendas, avisos e minutas de reunies, relatrios em geral; Documentos administrativos (propostas, relatrios e documentos internos ); Estudos ou avaliaes formais do mesmo local sob estudo; Recortes de jornais e ou artigos publicados na mdia;

23 : 38

Registros em Arquivo:
Para alguns estudos os registros podem ser muito importantes que se transformam no objeto de uma ampla restaurao e anlise.
Registros Registros

de servio (que registram o nmero dos clientes atendidos em determinado perodo); Organizacionais (tabelas, oramentos)
Mapas
Lista

e tabelas
oriundos de levantamentos (sobre o local)

de nomes e de outros itens importantes

Dados

Registros

telefone)

pessoais (dirios, anotaes agendas de

Nenhuma das fontes possui vantagem indiscutvel sobre as outras, as vrias fontes so altamente complementares.
24 : 38

Entrevistas (podem assumir diversas formas):

Forma espontnea: permite que voc tanto indague repondentes-chave sobre fatos de uma maneira quanto pea a opinio, interpretao deles sobre determinados assuntos ou eventos. E pode utilizar essas proposies como base para uma nova pesquisa. Entrevista focal (Merton et al., 1990): o respondente entrevistado por um curto perodo de tempo. Elas continuas sendo espontneas e tem carter de uma conversa informal, porm existe um conjunto de perguntas que seguido. Levantamento formal: uma entrevista mais estruturada e pode ser considerada como parte de um estudo de caso ex: Um estudo de caso sobre um bairro onde voc ira realizar um levantamento de como os moradores e comerciantes locais percebem o avano ou declnio de sua regio.

25 : 38

Observao direta: (visitas de campo)

As observaes podem variar de atividades formais a informais de coleta de dados. Pode-se desenvolver protocolos de observao(formal).

Pode-se observar: reunies, atividades de passeio, trabalho de fbrica, salas de aula. eventos que esto sendo estudados
(podem variar de interaes sociais informais com os moradores atividades funcionais especficas dentro do bairro)

Observao participante: voc pode participar de

Ser morador em um bairro que objeto de um estudo de caso; Desempenhar algum outro papel funcional em uma regio, como trabalhar como assistente de loja; Trabalhar como membro de equipe em uma organizao; Ser uma pessoa que toma as decises-chave em uma organizao;

26 : 38

uma ferramenta ou instrumento, uma obra de arte ou alguma outra evidncia fsica. Pode-se coletar ou observar esses artefatos como parte de uma visita de campo e pode-se utilizlos extensivamente na pesquisa antropolgica.

Artefatos fsicos: um aparelho de alta tecnologia,

Trs princpios para a coleta de dados

1- utilizar vrias fontes de evidncia 2- criar um banco de dados para o estudo de caso 3- manter o encadeamento de evidncias

27 : 38

Analisando as evidncias do estudo de caso

A anlise de dados consiste em examinar, categorizar, classificar em tabelas, ou, do contrrio, recombinar evidncias tendo em vista proposies iniciais de um estudo de caso. Estratgias Analticas Gerais 1- Tornar os dados do estudo de caso propcios anlise estatstica - atribuindo valores numricos aos eventos. 2 Utilizar vrias tcnicas analticas (Miles & Huberman, 1984) * dispor as informaes em sries diferentes; * criar uma matriz de categorias e dispor as evidncias dentro dessas categorias; * criar modos de apresentao dos dados (fluxogramas); * classificar em tabelas de freqncia de eventos diferentes; * examinar a complexidade dessas classificaes e sua relao calculando nmeros de 2 ordem (mdias e varincias); * dispor as informaes em ordem cronolgica ou utilizar alguma outra disposio temporal.

28 : 38

Duas estratgias gerais:

Baseando-se em proposies tericas: seguir as

proposies tericas que levaram ao estudo de caso. Essas proposies refletem o conjunto de questes da pesquisa, as revises feitas na literatura sobre o assunto e as novas interpretaes que possam surgir. As proposies dariam forma ao plano da coleta de dados e assim estabeleceriam a prioridade s estratgias analticas relevantes.

Desenvolvendo uma descrio de caso:

desenvolver uma estrutura descritiva a fim de organizar o estudo de caso. prefervel utilizar proposies tericas a utilizar essa estratgia.

29 : 38

Mtodos principais de anlise

Adequao ao padro: Essa lgica (Thochim, 1989) compara um padro fundamentalmente emprico com outro de base prognstica (ou com vrias outras previses alternativas). Se os padres coincidirem, os resultados podem ajudar o estudo de caso reforar sua validade interna. Construo da explanao: um tipo especial de adequao padro. O objetivo analisar os dados do estudo de caso construindo uma explanao sobre o caso (Yin, 1982b). Anlise de sries temporais: diretamente anloga anlise de sries temporais realizada em experimentos e em pesquisas quase-experimentais. Ex: curso dos acontecimentos que levaram ao uso da maconha (Becker, 1963) Modelos lgicos de programa: uma combinao das tcnicas de adequao ao padro e de anlise de sries temporais. O padro que est sendo buscado o padro-chave de causaefeito entre variveis independentes e dependentes (Peterson & Bickman, 1992; Rog & Huebner, 1992).

30 : 38

Mtodos secundrios de anlise

Anlise de unidades incorporadoras de anlise: quando um

projeto de estudo de caso inclui uma unidade incorporadora de anlise ou seja, uma unidade menor do que o caso em si, para o qual inmeros pontos de dados foram coletados. Ex: conjunto de respostas dadas por moradores de um bairro sobre a habitao como parte do estudo de caso nico.

Observaes repetidas: so feitas ao longo do tempo (sries

temporais) ou ento atravs de cortes transversais, ou seja locais repetidos ou para outras unidades incorporadoras de anlise dentro do mesmo caso.

quelas situaes em que h vrios estudos de caso disponveis para anlise. Ex: participao do cidado em servios urbanos (Yin & Yates, 1975) que podem ter como base mais de 200 estudos de caso. O levantamento de caso exige o desenvolvimento de um instrumento de codificao induzida, que ento aplicada a cada estudo de caso. 31 : 38

Abordagem de levantamento de dados do caso: limita-se

Compondo o relatrio de um estudo de caso

A exposio de um estudo de caso pode ser tanto escrita quanto oral. Independentemente da forma que assume, porm etapas semelhantes devem ser obedecidas durante o processo de composio: O pblico a que os estudos de caso se destinam; As variedades de composio do estudo de caso; As estruturas ilustrativas para as composies do estudo de caso; Os procedimentos a serem adotados ao se realizar um relatrio de estudo de caso; E, como concluso, as especulaes sobre as caractersticas de um estudo de caso exemplar;
32 : 38

O pblico para um estudo de caso

Os estudos de caso possuem uma relao mais diversa de possveis pblicos-alvo do que a maioria dos outros tipos de pesquisa. Inclui-se nessa relao:
Colegas da mesma rea; Organizadores polticos, profissionais em geral e tambm os

profissionais que no se especializaram na metodologia do estudo de caso; Grupos especiais, como a banca de tese ou de dissertao de um estudante; A instituio financiadora da pesquisa.

33 : 38

Variedade de estruturas de um estudo de caso:

Um relatrio de estudo de caso no precisa ser apenas escrito. As informaes obtidas podem ser expostas de diversas maneiras como:
Exposio oral
Conjunto de fotos Gravaes de vdeo.

A maioria dos estudos de caso realmente resultam em produtos escritos, mas o pesquisador pode escolher a maneira mais eficaz e pertinente de apresentar qualquer relatrio. Mas o que influenciara na escolha a tarefa de identificar o pblico alvo para o estudo de caso.

34 : 38

Estruturas ilustrativas para a constituio dos estudos de caso;

Os captulos, as sees, os subtpicos de um relatrio devem ser organizados de alguma forma. Essa organizao constitui a estrutura do relatrio.

Segue abaixo 6 sugestes de estruturas:

Estruturas analticas lineares; Estruturas comparativas; Estruturas cronolgicas; Estruturas de construo de teoria; Estruturas de incerteza

Estruturas no-seqenciais.

35 : 38

Procedimentos ao se fazer um relatrio de estudo de caso

Toda pessoa deve possuir um conjunto bem-delimitado de procedimentos para analisar os dados obtidos nas cincias sociais e para elaborar um relatrio.
Quando e como iniciar a elaborao? O primeiro passo comear a redigir o relatrio logo no incio do processo analtico. Ex. depois que a literatura existente j tiver sido revisada e que o estudo estiver projetado, possvel fazer um rascunho de 2 sees do relatrio: a bibliografia e metodologia. A identidade dos casos: real ou annima? A melhor opo revelar a identidade tanto do caso quanto dos indivduos. reviso do estudo de caso: um procedimento de validao. Tem haver com a qualidade total do estudo, para isto o relatrio deve ser revisado no apenas pelos colegas do pesquisador, mas tambm pelos participantes e informantes do caso .

36 : 38

O que torna um estudo de caso exemplar?

Para ser exemplar um estudo de caso deve:

Ser significativo;

Ser completo;
Considerar perspectivas alternativas;

Apresentar evidncias suficientes;

Ser elaborado de uma maneira atraente.

37 : 38

Referncias bibliogrficas

Becker, H. S. (1963). Becoming a marijuana user. In H. S. Becker (Ed.), The outsiders (pp. 4158). New York: Free Press.
Merton, R. K., Fiske, M., & kendall, P. L. (1990). The focused interview: A manual of problems and procedures (2 nd ed.). New York: Free Press. Miles, M. B., & Huberman, A. M. (1984). Analyzing qualitative data: A source book for new methods. Beverly Hills, CA: Sage. Peterson, K. A., & Bickman, L. (1992). Using program theory in quality assessments of childrens mental health sevices. In H. T. Chen & P. Rossi (Eds.), Using theory to improve program and policy evaluations (pp.165-176). Westport, CT: Greenwood. Rog, D. J. & Huebner, R. B. (1992). Using research and theory in developing innovative programs for homeless individuals. In H. T. Chen & P. Rossi (Eds.), Using theory to improve program and policy evaluations (pp. 129-144). Westport, CT: Greenwood. Schramm, W. (1971). Notes on case studies of instructional media projects. Working paper, the Academy for Educational Development, Washington, DC. Thochim, W. (1989). Outcome pattern matchig and program theory. Evaluation and Program Planning, 12, 355-366.

Yin , R. K., & Yates, D. (1975). Street-level governments: Assessing decentralization and urban services. Lexington, MA: Lexington Press.
Yin, R. K. (1982b). Studying the implementation of public programs. In W. Williams et al. (Eds.), Studying implementation: Methodological and administrative issues (pp. 36-72). Chatham, NJ: Chatham House.

_____Imagens 15/11/2008.

Disponveis em: < http://www.dreamstime.com/free-photos > Acesso: