Modulo 7 aspectos operacionais

Prévia do material em texto

Modulo 7 - Aspectos Operacionais
A.1. De acordo com o vídeo, por que os aspectos operacionais de uma avaliação de impacto são importantes? Marque todas as respostas que julgar corretas.
A. Porque são essenciais para o funcionamento da avaliação. 
B. Porque garantem um impacto positivo do programa. 
C. Porque as coisas nem sempre ocorrem como o planejado. 
D. Porque são um dos determinantes da qualidade da avaliação de impacto. 
As respostas corretas são A, C e D. Como se mencionou no vídeo, os aspectos operacionais contribuem para o funcionamento correto da implementação do programa porque permitem monitorar as atividades que vão ser realizadas e seu andamento. Além disso, permitem flexibilidade para se adaptar de forma oportuna às mudanças imprevistas. Finalmente, a qualidade da avaliação de impacto depende dos aspectos operacionais. Estes aspectos não asseguram que o programa tenha um impacto positivo, já que isso depende de outros elementos, como a teoria por trás do programa e sua implementação.
A.2. Qual seria uma maneira de antever o desafio de implementação do programa de educação por computadores, mencionado pelo professor no vídeo, evitando-se a baixa participação das escolas e gastos pouco eficazes? Marque todas as respostas que julgar corretas.
A. Consultar o Ministério da Educação sobre as condições de funcionamento das escolas. 
B. Consultar as escolas por telefone, verificando se elas têm acesso à internet. 
C. Considerar apenas qual o grau de acesso à internet na região à qual a escola pertence (rural ou urbana). 
D. Considerar que o governo ou o implementador da política instalaria internet onde fosse necessário para dar andamento à pesquisa. 
As respostas corretas são as alternativas A e B. Problemas na implementação de uma intervenção devem ser evitados para garantir que as conclusões da pesquisa tratem do efeito do programa, e não de aspectos do seu desenho operacional. Assim, é importante que os agentes implementadores sejam consultados sobre as dificuldades futuras e que a pesquisa leve tais aspectos em consideração.Parte superior do formulário
A.3. Quais são as possíveis falhas no gerenciamento dos aspectos operacionais que podem comprometer a qualidade da avaliação de impacto? Marque todas as respostas que julgar corretas.
A. Má comunicação entre equipe de pesquisa e implementador. 
B. Má abordagem da Teoria da Mudança. 
C. Mau planejamento do período de pesquisa. 
D. Gastos maiores que o orçamento. 
E. Monitoramento inadequado da coleta de dados. 
As respostas corretas são A, C, D e E. Em primeiro lugar, a má comunicação entre a equipe de pesquisa e o implementador pode provocar o mau cumprimento dos protocolos de investigação (como, por exemplo, a não aleatorização no momento de selecionar a amostra). Ou também pode ocorrer de os resultados serem mal interpretados se nem todos tiverem a mesma informação sobre a implementação da intervenção. Em segundo lugar, se mal planejado e definido em época de indisponibilidade dos entrevistados, o período de pesquisa pode afetar o tamanho e a composição da amostra. Em terceiro lugar, se os gastos são maiores que o orçamento, é possível que não haja fundos para as etapas finais do projeto. Finalmente, o monitoramento inadequado da coleta de dados pode levar a problemas como o mau desenvolvimento de uma pergunta ou a aplicação inadequada do questionário. A opção B, má abordagem da Teoria da Mudança, é uma falha do desenho da política, e não dos aspectos operacionais.
B.1. Verdadeiro ou falso: um bom planejamento deve ser capaz de antecipar todos os cenários possíveis.
A. Verdadeiro 
B. Falso 
Falso. O objetivo não é antecipar todos os cenários possíveis, mas desenhar um planejamento flexível que permita responder a cenários imprevistos e tomar rotas de ação oportunas.
C.1. Qual é a característica desejada para uma organização implementadora de uma avaliação para cada uma das descrições abaixo?
1. Ser característico de uma região. Representatividade 
2. Apresentar estabilidade nos membros da organização. Rotação de pessoal 
3. Capacidade de obter uma amostra suficientemente grande para uma avaliação de impacto. Escala 
4. Apresentar alto grau de confiabilidade. Conhecimento e reputação local 
5. Capacidade para adaptar processos segundo os requerimentos de uma avaliação de impacto. Flexibilidade 
6. Apresentar interesse em conhecer a efetividade do seu programa. Desejo de conhecer a verdade 
7. Capacidade de implementar de maneira adequada ao planejado. Experiência 
C.2. Segundo o vídeo, quais são os princípios básicos do trabalho em colaboração com uma organização implementadora? Marque todas as respostas que julgar corretas.
A. Estabelecer com clareza as regras e responsabilidades. 
B. Colocar os objetivos da pesquisa à frente dos objetivos do implementador. 
C. Manter uma comunicação constante. 
D. Alinhar interesses e expectativas. 
As alternativas corretas são A, C e D. No vídeo são apresentados os seguintes princípios básicos: 1. Alinhar interesses e expectativas; 2. Estabelecer as regras do jogo e responsabilidades; 3. Manter uma comunicação constante.
D.1. A que etapa do levantamento de dados correspondem as seguintes atividades:
1. Avaliar os impactos finais do programa, atividade que deve ser realizada no tempo estimado do impacto do programa. Linha final 
2. Verificar se há equilíbrio entre o grupo de controle e o grupo de tratamento, bem como poder estatístico suficiente. Linha de base 
3. Fazer monitoramento por meio da avaliação de processos, ou medir se há impacto antes do fim do programa. Linha de acompanhamento 
D.2. De acordo com o vídeo, quando devemos realizar o levantamento de dados? Marque todas as respostas que julgar corretas.
A. Quando os impactos já estiverem refletidos na população. 
B. Quando os pesquisados se encontrarem disponíveis. 
C. Quando as condições logísticas forem apropriadas. 
D. Quando não houver distorções (como comemorações ou férias) que afetem as pessoas no momento da pesquisa. 
Todas as alternativas estão corretas. Em primeiro lugar, não há por que pesquisar impactos antes de a intervenção surtir efeitos, já que isso faria com que os resultados fossem muito similares à linha de base. Em segundo lugar, para não haver entrevistas incompletas ou não realizadas, é importante considerar quando os entrevistados terão tempo para responder às perguntas. Em terceiro lugar, as condições logísticas (como o transporte da equipe de campo) devem ser adequadas para que não haja problemas na execução das pesquisas. Finalmente, é preciso selecionar um período neutro, alheio a eventos, comemorações ou qualquer outro fenômeno que possa afetar coletivamente a condição emocional dos entrevistados e influenciar, portanto, as suas respostas.
D.3. Considere as seguintes características positivas de entrevistadores: 
· Habilidades interpessoais 
· Flexibilidade 
· Empatia 
· Paciência 
· Experiência em levantamento de dados 
· Afinidade com o estudo e o contexto 
· Domínio de tecnologias de comunicação 
· Capacidade de reação 
 Verdadeiro ou falso: é necessário que um candidato tenha todas essas características para que seja um bom entrevistador.
A. Verdadeiro 
B. Falso 
Falso. Essas são características desejáveis a um candidato a entrevistador. No entanto, se ele não tiver alguma(s) del(a)s, pode desenvolvê-la(s) por meio de uma capacitação antes de ir a camp
D.4. A capacitação das equipes de campo deve abordar conceitos teóricos e práticos. Das seguintes atividades, assinale quais são elementos teóricos:
A. Passos a seguir 
B. Jogo de papéis 
C. Aspectos éticos 
D. Simulação 
E. Plano de reação 
F. Protocolos 
As respostas corretas são A, C, E e F. De acordo com o vídeo, os elementos teóricos são Protocolos, Aspectos éticos, Passos a seguir e Plano de reação. Já os elementos práticos são Jogo de papéis e Simulação.
Parte superior do formulário
E.1. Identifique qual das seguintes alternativas corresponde a um custo direto de uma avaliação de impacto.
A. Serviços de terceiros 
B. Trabalho técnico e de campoC. Aluguel e gastos de escritório 
D. Serviços básicos (luz, água etc.) 
A alternativa correta é a B. O vídeo apresentou os custos diretos divididos em duas categorias: trabalho técnico e trabalho de campo. Serviços de terceiros (alternativa A), aluguel e gastos de escritório (alternativa C) e serviços básicos como água e eletricidade (alternativa D) são apresentados como custos indiretos, normalmente ligados a infraestrutura.
E.2. Agora identifique qual das seguintes alternativas corresponde a um custo indireto de uma avaliação de impacto.
A. Salários da equipe de pesquisa 
B. Seguros para as equipes de campo 
C. Custo de aluguel e manutenção de escritório 
D. Capacitação para a equipe de campo 
E. Transporte e alimentação para a equipe de campo 
A alternativa correta é a C. Os custos de aluguel e manutenção de escritório (alternativa C) são custos indiretos da implementação de uma avaliação de impacto. Já os custos diretos relacionados à implementação da avaliação de impacto podem ser os salários da equipe de pesquisa (letra A), seguros para a equipe de campo (letra B), capacitação para a equipe de campo (letra D) e transporte e alimentação para a equipe de campo (letra E).
F.1. Quais das vantagens listadas são relacionadas a um sistema de monitoramento? Marque todas as respostas que julgar corretas.
A. Entrega de informações a respeito dos dados para sua posterior interpretação. 
B. Em geral, diminuição direta dos custos do projeto. 
C. Detecção de falhas na implementação ou de ameaça à qualidade dos dados. 
As respostas corretas são as alternativas A e C. O monitoramento permite obter informações a respeito da coleta dos dados, possibilitando, portanto, a interpretação desses resultados. Podemos, por exemplo, reconhecer uma pergunta mal formulada, ou uma resposta não representativa daquilo que se buscava. Graças a essa informação é possível identificar falhas que podem pôr em risco a qualidade dos dados, e corrigir os erros oportunamente. A alternativa B é incorreta porque realizar monitoramento consiste em atividades adicionais, o que geralmente aumenta os custos da pesquisa.
F.2. Faça a correspondência entre os componentes do monitoramento e suas respectivas definições.
1. Revisão minuciosa do material recebido, para detectar erros de aplicação (como perguntas inteiras em branco, por exemplo). Análise 
2. Digitalização dupla de uma porcentagem das pesquisas, para certificar a ausência de erro. Digitalização 
3. Supervisão da pesquisa em campo, gravação de chamadas telefônicas para detectar erros, observação da aplicação de instrumentos de pesquisa. Monitoramento geral 
4. Ligação para confirmar dados com um entrevistado, o que permite detectar possíveis falsificações. Checagem (backchecking) 
G.1. Quais são os princípios do relatório de Belmont? Marque todas as respostas que julgar corretas.
A. Princípio do risco-benefício 
B. Princípio da eficiência 
C. Princípio do respeito às pessoas 
D. Princípio da justiça 
As respostas corretas são A, C e D. Os princípios do relatório de Belmont garantem que pesquisas com seres humanos sejam realizadas eticamente, tanto em campo como no gerenciamento da informação. Os princípios são o respeito às pessoas, o risco-benefício e a justiça.
G.2. Quais das seguintes alternativas são boas práticas para a proteção dos dados? Marque todas as respostas que julgar corretas.
A. Eliminar as informações pessoais dos entrevistados, ou seja, tudo o que possa identificá-los após a consolidação dos dados. 
B. Criptografar os dados. 
C. Combinar a informação pessoal dos entrevistados às respostas à pesquisa. 
As alternativas corretas são A e B. Uma vez revisada e consolidada a base de dados, é recomendável eliminar as informações pessoais dos entrevistados, de modo que eles não possam ser identificados. Outra maneira de proteger a informação é por meio da criptografia dos dados durante sua coleta, trânsito e repouso. A alternativa C não é correta, porque é recomendável separar as informações pessoais das respostas à pesquisa, para evitar que os entrevistados possam ser relacionados às suas respostas.
G.3. Verdadeiro ou falso: para reunir toda a informação necessária para a pesquisa, não se pode permitir que o entrevistado omita alguma resposta ou não responda parte de um questionário.
A. Verdadeiro 
B. Falso 
Falso. De acordo com o princípio do respeito às pessoas, o entrevistado tem a liberdade de (a qualquer momento) omitir uma resposta, omitir parte da pesquisa ou mesmo encerrá-la, caso não se sinta confortável.
G.4. Dentre as opções a seguir, assinale quais são informações que, se reveladas, podem identificar indivíduos com um alto nível de confiança (não considere combinações entre as opções).
A. Nome completo 
B. Gênero 
C. Telefone 
D. E-mail 
E. Nível de educação 
F. Ano de nascimento 
As respostas são A, C, e D. Usualmente, o gênero, o ano de nascimento e o nível de educação são informações sociodemográficas que não comprometem a identidade dos entrevistados. Informações específicas como nome completo, e-mail e telefone são mais relevantes e muitas vezes permitem identificar a pessoa entrevistada. Portanto, é importante identificar os tipos e a quantidade de informações que podem comprometer a confidencialidade dos entrevistados.
G.5. Por que pode ser desejável trabalhar com uma parceira externa para a implementação de uma avaliação? Marque todas as alternativas que julgar corretas.
A. Porque ela pode ter equipes de trabalho estáveis e preparadas. 
B. Porque ela pode ter cobertura e escala maiores. 
C. Porque ela pode ter experiência no tema. 
D. Porque ela pode ter uma ampla rede de contatos. 
Todas as alternativas podem ser razões para se trabalhar com uma parceira externa. No geral, empresas externas de boa qualidade podem ter maior experiência e capacidade de expandir o projeto do que a equipe de pesquisa poderia ter individualmente. Além disso, boas parceiras de implementação contam com equipes de trabalho estáveis e dedicadas ao tema de pesquisa. Finalmente, as redes de contato da boa parceira de implementação podem facilitar processos e/ou relações necessárias para a efetivação do projeto de pesquisa.
G.6. Verdadeiro ou falso: é recomendável acordar e assinar um documento entre o grupo de pesquisa e a empresa parceira externa para garantir a qualidade dos processos e que a avaliação seja desenvolvida conforme o planejado.
A. Verdadeiro 
B. Falso 
Verdadeiro. Como discutido no vídeo, os documentos acordados e assinados entre o grupo de pesquisa e a parceira externa determinam os protocolos a serem seguidos pela parceira para garantir a qualidade dos processos e da implementação da avaliação.
Parte inferior do formulário
Parte superior do formulário
Parte inferior do formulário
Parte inferior do formulário