ciclo de mds - ufrgs(sagi) do ministério do desenvolvimento social e combate à fome (mds) e exe...

61
RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOS E INSTRUMENTOS PARA O MONITORAMENTO DE PROGRAMAS Termo de Cooperação 001/2013 Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

Upload: others

Post on 26-Aug-2020

3 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOSE INSTRUMENTOS PARAO MONITORAMENTODE PROGRAMAS

Campus do Vale - Prédio 43322 - Av. Bento Gonçalves, 9500 Porto Alegre - RS - 91509-900 - Phone: + 55 51 3308.9860

IP Videoconference CEGOV 143.54.129.46

cegov.ufrgs.br

CICLO DE CAPACITAÇÃO

MDS

SAGISecretaria de Avaliação e Gestãoda Informação

Termo de Cooperação 001/2013Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

CEG

OV

CIC

LO D

E C

APA

CIT

ÃO

MD

S -

R

ELA

RIO

DE E

XEC

ÃO

DO

CU

RSO

MO

NIT

OR

AM

EN

TO

Ministério doDesenvolvimento Social

e Combate à Fome

Page 2: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)
Page 3: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

Termo de Cooperação 001/2013Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOSE INSTRUMENTOS PARAO MONITORAMENTODE PROGRAMAS

Page 4: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

Universidade Federal do Rio Grande do Sul (UFRGS)

O Centro de Estudos Internacionais sobre Governo (CEGOV) da Universidade Federal do Rio Grande do Sul (UFRGS) realiza estudos e pesquisas sobre a ação gov-ernamental, a partir de uma perspetiva comparada. O Centro reúne pesquisadores de distintas áreas da Uni-versidade e diversos núcleos de pesquisa tradicionais da UFRGS.

Reitor da UFRGSCarlos Alexandre Netto

Vice-Reitor da UFRGSRui Vicente Oppermann

Diretor do CEGOVMarco Cepik

Vice-Diretor do CEGOVGustavo Grohmann

Grupo de Trabalho do CEGOVAvaliação de Políticas Públicas

Coordenador do Grupo de TrabalhoLígia Mori Madeira

Centro de Estudos Internacionais sobre GovernoCampus do Vale, Prédio 43322 Av. Bento Gonçalves, 9500Porto Alegre - RS, Brasil, CEP 91509-900Tel:+55 51 3308-9860http://www.ufrgs.br/cegov/

Relatório do Curso de Indicadores para Diagnóstico do SUAS e do Plano Brasil sem Miséria Termo de Cooperação UFRGS-MDS 01/2013

Equipe Técnica CEGOV Aline Gazola Hellmann, Luciana Leite Lima, Ana Júlia Possamai, Alexandre Ben Rodrigues, Bruno Sivelli, Evelise Lazzari, Gilian Cidade, Giordano Benites Tronco, Graça Godinho, Gustavo Conde Magarites, Júlia da Motta, Lígia Mori Madeira, Luciana Pazini Papi, Maria Goreti Machado, Matheus Machado Hoscheidt, Taciana Barcellos, Terezinha Vergo, Tiago Martinelli, Thiago Borne Ferreira.

Projeto gráfico e diagramação Joana Oliveira de Oliveira, Henrique Pigozzo da Silva, Liza Bastos Bischoff.

Termo de Cooperação MDS-UFRGS 001/2013 Processo MDS nº 23078.038272/12-82 Título: CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓS-TICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDSUnidade Administrativa Responsável: Secretaria Avaliação e Gestão da InformaçãoUG/Gestão Repassadora: 550010/55000 – MDSUG/Gestão Recebedora: 153114/15235 – UFRGSData da Assinatura: 23/11/2012Data da Liberação do Crédito da primeira parcela no SIAFI: 16/05/2013Vigência do Termo Cooperação: 36 MESES

Convênio UFRGS-FEENG 027/2013

Título Convênio UFRGS - FEENG: ECO/CEGOV/ADM.PÚBLICA FEDERAL Protocolo Proc. Convênio UFRGS – FEENG: 23078.038272/12-82Data da Assinatura do Convênio UFRGS – FEENG: 30/07/2013 Vigência do Convênio UFRGS – FEENG: 30/07/2013 a 30/07/2015Protocolo Proc. tramitação recursos financeiros: 23078.038272/12-82Nome PROPLAN - CGPOF 24/12 PlanejamentoCódigo do Projeto: FAURGS: 6848-9Portal SICONV n. 783287/2013

Page 5: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

RESUMO EXECUTIVO

RESUMO EDIÇÃO 01

RESUMO EDIÇÃO 02

PROJETO PEDAGÓGICO

RESULTADOS DA EDIÇÃO 01

RESULTADOS DA EDIÇÃO 02

AVALIAÇÃO DE REAÇÃO EDIÇÃO 01

AVALIAÇÃO DE REAÇÃO EDIÇÃO 02

DEPOIMENTOS

CONSIDERAÇÕES FINAIS

ANEXOS

ANEXO 01 – EXERCÍCIOS DE FIXAÇÃO

ANEXO 02 – QUESTÕES DE CONTEÚDO

ANEXO 03 – AVALIAÇÃO FINAL

ANEXO 04 - PESQUISA DE AVALIAÇÃO DO CURSO

01

SUMÁRIO

020304050607080910

07

09

1 1

13

17

20

23

29

35

36

40

40

5 1

52

55

Page 6: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

LISTA DE FIGURASFigura 01 – Cronograma propositivo

Figura 02 – Conteúdo do curso

Figura 03 – Evolução do curso: exercícios, avaliações e certificação

Figura 04 – Certificado do Curso de Monitoramento

Figura 05 – Panorama do Curso de Monitoramento (Edição 01)

Figura 06 – Panorama do Curso de Monitoramento (Edição 02)

Figura 07 – Proposta cabeçalho do curso no AVA: fórum e certificado

14

1 5

1 5

16

19

22

37

LISTA DE GRÁFICOSGráfico 01 – Número de atividades realizadas semanalmente pelos alunos do Curso de Monitoramento (Edição 01)

Gráfico 02 – Número de alunos que completaram as atividades de cada etapa do Curso de Monitoramento (Edição 01)

Gráfico 03 – Nota média dos alunos nas atividades de cada etapa do Curso de Monitoramento (Edição 01)

Gráfico 04 – Resultados do Curso de Monitoramento (Edição 01)

Gráfico 05 – Número de atividades realizadas semanalmente pelos alunos do Curso de Monitoramento (Edição 02)

Gráfico 06 – Número de alunos que completaram as atividades de cada etapa do Curso de Monitoramento (Edição 02)

Gráfico 07 – Nota média dos alunos nas atividades de cada etapa do Curso de Monitoramento (Edição 02)

Gráfico 08 – Resultados do Curso de Monitoramento (Edição 02)

Gráfico 09 – Grau de instrução dos alunos que preencheram Avaliação de Reação do Curso de Monitoramento (Edição 01)

Gráfico 10 – Avaliação dos recursos do Curso de Monitoramento (Edição 01)

Gráfico 11 – Frequência com que os alunos do Curso de Monitoramento informaram ter participado dos fóruns (Edição 01)

Gráfico 12 – Avaliação da contribuição dos fóruns como espaço de debates e troca de experiências no Curso de Monitoramento (Edição 01)

Gráfico 13 – Avaliação do conteúdo das aulas do Curso de Monitoramento (Edição 01)

Gráfico 14 – Frequência com que os alunos utilizaram os recursos complementares do Curso de Monitoramento (Edição 01)

Gráfico 15 – Avaliação da pertinência do Curso de Monitoramento (Edição 01)

Gráfico 16 – Avaliação geral do Curso de Monitoramento (Edição 01)

17

18

18

19

20

21

21

22

24

25

26

26

27

27

28

28

Page 7: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

Gráfico 17 – Grau de instrução dos alunos que preencheram Avaliação de Reação do Curso de Monitoramento (Edição 02)

Gráfico 18 – Avaliação dos recursos do Curso de Monitoramento (Edição 02)

Gráfico 19 – Frequência com que os alunos do Curso de Monitoramento informaram ter participado dos fóruns (Edição 02)

Gráfico 20 – Avaliação da contribuição dos fóruns como espaço de debates e troca de experiências no Curso de Monitoramento (Edição 02)

Gráfico 21 – Avaliação do conteúdo das aulas do Curso de Monitoramento (Edição 02)

Gráfico 22 – Frequência com que os alunos utilizaram os recursos complementares do Curso de Monitoramento (Edição 02)

Gráfico 23 – Avaliação da pertinência do Curso de Monitoramento (Edição 02)

Gráfico 24 – Avaliação geral do Curso de Monitoramento (Edição 02)

LISTA DE QUADROSQuadro 01 – Avaliação da estrutura do Curso de Monitoramento (Edição 01)

Quadro 02 – Avaliação da estrutura do Curso de Monitoramento (Edição 02)

Quadro 03 – Evolução do formato dos cursos do Ciclo de Capacitação MDS

25

31

38

29

30

31

32

32

33

34

34

Page 8: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)
Page 9: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

07CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

RESUMO EXECUTIVO

O Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diag-nósticos, Monitoramento e Avaliação de Programas e Ações do MDS é um pro-grama de capacitação para trabalhadores do Sistema Único da Assistência Social (SUAS). O projeto, idealizado pela Secretaria de Avaliação e Gestão da Informação (SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe-cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV) da Universidade Federal do Rio Grande do Sul (UFRGS), prevê a oferta de três cursos de extensão na modalidade de Ensino a Distância, a saber:

C1: Curso de indicadores para diagnóstico dos programas do SUAS e do Plano Brasil sem Miséria (BSM)

C2: Curso de conceitos e instrumentos para monitoramento de pro-gramas

C3: Curso de conceitos e instrumentos para avaliação de programas

Este documento apresenta os resultados da implementação do Curso 2 – Monitoramento, cujo objetivo foi o de capacitar gestores e técnicos estaduais e municipais da assistência social no uso de sistemas de informação e gestão da informação e no desenvolvimento de instrumentos e metodologias de monitora-mento de políticas sociais. O curso está dividido em três etapas: 1) Fundamentos do Monitoramento; 2) Instrumentos de Monitoramento; 3) Sistemas de Monito-ramento.

A execução dessa etapa do projeto foi dividida em duas fases. A primeira tratou da elaboração do material instrucional, que inclui os seguintes itens: Ca-derno de Estudos, Guia do Aluno, seleção de textos e de vídeos de apoio e com-plementares, glossário, exercícios de fixação, Avaliação Final, questões de debate nos fóruns. Em seguida, os materiais foram configurados e disponibilizados no Ambiente Virtual de Aprendizagem (AVA). A segunda fase consistiu na execução do curso propriamente dito. Os alunos que concluíram com êxito a etapa anterior do Ciclo (Curso de Diagnóstico) foram automaticamente inscritos no Curso de Monitoramento. Foram divididos em duas turmas: Edição 01 e Edição 02, cujas datas de início distaram em um mês uma da outra.

Foram inscritos, na primeira edição, 467 alunos e, na segunda, 1.690. No total, foram 2.157 alunos inscritos nos dois cursos de Conceitos e Instrumentos para Monitoramento de Programas.

Para a contagem dos alunos, são usadas, neste relatório, três categorias principais:

(1) alunos evadidos: alunos que nunca acessaram a Plataforma AVA;

(2) alunos desistentes: alunos que não acessaram a Plataforma AVA no último mês e que não fizeram a avaliação final;

01

Page 10: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

08 CEGOV

(3) alunos cursantes: alunos selecionados - (alunos evadidos + alunos de-sistentes).

Além dessas categorias, entre os alunos cursantes, são usadas ou-tras quatro de registro:

(3.1) alunos concluintes: alunos que realizaram todas as atividades, inde-pendentemente do aproveitamento final obtido;

(3.2) alunos aptos a receber certificado: alunos que realizaram todas as ati-vidades e que obtiveram aproveitamento igual ou superior a 60%;

(3.3) alunos reprovados: alunos que realizaram todas as atividades, mas não que obtiveram aproveitamento suficiente para certificação;

(3.4) alunos não concluintes: alunos que acompanharam o curso, porém não realizaram a avaliação final.

Ao final, o Curso de Conceitos e Instrumentos para Monitoramento de Programas contou com 1.513 alunos cursantes, dos quais 940 estão aptos a rece-ber o certificado.

Destacam-se, como desafios relacionados à implementação do curso, os seguintes pontos: tornar acessível um conteúdo complexo, como é o caso de indicadores sociais e modelo lógico; mobilizar a academia para um tema pouco explorado fora da gestão pública, como o M&A de programas; a captar e manter a participação de alunos cuja inscrição no Ciclo de Capacitação dista em cinco meses da realização da sua segunda etapa; a encontrar uma fórmula satisfatória de atuação dos tutores em um curso elaborado para ser autoinstrucional.

O sucesso do curso foi medido por meio da razão entre a quantidade de alunos certificados pela quantidade de alunos cursantes, denominada como taxa de sucesso do curso, cujo resultado foi de 62,12%. Diante desse resultado, reco-menda-se a abertura de um novo Ciclo ainda em 2014, a fim de potencializar o uso do material desenvolvido, objetivando alcançar um público ainda maior de trabalhadores do SUAS.

Page 11: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

09CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

RESUMO EDIÇÃO 01

Título do curso: Curso de Conceitos e Instrumentos para Monitoramento de Programas

Local: AVA Moodle CEGOV (https://moodle.cegov.ufrgs.br)

Formato: autoinstrucional, com apoio de tutor

Carga horária: 32 horas-aula

Período: 23 de junho de 2014 a 4 de agosto de 2014 - estendido a 18 de agosto de 2014 (57 dias)

Coordenação da Equipe CEGOV: Aline Gazola Hellmann

Equipe: Luciana Leite Lima; Ana Júlia Possamai; Bruno Sivelli; Gabriela Perin; Gianna Vargas Reis Salgado Dias; Gilian Cidade; Giordano Tronco; Gustavo Mar-garites; João Marcelo Cornetet; Júlia da Motta; Maria Goreti Machado; Matheus Machado Hoscheidt; Thiago Borne Ferreira.

Total de alunos selecionados: 467Total de alunos cursantes: 320Total de alunos concluintes: 258Total de alunos aptos a receber certificado: 246Taxa de sucesso do curso (certificados/cursantes): 76,88%

Avaliação geral do curso: 247 responderam à avaliação de reação. A Edição 01 foi avaliada de forma positiva: 96% dos alunos avaliaram o curso como muito bom ou bom.

Considerações: A Edição 01 do Curso de Monitoramento foi realizada com os alunos concluintes da Edição 01 do Curso de Diagnóstico. No total, 467 (mes-mo problema anterior) alunos iniciaram essa nova etapa do Ciclo de Capacitação MDS.

Esta edição foi executada em formato tutoreado, e os tutores foram res-ponsáveis pela verificação da frequência de acesso dos alunos à Plataforma, in-centivando a sua participação e solucionando dúvidas de conteúdo. Os 467 alu-nos foram divididos em 5 grupos de 94 alunos. Cinco tutores foram selecionados na Equipe e ficaram responsáveis por um grupo de alunos cada. A sistemática de atuação dos tutores envolveu o acompanhamento semanal da evolução dos alu-nos no curso, por meio da realização dos exercícios de fixação, do envio de mensa-gens pessoais para incentivar os alunos atrasados a retomarem as atividades, da proposição de questões de debate nos fóruns, da solução de dúvidas de conteúdo e de dúvidas técnicas em relação à Plataforma.

02

Page 12: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

CEGOV 10

Com base na experiência obtida no Curso de Diagnóstico, edições 01 e 02, algumas modificações no AVA Moodle foram feitas para facilitar e melhorar a interação com os alunos. Foram extintos os fóruns individuais de cada aula e foi criado um único fórum de conteúdo. Nesse fórum, os tutores criaram um tópico por aula, com questões de conteúdo, para incentivar a reflexão e o debate entre os alunos. Em média, seis postagens foram feitas pelos alunos de cada turma, em cada aula. A baixa participação pode ser reflexo da sua não obrigatoriedade para a certificação no curso; acredita-se que uma nova abordagem tem de ser pensada para as novas edições.

Para que obtivesse o certificado, o aluno deveria realizar os exercícios de fixação referentes a cada uma das cinco aulas, a Avaliação Final e a Pesquisa de Avaliação do Curso. Exigiu-se um aproveitamento mínimo de 60% na Avaliação Final. O número de questões da Avaliação Final foi reduzido pela metade, em comparação ao Curso de Diagnóstico, por se entender que o conjunto total de questões (4 questões por aula + 10 da avaliação final) contempla adequadamente o conteúdo apresentado.

Inicialmente previsto para ocorrer ao longo de 32 dias, o prazo do curso foi estendido em duas semanas, em virtude de um problema técnico que ocultou equivocadamente a Avaliação Final durante o período de 24 a 30 de julho. Ne-nhum outro problema técnico ou de conteúdo ocorreu.

Ao final do Curso, 246 alunos concluíram com êxito todas as etapas e tornaram-se aptos a iniciar o Curso de Avaliação. A taxa de cursantes dessa edição seguiu o padrão observado pela equipe nas experiências anteriores, com apenas 31,47% de evadidos/desistentes. Conclui-se que a Edição 01 do Curso de Monito-ramento foi executada de maneira satisfatória, com 76,87% dos alunos cursantes aprovados. Tendo em vista que a Edição 02 ocorreu em período concomitante ao da Edição 01, os alunos não concluintes dessa edição, que manifestaram interesse em refazer o Curso, foram convidados a inscrever-se no novo Ciclo de Capacitação MDS, com inscrições previstas para agosto.

Page 13: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

11ESTUDOS E PESQUISAS EM ECONOMIA CRIATIVA

RESUMO EDIÇÃO 02

Título do curso: Curso de Conceitos e Instrumentos para Monitoramento de Programas

Local: AVA Moodle CEGOV (https://moodle.cegov.ufrgs.br)

Formato: autoinstrucional, com apoio de tutor

Carga horária: 32 horas-aula

Período: 21 de julho de 2014 a 21 de agosto - estendido a 28 de agosto de 2014 (39 dias)

Coordenação da Equipe CEGOV: Aline Gazola Hellmann

Equipe: Luciana Leite Lima; Ana Júlia Possamai; Bruno Sivelli; Gianna Vargas Reis Salgado Dias; Gustavo Margarites; João Marcelo Cornetet; Júlia da Motta; Maria Goreti Machado; Matheus Machado Hoscheidt; Thiago Borne Ferreira.

Total de alunos selecionados: 1690

Total de alunos cursantes: 1193

Total de alunos concluintes: 760

Total de alunos aptos a receber certificado: 694

Taxa de sucesso do curso (certificados/cursantes): 58,17%

Avaliação geral do curso: 720 responderam à avaliação de reação. A Edição 02 foi positivamente avaliada: 97% dos alunos avaliaram o curso como muito bom ou bom e nenhum o avaliou negativamente.

Considerações: A Edição 02 do Curso de Monitoramento foi realizada com os alunos concluintes da Edição 02 do Curso de Diagnóstico. No total, 1.690 alunos iniciaram essa nova etapa do Ciclo de Capacitação MDS.

Essa edição foi executada em formato tutoreado. No entanto, foi amplia-do o número de alunos por tutor e reduzido o número de turmas. Os 1.690 alunos foram divididos em dois grupos de 845 alunos. Dois tutores foram selecionados na Equipe e cada um deles ficou responsável por um grupo de alunos. Essa mu-dança foi possível devido à nova sistemática de atuação dos tutores, que passaram a trabalhar com mensagens padronizadas para o grupo (e não mais personaliza-das), com o objetivo de congratular os alunos em dia com o cronograma proposto e, dessa forma, incentivar os atrasados. A criação de um único fórum também fa-cilitou o monitoramento das dúvidas pelos tutores, o que lhes permitiu dar conta de um maior número de alunos. Esse número maior de alunos por grupo também foi pensado como forma de movimentar e animar mais o Fórum de Conteúdo, o

03

Page 14: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

12 CEGOV

que, efetivamente, foi alcançado. Em média, 125 postagens foram feitas pelos alunos de cada turma nas questões propostas para debate.

Nessa edição, foi criado um fórum exclusivo para dúvidas técnicas e para utilização da Plataforma Moodle, com a finalidade de direcionar e organizar as dúvidas dos alunos, melhorando a capacidade e o prazo de respostas dos tutores e da equipe responsável pela manutenção da plataforma.

Além disso, diferentemente da Edição 01, essa edição transcorreu em um prazo de 32 dias, calculados conforme a proposta inicial de cronograma, isto é, prevendo uma hora de estudo por dia. De todo modo, a data de conclusão do curso foi estendida em uma semana, para permitir que os alunos atrasados con-cluíssem as atividades.

Ao final do Curso, 694 alunos concluíram com êxito todas as etapas e tornaram-se aptos a iniciar o Curso de Avaliação. Conclui-se que a Edição 02 do Curso de Monitoramento foi executada de maneira satisfatória. A taxa de cursan-tes dessa edição seguiu o padrão observado pela Equipe nas experiências ante-riores, com apenas 29,40% de evadidos/desistentes. A taxa de sucesso do curso, 58,71%, contudo, foi inferior à da edição anterior, possivelmente em decorrência do grande número de alunos cursantes, porém, não concluintes. Os alunos não concluintes dessa edição, que manifestaram interesse em refazer o curso, foram igualmente convidados a inscreverem-se no novo Ciclo de Capacitação MDS, com inscrições previstas para final de agosto.

Page 15: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

13CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

04PROJETO PEDAGÓGICO

Título do curso: Conceitos e Instrumentos para o Monitoramento de Programas

Carga horária: 32 horas aula, calculadas tendo, como base, cinco minutos de leitura por lauda do Caderno de Estudos e Textos de Apoio, somados aos minutos de visualização mínima de vídeos.

Objetivos gerais: Capacitar gestores e técnicos estaduais e municipais da assis-tência social no uso de sistemas de informação e gestão da informação e no de-senvolvimento de instrumentos e metodologias de monitoramento de políticas sociais.

Objetivos específicos:

• compreender os principais conceitos, tipos, características, aplicações e obje-tivos do monitoramento de programas;

• compreender a institucionalidade do monitoramento no Brasil;

• compreender as principais características e classificações dos indicadores so-ciais e suas aplicações nos sistemas de monitoramento;

• conhecer os principais instrumentos do monitoramento de programas: Mo-delo Lógico, Sistemas e Painéis de Monitoramento;

• conhecer as principais ferramentas de gestão da informação para apoio às atividades de monitoramento dos programas e ações sociais do Ministério.

Público-alvo: gestores e técnicos estaduais e municipais da assistência social.

Organização do tempo e do espaço: o curso é desenvolvido na modalidade Educação a Distância (EAD), por meio da Plataforma Moodle Institucional do CEGOV, em que o próprio aluno define o momento em que poderá acessar a Pla-taforma e realizar os estudos, os exercícios e as avaliações. Considera-se que a duração de 32 dias seja suficiente para a realização dos estudos e das avaliações propostas no curso. Para isso, é importante destinar pelo menos uma hora por dia de estudo, em média. Desse modo, o aluno concentrará sua atenção em um processo de aprendizagem contínuo, que o preparará para o monitoramento de ações e políticas sociais.

Cronograma propositivo: após o início do curso, o aluno terá o prazo de 32 dias corridos para realizar os exercícios de fixação das cinco aulas, a avaliação final e a avaliação do curso. Isso significa cerca de uma hora por dia de dedicação. No Guia do Aluno, foi apresentada uma proposta de cronograma de estudos (Figura 1).

Page 16: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

14 CEGOV

Formato do curso: autoinstrucional, com tutores de apoio.

Estratégias pedagógicas: o curso está organizado em módulos os quais estão divididos em aulas. Uma aula compreende o respectivo conteúdo e um exercício. Ao concluir todos os módulos, o aluno participará de uma Avaliação Final sobre todos os temas abordados no curso. Os conteúdos serão desenvolvidos por meio de vídeos, textos obrigatórios e materiais de apoio. Os exercícios e a Avaliação Final são compostos por questões de múltipla escolha.

Recursos digitais: vídeos, hipertextos, hiperlinks, ferramentas informacionais digitais.

Fundamentação teórica do conteúdo: ferramentas de planejamento (árvore de problemas, marco lógico, modelo lógico, painel de indicadores). Manuais e re-ferências bibliográficas sobre o tema, com ênfase nos autores utilizados nos ma-teriais e nas produções da SAGI-MDS.

Estratégia de apresentação do conteúdo: os conteúdos avançam a partir da apresentação dos fundamentos básicos do monitoramento, seguidos dos instru-mentos geralmente empregados (indicadores e modelo lógico) e, por fim, dos sis-temas de monitoramento e das ferramentas de apoio (Figura 2).

Figura 01 – Cronograma propositivo

Fonte: Elaboração própria.

Page 17: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

15CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

1aula

2

3

4

5

aula

aula

aula

aula

Monitoramento de Programas

Indicadores Sociais

Modelo Lógico

Painel de Indicadores e Fontes Dados

Ferramentas de Gestão da Informação

aula temamóduloMÓDULO 1: Fundamentos domonitoramento

MÓDULO 2: Instrumentos demonitoramento

MÓDULO 3: Sistemas de monitoramento

20horas

10horas

2horas

VIDEOTECAEXERCÍCIOS

CADERNO DE ESTUDOS

leia+ AVALIAÇÃO FINAL

1aula

2 3 4 5aula aula aula aula

MÓDULO 1 MÓDULO 3INTRODUÇÃO AVALIAÇÃOMÓDULO 2

Figura 02 – Conteúdo do curso

Fonte: Elaboração própria.

Materiais de apoio: Caderno de Estudos, Guia do Aluno, Guia do Moodle, leitu-ras complementares, vídeos, fóruns, ferramentas informacionais do MDS.

Critérios de avaliação e certificação: para receber certificado de participação no curso, é preciso acessar todos os módulos, realizar os exercícios referentes a cada uma das aulas, a Avaliação Final (Figura 3) e a Avaliação do Curso. O apro-veitamento mínimo de 60% na Avaliação Final e o preenchimento da Avaliação do Curso são requisitos obrigatórios para concluir com êxito o curso e obter o certificado.

Figura 03 - Evolução do curso: exercícios, avaliações e certificação

Fonte: Elaboração própria.

Certificado: ao concluir os exercícios de fixação, se o aluno atingiu, no mínimo, 60% de aproveitamento na Avaliação Final e respondeu à Avaliação do Curso, ele receberá o certificado automaticamente (Figura 4).

Page 18: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

16 CEGOV

Figura 04 – Certificado do Curso de Diagnóstico

Fonte: Elaboração própria.

Page 19: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

17CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

05RESULTADOS DA EDIÇÃO 01

No dia 18 de agosto de 2014, foi encerrada a Edição 01 do Curso de Con-ceitos e Instrumentos para Monitoramento de Programas.

A extensão do prazo, por mais duas semanas, contou positivamente não só para a realização da Avaliação Final – que, por problemas técnicos, ficou inde-vidamente oculta por alguns dias –, mas também para a conclusão das atividades das aulas anteriores. O Gráfico 1 ilustra a evolução dos alunos conforme o núme-ro de atividades concluídas em cada semana. Como se pode observar, a quantida-de de atividades realizadas decaiu nas semanas 05 e 06 e aumentou, significati-vamente, no período extra (semanas 07 e 08). Durante a semana de prorrogação, 473 atividades foram realizadas.

Gráfico 1

Gráfico 2

131

192

212

272

188

171

224

249

0 50 100 150 200 250 300

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6

Semana 7

Semana 8

303

280

271

265

262

258

230 240 250 260 270 280 290 300 310

Aula 1

Aula 2

Aula 3

Aula 4

Aula 5

Av. Final

Gráfico 01 - Número de atividades realizadas semanalmente pelos alunos do Curso de Monitoramen-to (Edição 01)

Fonte: Elaboração própria.

Avaliando a evolução dos alunos ao longo das atividades, é possível ob-servar, ainda, que 85% dos alunos que iniciaram o curso (realizaram o exercício da Aula 01) e concluíram-no, ou seja, completaram a Avaliação Final (Gráfico 2).

Page 20: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

18 CEGOV

A nota média obtida pelos alunos que realizaram as atividades foi de 7,05 (de um máximo de 10). Avalia-se como satisfatória a nota média obtida pelos alunos na Avaliação Final (7,56), uma vez que esta era composta por 10 questões que abrangiam todo o conteúdo do curso (Gráfico 3). Como esperado, a avaliação que trata do conteúdo trabalhado na terceira aula apresentou uma nota média menor, por tratar de conteúdo de maior complexidade (o Modelo Lógico). De fato, foi a aula sobre a qual os alunos apresentaram maior número de dúvidas nos fóruns e nas mensagens privadas para os tutores.

Gráfico 1

Gráfico 2

131

192

212

272

188

171

224

249

0 50 100 150 200 250 300

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6

Semana 7

Semana 8

303

280

271

265

262

258

230 240 250 260 270 280 290 300 310

Aula 1

Aula 2

Aula 3

Aula 4

Aula 5

Av. FinalGráfico 02 - Número de alunos que completaram as atividades de cada etapa do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Gráfico 3

Gráfico 4

7,51 8,31

6,68 7,16

8,08 7,56

0,001,002,003,004,005,006,007,008,009,00

10,00

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5 Av Final

76,88%

3,75%

19,37%

Aprovados

Reprovados

Não concluintes

450

799

743

852

1128

1217

0 200 400 600 800 1000 1200 1400

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6

Gráfico 03 - Nota média dos alunos nas atividades de cada etapa do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Page 21: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

19CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

Fonte: Elaboração própria.

A Figura 5 apresenta o panorama final da Edição 01 do Curso de Monito-ramento, de acordo com a categorização dos alunos que foi adotada1.

Avaliou-se que a taxa de cursantes da edição 01 estava dentro do espe-rado para curso EAD, com apenas 31,48% de evadidos/desistentes. Tomando apenas os alunos que efetivamente cursaram a edição, registrou-se uma taxa de sucesso de 76,88% (aprovados/cursantes). Dos 258 alunos que realizaram a Ava-liação Final, apenas 12 ficaram abaixo da média (obtiveram nota inferior a 60%) (Gráfico 4).

(1) Para fins de contagem do número de participantes, são usadas, ao longo deste relatório, as categorias principais: (1) alunos evadidos: alunos que nunca acessaram a Plataforma AVA; (2) alunos desistentes: não acessaram a Plataforma AVA no último mês e não fizeram a Ava-liação Final; (3) alunos cursantes: alunos inscritos - (alunos evadidos + alunos desistentes). Ainda, entre os alunos cursantes, há (3.1) alunos concluintes: aqueles que realizaram todas as atividades independentemente do aproveitamento final obtido; (3.2) alunos aprovados: aqueles que realizaram todas as atividades e obtiveram aproveitamento igual ou superior a 60%; (3.3) alunos reprovados: aqueles que realizaram todas as atividades, mas que não ob-tiveram aproveitamento suficiente para certificação; (3.4) alunos não concluintes: acompa-nharam o curso, porém não realizaram a avaliação final.

Figura 05 - Panorama do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Gráfico 3

Gráfico 4

7,51 8,31

6,68 7,16

8,08 7,56

0,001,002,003,004,005,006,007,008,009,00

10,00

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5 Av Final

76,88%

3,75%

19,37%

Aprovados

Reprovados

Não concluintes

450

799

743

852

1128

1217

0 200 400 600 800 1000 1200 1400

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6

Gráfico 04 - Resultados do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Page 22: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

20 CEGOV

06RESULTADOS DA EDIÇÃO 02

No dia 28 de agosto de 2014, foi encerrada a Edição 02 do Curso de Con-ceitos e Instrumentos para Monitoramento de Programas.

Por não terem ocorrido problemas técnicos, a Edição 02 foi realizada no período programado, de cinco semanas ou 32 dias, considerando uma hora de estudo por dia – 32 horas/aula no total. Entretanto, conforme o que ocorreu nas edições anteriores, a edição 02 foi prorrogada por mais uma semana.

Assim como na edição 01, a extensão do prazo por mais uma semana foi positiva não só para a realização da Avaliação Final, mas também para a conclu-são das atividades das aulas anteriores. O Gráfico 5 ilustra a evolução dos alunos conforme o número de atividades concluídas em cada semana. Como é possível observar, a quantidade de atividades realizadas caiu na semana 03 e aumentou significativamente no período extra (semana 06). Foram realizadas 1.217 ativi-dades na semana de prorrogação, o que aponta novamente para a tendência de os alunos realizarem o curso efetivamente nos últimos dias.

Gráfico 05 - Número de atividades realizadas semanalmente pelos alunos do Curso de Monitoramen-to (Edição 02)

Fonte: Elaboração própria.

Gráfico 3

Gráfico 4

7,51 8,31

6,68 7,16

8,08 7,56

0,001,002,003,004,005,006,007,008,009,00

10,00

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5 Av Final

76,88%

3,75%

19,37%

Aprovados

Reprovados

Não concluintes

450

799

743

852

1128

1217

0 200 400 600 800 1000 1200 1400

Semana 1

Semana 2

Semana 3

Semana 4

Semana 5

Semana 6

Page 23: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

21CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

Dos alunos que iniciaram o curso (realizaram o exercício da Aula 01), 75% concluíram-no, ou seja, fizeram a Avaliação Final (Gráfico 6).

Gráfico 5

Gráfico 6

Gráfico 7 –

1006

929

875

828

792

759

0 200 400 600 800 1000 1200

Aula 1

Aula 2

Aula 3

Aula 4

Aula 5

Av. Final

Concluintes

7,73 8,24

6,6 7,25

8,3 7,34

0,00

1,00

2,00

3,00

4,00

5,00

6,00

7,00

8,00

9,00

10,00

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5 Av Final

Gráfico 06 - Número de alunos que completaram as atividades de cada etapa do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

A nota média, obtida pelos alunos que realizaram as atividades, foi de 7,58 (de um máximo de 10). Avalia-se igualmente como satisfatória a nota média obtida pelos alunos na Avaliação Final (7,34), conforme mostra o Gráfico 7. A ava-liação referente ao conteúdo da terceira aula do curso apresentou uma nota média menor e muito semelhante à da primeira edição. Novamente, foi a aula sobre a qual os alunos apresentaram maior número de dúvidas.

Gráfico 5

Gráfico 6

Gráfico 7 –

1006

929

875

828

792

759

0 200 400 600 800 1000 1200

Aula 1

Aula 2

Aula 3

Aula 4

Aula 5

Av. Final

Concluintes

7,73 8,24

6,6 7,25

8,3 7,34

0,00

1,00

2,00

3,00

4,00

5,00

6,00

7,00

8,00

9,00

10,00

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5 Av Final

Gráfico 07 - Nota média dos alunos nas atividades de cada etapa do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Page 24: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

22 CEGOV

Finalmente, a Figura 6 apresenta o panorama final da Edição 02 do Curso de Monitoramento, de acordo com a categorização dos alunos que foi adotada.

Figura 06 - Panorama do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Avaliou-se que a taxa de cursantes da Edição 02 estava dentro do espe-rado para um curso EAD, com 29,41% de evadidos e desistentes. Desses, vale observar que a taxa de desistentes, isto é, daqueles que iniciaram o curso, mas que o abandonaram, foi somente de 4,97%.

Tomando apenas os alunos que efetivamente cursaram a edição, regis-trou-se uma taxa de sucesso de 58,17% (aprovados/cursantes). Dos 759 alunos que realizaram a Avaliação Final, apenas 8,70% ficaram abaixo da nota mínima exigida (Gráfico 8).

Contudo, cabe avaliar mais atentamente a taxa de alunos não concluin-tes, ou seja, alunos que realizaram boa parte dos exercícios, mas que não concluí-ram a Avaliação Final. Dos alunos cursantes da Edição 02, 36,30% se enquadra-ram nessa categoria. Podem ser levantadas duas hipóteses para esse resultado: 1) o período mais longo para a realização do Curso na Edição 01 em comparação com o da Edição 02 (11 dias a mais); 2) o maior número de alunos por tutor. No entanto, a segunda hipótese parece não se mostrar verdadeira, já que essa edição apresentou uma maior taxa de participação nos fóruns. De toda forma, a hipóte-se merece ser estudada e tratada a partir de novas formas de trabalho do tutor, que busquem chamar à participação os alunos que nunca entraram na plataforma (evadidos) e os que estão atrasados em relação ao cronograma proposto.

Gráfico 08 - Resultados do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Gráfico 8

Gráfico 10

58,17%

5,53%

36,30% Aprovados

Reprovados

Não concluintes

0,40%

28,74%

59,11%

10,53%

1,21%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

Page 25: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

23CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

AVALIAÇÃO DE REAÇÃO EDIÇÃO 01

A Pesquisa de Avaliação do Curso (ou Avaliação de Reação) consiste em um formulário disponibilizado no próprio Ambiente Virtual de Aprendizagem. Sua finalidade é a de avaliar a estrutura do curso, a qualidade e a pertinência de seus materiais e aulas, a navegação no AVA e os aspectos gerais em relação ao andamento das aulas. O objetivo é colher o feedback dos alunos, com vistas ao aperfeiçoamento desse curso e de outros que venham a ser realizados.

A avaliação é composta por 41 questões que abordam seis grupos temá-ticos: Identificação Funcional; Avaliação do AVA; Avaliação do Curso em relação à estrutura; Conteúdo do curso; Conteúdo; Considerações finais. Os grupos descri-tos variam conforme a questão: poucas vezes/muitas vezes; nunca, três vezes ou menos, quatro vezes ou menos; sim/não; inadequado, pouco adequado, relativa-mente adequado, perfeitamente adequado; nunca contribuiu, contribuiu poucas vezes, contribuiu na maioria das vezes, sempre contribuiu; insatisfatório, regular, bom, muito bom; não concordo, concordo parcialmente, concordo plenamente.

A avaliação é preenchida de maneira anônima pelos alunos. Sua realiza-ção é obrigatória para a obtenção do certificado de conclusão do curso.

Nesta seção, serão analisados os resultados da avaliação de reação da Edi-ção 01. Na próxima, serão apresentados os resultados da Edição 02, seguidas de considerações da Equipe CEGOV.

AVALIAÇÃO DA EDIÇÃO 01

Número de alunos que a concluíram: 247

A) IDENTIFICAÇÃO FUNCIONAL

Em relação ao grau de instrução dos alunos concluintes que preencheram a avaliação de reação, foi possível observar que 59% têm nível de formação em pós-graduação lato sensu, enquanto 11% dos concluintes têm formação em pós--graduação stricto sensu. Além disso, uma parcela significativa tem curso superior completo (Gráfico 9).

07

Page 26: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

24 CEGOV

Gráfico 8

Gráfico 10

58,17%

5,53%

36,30% Aprovados

Reprovados

Não concluintes

0,40%

28,74%

59,11%

10,53%

1,21%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

Gráfico 09 - Grau de instrução dos alunos que preencheram Avaliação de Reação do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

B) AVALIAÇÃO DO AMBIENTE VIRTUAL DO CURSO

Quanto à participação anterior em algum curso na modalidade EAD, surpreende que 5% dos alunos tenham dito nunca terem participado, já que to-dos são egressos do Curso de Diagnóstico, realizado igualmente nessa modali-dade. Esse resultado pode ser decorrente da falta de clareza quanto ao alcance da pergunta, isto é, se ela se refere a qualquer outro curso além do de Monitora-mento ou se a outro curso do presente Ciclo. Diante disso, sugere-se uma melhor redação para as próximas edições.

Em relação ao acesso ao Ambiente Virtual de Aprendizagem do Cur-so de Monitoramento, Edição 01, apenas 5,26% informaram ter tido dificulda-des. Destes:

• 15,4% tiveram dificuldade com a senha de acesso ‘muitas vezes’;

• nenhum aluno relatou problemas com a Web ‘muitas vezes’

• 19,43% precisaram de apoio técnico em algum momento do curso.

Quanto à avaliação dos recursos do Curso no AVA, a maioria dos alu-nos concluintes avaliou como perfeitamente adequados todos os quesitos: layout do Caderno de Estudos, velocidade das respostas, ícones, navegação, texto de apresentação e layout do Moodle (Gráfico 10).

Sobre o período em que o aluno utilizou o Ambiente Virtual de Apren-dizagem, verificou-se que:

• 71,22% informaram ter acessado o Curso após a jornada de trabalho;

• 28,78% o fizeram durante a jornada de trabalho.

Essa realidade talvez seja uma evidência de que a participação no Curso não conta com a ciência e/ou o apoio dos superiores desses profissionais para que eles possam realizar as atividades durante o expediente.

Page 27: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

25CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

Gráfico 9

Gráfico 10

42,91% 42,91%

14,17%

0%5%

10%15%20%25%30%35%40%45%50%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

21,86%

34,01% 30,77%

13,36%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

0,40%

0,40%

0,81%

0,81%

2,83%

0,40%

27,13%

21,05%

28,74%

27,53%

27,53%

21,05%

72,47%

78,54%

70,45%

71,66%

69,64%

78,54%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do caderno de estudos

Pouco adequado ou inadequado Relativamente adequado Perfeitamente adequado

Gráfico 10 - Avaliação dos recursos do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

C) AVALIAÇÃO DO CURSO EM RELAÇÃO À ESTRUTURA

Os alunos que avaliaram o Curso de Monitoramento concordam que fo-ram bem informados sobre os seguintes pontos:

Item SIM NÃOObjetivos do curso 99,19% 0,81%

Cronograma de desenvolvimento 91,50% 8,50%

Dinâmica de estudo 95,95% 4,05%

Avaliação de desempenho 95,55% 4,45%

Quadro 01 - Avaliação da estrutura do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Em relação aos fóruns, a análise dos gráficos 11 e 12 permite concluir que a maioria dos alunos utilizou esse canal de comunicação, ao menos uma vez durante o curso (57%), e que a ampla maioria informou que esse meio de comuni-cação contribuiu, pelo menos uma vez, para a promoção de debates e para a troca de experiências (78%).

Page 28: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

26 CEGOV

Gráfico 9

Gráfico 10

42,91% 42,91%

14,17%

0%5%

10%15%20%25%30%35%40%45%50%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

21,86%

34,01% 30,77%

13,36%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

0,40%

0,40%

0,81%

0,81%

2,83%

0,40%

27,13%

21,05%

28,74%

27,53%

27,53%

21,05%

72,47%

78,54%

70,45%

71,66%

69,64%

78,54%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do caderno de estudos

Pouco adequado ou inadequado Relativamente adequado Perfeitamente adequado

Gráfico 11 - Frequência com que os alunos do Curso de Monitoramento infor-maram ter participado dos fóruns (Edição 01)

Fonte: Elaboração própria.

Gráfico 9

Gráfico 10

42,91% 42,91%

14,17%

0%5%

10%15%20%25%30%35%40%45%50%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

21,86%

34,01% 30,77%

13,36%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

0,40%

0,40%

0,81%

0,81%

2,83%

0,40%

27,13%

21,05%

28,74%

27,53%

27,53%

21,05%

72,47%

78,54%

70,45%

71,66%

69,64%

78,54%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do caderno de estudos

Pouco adequado ou inadequado Relativamente adequado Perfeitamente adequado

Gráfico 12 - Avaliação da contribuição dos fóruns como espaço de debates e troca de experiências no Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

D) CONTEÚDO DO CURSO

No que se refere ao conteúdo das aulas, de maneira geral, os alunos avaliaram-no positivamente. A larga maioria considerou o conteúdo das aulas “muito bom” ou “bom” (Gráfico 13).

Page 29: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

27CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

Gráfico 14 - Frequência com que os alunos utilizaram os recursos complementa-res do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Gráfico 13

Gráfico 11

Gráfico 12

2,02% 2,83% 3,24% 4,86% 6,07%

42,11% 42,11% 42,11% 42,51% 40,49%

55,87% 55,06% 54,66% 52,63% 53,04%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5

Insatisfatório Regular Bom Muito Bom

8,50%

21,86%

17,00%

80,97%

67,61%

66,80%

10,53%

10,53%

16,19%

0% 20% 40% 60% 80% 100%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou mais

Gráfico 13 - Avaliação do conteúdo das aulas do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

E) CONTEÚDO

Quanto à utilização dos recursos complementares do Curso de Mo-nitoramento (tutoriais e vídeos, Saiba Mais e Leia+), verificou-se que, em sua maioria, os alunos utilizaram-nos de uma a três vezes (Gráfico 14).

Gráfico 13

Gráfico 11

Gráfico 12

2,02% 2,83% 3,24% 4,86% 6,07%

42,11% 42,11% 42,11% 42,51% 40,49%

55,87% 55,06% 54,66% 52,63% 53,04%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5

Insatisfatório Regular Bom Muito Bom

8,50%

21,86%

17,00%

80,97%

67,61%

66,80%

10,53%

10,53%

16,19%

0% 20% 40% 60% 80% 100%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou mais

Page 30: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

28 CEGOV

Já em relação à pertinência e à aplicação dos conhecimentos ad-quiridos no Curso na realidade profissional do aluno, verificou-se que a maioria achou que foram pertinentes os conteúdos e a forma como eles foram apresenta-dos. Além disso, a maioria conseguiu relacioná-los e utilizá-los em suas realidades profissionais (Gráfico 15).

gráfico 16

Gráfico 17

0,40% 3,64%

34,82%

61,13%

Muito Ruim ou Ruim

Regular

Bom

Muito Bom

0,40%

0,81%

0,40%

2,02%

0,40%

33,20%

32,39%

37,25%

31,17%

28,34%

66,40%

66,80%

62,35%

66,80%

71,26%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Associei os conteúdos aos meus conhecimentos.

Associei os conteúdos às minhas experiências.

Procurei situações em que fosse possível aplicar o conteúdodo curso.

Os conteúdos facilitaram a compreensão e utilização dasferramentas do Portal SAGI.

Os exercícios e a prova final estão claros e de acordo com oconteúdo ensinado.

Não concordo Concordo Parcialmente Concordo Plenamente

Gráfico 15 - Avaliação da pertinência do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Observou-se, ainda, que 85% dos alunos informaram ter utilizado os conhecimentos adquiridos na etapa anterior do Ciclo de Capacitação, ou seja, no Curso de Indicadores para Diagnóstico dos Programas do SUAS e do BSM.

Por fim, 96% dos alunos avaliaram o conjunto do curso como “Muito Bom” ou “Bom”, conforme ilustra o Gráfico 16.

gráfico 16

Gráfico 17

0,40% 3,64%

34,82%

61,13%

Muito Ruim ou Ruim

Regular

Bom

Muito Bom

0,40%

0,81%

0,40%

2,02%

0,40%

33,20%

32,39%

37,25%

31,17%

28,34%

66,40%

66,80%

62,35%

66,80%

71,26%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Associei os conteúdos aos meus conhecimentos.

Associei os conteúdos às minhas experiências.

Procurei situações em que fosse possível aplicar o conteúdodo curso.

Os conteúdos facilitaram a compreensão e utilização dasferramentas do Portal SAGI.

Os exercícios e a prova final estão claros e de acordo com oconteúdo ensinado.

Não concordo Concordo Parcialmente Concordo Plenamente

Gráfico 16 - Avaliação geral do Curso de Monitoramento (Edição 01)

Fonte: Elaboração própria.

Page 31: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

29CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

AVALIAÇÃO DE REAÇÃO EDIÇÃO 02

AVALIAÇÃO DA EDIÇÃO 02

Número de alunos que a concluíram: 720

A) IDENTIFICAÇÃO FUNCIONAL

Em relação ao grau de instrução dos alunos concluintes que preencheram a avaliação de reação, foi possível observar que 55,91% têm nível de formação em pós-graduação lato sensu, enquanto 5,98% dos alunos concluintes têm formação em pós-graduação stricto sensu (Gráfico 17) – percentual um pouco menor se com-parado com o dos alunos da primeira edição.

08

Gráfico 17 - Grau de instrução dos alunos que preencheram Avaliação de Reação do Curso de Monitoramento (Edição 02)

Gráfico 18

Gráfico 19

0,28%

37,83%

55,91%

5,70% 0,28%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

1,39%

0,83%

0,56%

1,53%

0,83%

1,67%

23,92%

18,78%

24,20%

27,96%

22,95%

17,66%

74,69%

80,39%

75,24%

70,51%

76,22%

80,67%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do caderno de estudos

Pouco adequado ou inadequado Relativamente adequado Perfeitamente adequado

Fonte: Elaboração própria.

Page 32: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

30 CEGOV

B) AVALIAÇÃO DO AMBIENTE VIRTUAL DO CURSO

Quanto à participação anterior em algum curso na modalidade EAD, novamente surpreende que aproximadamente 4% dos alunos tenham dito que nunca participaram desse tipo de curso. Nesse caso, valem as mesmas considera-ções feitas na seção anterior para a Edição 01, referentes à necessidade de melho-ria da redação dessa questão.

Em relação ao acesso ao Ambiente Virtual de Aprendizagem do Cur-so de Monitoramento, apenas 4,46% dos alunos da Edição 02 informaram ter tido alguma dificuldade. Desses:

• 15,63% tiveram dificuldade com a senha de acesso ‘muitas vezes’;

• 28,13% tiveram dificuldade com a Web ‘muitas vezes’;

• 12,10% precisaram de apoio técnico em algum momento do curso.

Quanto à avaliação dos recursos do Curso no AVA, a maioria dos alunos concluintes avaliou como perfeitamente adequados todos os quesitos: la-yout do Caderno de Estudos, velocidade das respostas, ícones, navegação, texto de apresentação e layout do Moodle (Gráfico 18). Os percentuais positivos são, inclusive, maiores do que os registrados na Edição 01.

Gráfico 18 - Avaliação dos recursos do Curso de Monitoramento (Edição 02)

Gráfico 18

Gráfico 19

0,28%

37,83%

55,91%

5,70% 0,28%

Ensino Médio

Graduação

Especialização

Mestrado

Doutorado

1,39%

0,83%

0,56%

1,53%

0,83%

1,67%

23,92%

18,78%

24,20%

27,96%

22,95%

17,66%

74,69%

80,39%

75,24%

70,51%

76,22%

80,67%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Layout do Moodle

Texto de apresentação

Navegação

Ícones

Velocidade das respostas

Layout do caderno de estudos

Pouco adequado ou inadequado Relativamente adequado Perfeitamente adequado

Fonte: Elaboração própria.

Sobre o período em que o aluno utilizou o Ambiente Virtual de Aprendizagem, verificou-se a mesma tendência apresentada anteriormente:

• 68,57% informaram ter acessado o curso após a jornada de trabalho;

• 31,43% o fizeram durante a jornada de trabalho.

C) AVALIAÇÃO DO CURSO EM RELAÇÃO À ESTRUTURA

Os alunos que avaliaram a Edição 02 do Curso de Monitoramento concordaram que foram bem informados sobre os seguintes pontos:

Page 33: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

31CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

Item SIM NÃOObjetivos do curso 98,05% 1,95%

Cronograma de desenvolvimento 92,21% 7,79%

Dinâmica de estudo 96,66% 3,34%

Avaliação de desempenho 97,08% 2,92%

Quadro 02 - Avaliação da estrutura do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Essas proporções são muito semelhantes às registradas na Edição 01. Chama a atenção que cerca de 8% dos alunos afirmaram não ter sido infor-mados sobre o cronograma de desenvolvimento do curso, ainda que este te-nha seção específica reservada no Guia do Aluno – o primeiro material com o qual os alunos entram em contato. O Guia do Aluno é enviado com o e-mail institucional, que alerta os alunos sobre o início do curso. Para as próximas edições, sugere-se chamar mais atenção para esse guia e suas informações.

Em relação à participação nos fóruns, os alunos da Edição 02 fo-ram mais ativos que os da Edição 01. Segundo os alunos, 71,49% utilizaram, pelo menos uma vez, esse canal de comunicação, em contraste com os 57% da Edição 01 (Gráficos 19).

Gráfico 20

Gráfico 13

28,51%

41,31%

30,18%

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

15,44%

28,65%

34,91%

21,00%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

3,20% 5,29% 10,01% 6,54% 6,40%

38,66% 36,44% 37,83% 38,25% 36,30%

57,58% 57,72% 50,76% 54,10% 56,47%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5

Insatisfatório Regular Bom Muito Bom

Gráfico 19 - Frequência com que os alunos do Curso de Monitoramento infor-maram ter participado dos fóruns (Edição 02)

Fonte: Elaboração própria.

Observou-se, ainda, que a larga maioria informou que os fóruns con-tribuíram, pelo menos uma vez, para a promoção de debates e para a troca de experiências (84,56%), conforme mostra o Gráfico 20. Vale lembrar que, diferentemente da Edição 01, a Edição 02 contou com um fórum específico para dúvidas relacionadas à Plataforma Moodle. Ademais, os alunos foram agrupados em apenas duas grandes turmas, o que ampliou a movimentação e a interação entre eles nesse espaço.

Page 34: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

32 CEGOV

Gráfico 20

Gráfico 13

28,51%

41,31%

30,18%

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

15,44%

28,65%

34,91%

21,00%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

3,20% 5,29% 10,01% 6,54% 6,40%

38,66% 36,44% 37,83% 38,25% 36,30%

57,58% 57,72% 50,76% 54,10% 56,47%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5

Insatisfatório Regular Bom Muito Bom

Gráfico 20 - Avaliação da contribuição dos fóruns como espaço de debates e troca de experiências no Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

E) CONTEÚDO DO CURSO

No que se refere ao conteúdo das aulas, de maneira geral, os alunos avaliaram-no positivamente, em proporções muito semelhantes à avaliação feita pelos alunos da Edição 01 (Gráfico 21).

Gráfico 21 - Avaliação do conteúdo das aulas do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Gráfico 20

Gráfico 13

28,51%

41,31%

30,18%

0%

5%

10%

15%

20%

25%

30%

35%

40%

45%

Nenhuma vez Em 3 aulas ou menos Em 4 aulas ou mais

15,44%

28,65%

34,91%

21,00%

0%

5%

10%

15%

20%

25%

30%

35%

40%

Nunca contribuíram Contribuíram poucasvezes

Contribuíram namaiorias das vezes

Sempre contribuíram

3,20% 5,29% 10,01% 6,54% 6,40%

38,66% 36,44% 37,83% 38,25% 36,30%

57,58% 57,72% 50,76% 54,10% 56,47%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Aula 1 Aula 2 Aula 3 Aula 4 Aula 5

Insatisfatório Regular Bom Muito Bom

Page 35: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

33CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

F) CONTEÚDO

Quanto à utilização dos recursos complementares do curso, em sua maioria, os alunos os utilizaram de uma a três vezes (Gráfico 22). Contu-do, merece atenção a informação de que 32% e 30% dos alunos não utilizaram os recursos “Tutoriais e Vídeos” e o “Saiba Mais”, respectivamente, propor-ções consideravelmente maiores do que o que foi verificado na Edição 01. Su-gere-se que, nas próximas edições, os tutores estimulem os alunos para que conheçam esses recursos.

Gráfico 22 - Frequência com que os alunos utilizaram os recursos complementa-res do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Gráfico 22

Gráfico 23

Gráfico 24

14,46%

30,46%

31,99%

72,46%

58,14%

55,35%

13,07%

11,40%

12,66%

0% 20% 40% 60% 80% 100%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou mais

0,70%

1,53%

1,95%

1,25%

1,81%

33,24%

33,10%

35,61%

26,98%

25,73%

66,06%

65,37%

62,45%

71,77%

72,46%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Associei os conteúdos aos meus conhecimentos.

Associei os conteúdos às minhas experiências.

Procurei situações em que fosse possível aplicar o conteúdo docurso.

Os conteúdos facilitaram a compreensão e utilização dasferramentas do Portal SAGI.

Os exercícios e a prova final estão claros e de acordo com oconteúdo ensinado.

Não concordo Concordo Parcialmente Concordo Plenamente

Quanto à pertinência e à aplicação dos conhecimentos adqui-ridos no curso na realidade profissional do aluno, registrou-se, na Edição 02, um resultado bastante parecido com o verificado na Edição 01. A vasta maioria dos alunos considerou pertinentes os conteúdos e a forma como eles foram apresentados; também disseram que conseguiram relacioná-los e utili-zá-los em suas realidades profissionais (Gráfico 23).

Page 36: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

34 CEGOV

Gráfico 23 - Avaliação da pertinência do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

Gráfico 22

Gráfico 23

Gráfico 24

14,46%

30,46%

31,99%

72,46%

58,14%

55,35%

13,07%

11,40%

12,66%

0% 20% 40% 60% 80% 100%

Leia +

Saiba Mais

Tutoriais e Vídeos

Nunca 3 vezes ou menos 4 vezes ou mais

0,70%

1,53%

1,95%

1,25%

1,81%

33,24%

33,10%

35,61%

26,98%

25,73%

66,06%

65,37%

62,45%

71,77%

72,46%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

Associei os conteúdos aos meus conhecimentos.

Associei os conteúdos às minhas experiências.

Procurei situações em que fosse possível aplicar o conteúdo docurso.

Os conteúdos facilitaram a compreensão e utilização dasferramentas do Portal SAGI.

Os exercícios e a prova final estão claros e de acordo com oconteúdo ensinado.

Não concordo Concordo Parcialmente Concordo Plenamente

Observou-se, ainda, que 81,36% dos alunos informaram ter utiliza-do os conhecimentos adquiridos no anterior Curso de Diagnóstico, pro-porção bastante próxima à apresentada na edição anterior.

Finalmente, quase a totalidade dos alunos (97%) avaliou o curso como “Muito Bom” ou “Bom” (Gráfico 24). Nenhum aluno considerou o curso “Muito ruim ou Ruim”.

Gráfico 24 - Avaliação geral do Curso de Monitoramento (Edição 02)

Fonte: Elaboração própria.

0,28% 3,48%

31,57%

64,67%

Muito ruim e ruim

Regular

Bom

Muito bom

Page 37: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

35CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

09DEPOIMENTOS

No dia 28 de agosto de 2014, foi finalizada a segunda etapa do Ciclo de Capacitação em Conceitos e Técnicas para a Elaboração de Diagnósticos, Monito-ramento e Avaliação de Programas e Ações do MDS; 940 alunos concluíram com êxito as Edições 01 e 02 do Curso de Conceitos e Instrumentos para Monitora-mento de Programas e aptos a ingressar na terceira etapa (Curso de Avaliação).

Da parte dos participantes, em geral, a Pesquisa de Avaliação do Curso revelou uma ampla satisfação. Naturalmente, foram feitas sugestões de melho-rias para as próximas edições, as quais serão estudadas e consideradas.

Alguns dos depoimentos dos participantes são reproduzidos abaixo.Levei todo o material e pude estudá-lo, acompanhando as questões pro-postas. Excelente o material, com diversos subsídios que nos auxiliarão na execução sadia da política de assistência social. (Losangelis Viveiros Gregório da Cunha)

Estamos chegando ao fim de mais um curso, que estimulou o aprendi-zado e a utilização de ferramentas em que até trabalhávamos, mas não nos dávamos conta da importância de cada uma delas. Muito bom todo assunto trabalhado. Quero agradecer a oportunidade de agregar mais conhecimentos às ações a serem realizadas do município.Agradeço a oportunidade de participação parabenizando a toda equipe e aos participantes pelas inúmeras contribuições. (Aluzailde Jacira Dias)

Realizada a avaliação final, aliás, excelente revisão programática, nos dando condições reais de sabermos o nosso aproveitamento. Gostei muito de participar de mais este curso e afirmo com certeza que foi de maior valia, para o meu exercício profissional, bem como para o meu aprimoramento, visando à busca de resolutividade na operacionalização da Política de Assistência Social. Muito obrigada pela oportunidade e, desde já, aguardo o chamamento para participação nos próximos cur-sos. (Maria Clélia Costa Vale)

Está sendo de grande utilidade todas as aulas. Muito obrigada por essa oportunidade! (Monica Moreira Nunes)

Olá, sou Edvalda, e estou muito feliz com todo o conhecimento apreen-dido. Já concluí o curso de Indicadores e estou finalizando o de Con-ceitos, Instrumento e Monitoramento. Obrigada a todos da equipe CEGOV por mais essa oportunidade! (Edvalda Nogueira de Souza Cruz)

Muito obrigada pelo esclarecimento; desde já, quero aproveitar a opor-tunidade e agradecer o tutor todo seu empenho e apreço em sempre estar pronto pra ajudar e esclarecer qualquer tipo de dúvida e principal-mente pela atenção. (Laura Shelly da Rocha)

Page 38: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

36 CEGOV

10CONSIDERAÇÕES FINAIS

Finalizado o Curso de Conceitos e Instrumentos para Monitoramento de Programas – segunda etapa do Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas e Ações do MDS –, conclui-se que as mudanças adotadas para melhorar a interação com os alunos foram positivas, aperfeiçoando seu desenvolvimento nos cursos.

A criação de um fórum dedicado apenas a dúvidas de conteúdo e à pro-posição de questões para reflexão e debate e a criação de outro fórum, específico para dúvidas referentes à Plataforma Moodle, direcionaram melhor a interação dos alunos com a equipe (tutores e Coordenação EAD), bem como com os demais alunos. Essa mudança facilitou o trabalho dos tutores que, na Edição 02, tiveram plenas condições de atender a um número maior de alunos por grupo.

Ambas as edições foram muito bem avaliadas, tanto pelos alunos quanto pela Equipe CEGOV e pela Equipe Sagi-MDS. De modo geral, a maioria dos alunos do Curso de Monitoramento avaliou os recursos do curso (Caderno de Estudos, textos de apresentação, layout, entre outros) como perfeitamente adequados e concordou com a pertinência dos conteúdos e instrumentos de avaliação empre-gados. Espelhada nessa avaliação, a Equipe percebeu um número menor de quei-xas e/ou dificuldades com relação aos instrumentos de avaliação, o que evidencia uma melhor adequação do formato às expectativas dos alunos. Da mesma forma, a ampla maioria informou ter associado os conteúdos às suas experiências pro-fissionais e também disse ter aplicado os conhecimentos aprendidos no trabalho cotidiano. Por fim, a quase totalidade dos alunos (97%) avaliou o curso, em seu conjunto, como “Bom” ou “Muito bom”.

No entanto, vale registrar a dificuldade enfrentada por alguns alunos para entrar na Plataforma, o que deixou em evidência a falta de habilidades bá-sicas de informática. Antes mesmo do início de ambas as edições do Curso, por meio do e-mail institucional do Ciclo, foram relatados problemas de acesso à web, inserção de usuário e senha, entre outros. Por tratar-se de um curso na modali-dade EAD, conhecimentos e habilidades mínimas são pré-requisitos essenciais. Nesse sentido, para as próximas edições, estuda-se a adoção de duas medidas. Em primeiro lugar, inserção, na ficha de inscrição do Ciclo de Capacitação, de um tópico específico sobre conhecimentos e habilidades em informática. Em segundo lugar, o envio do Manual do Moodle por e-mail, com o Guia do Aluno, para me-lhor orientar os primeiros acessos.

Além disso, no intuito de aprimorar ainda mais o processo de aprendi-zagem e de facilitar o contato do aluno com o conteúdo proposto e o ambiente EAD, algumas sugestões foram levantadas ao longo do curso pela Equipe e serão estudadas e aplicadas em edições futuras.

Em primeiro lugar, sugere-se a redução no número de questões temá-ticas para reflexão, a fim de concentrar e focar o debate dos alunos em tópicos gerais, mas de impacto e relevância para sua atividade e desenvolvimento pro-fissional. A proposta é que sejam selecionadas cerca de três questões para cada

Page 39: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

37CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

curso, elaboradas em conjunto pela Equipe Cegov e a Equipe Sagi-MDS.

Em segundo lugar, propõe-se a reconfiguração dos fóruns, com o in-tuito de organizar os tópicos e as postagens, evitando a duplicação e o retrabalho tanto dos alunos quanto dos tutores. Sugerem-se quatro fóruns principais, com as respectivas liberdades para abertura de novos tópicos e postagens:

• Fórum de Avisos e Notícias: abertura de tópicos e postagens restritas à organização do Curso. Localizado na aba Introdução.

• Fórum de Apresentação: um único tópico “Apresentação”, aberto pelo tutor. Postagens livres nesse tópico. Localizado no cabeçalho prin-cipal.

• Fórum de Conteúdo: um tópico para cada questão temática e outro tópico para dúvidas de conteúdo abertos apenas pelo tutor. Postagens livres nesses tópicos. Localizado no cabeçalho principal.

• Fórum Moodle: tópicos e postagens livres. Recomenda-se parcimônia na abertura de tópicos, incentivando que os alunos busquem, nos que já estiverem abertos, as eventuais respostas às suas dúvidas. Moderação sob a responsabilidade da Coordenação EAD. Localizado no cabeçalho principal.

Em terceiro lugar, haja vista a dificuldade que muito alunos têm para encontrar o certificado do curso ao finalizá-lo, sugere-se que seja criado um menu “Certificados” no cabeçalho principal, após o menu Avaliação. Sendo assim, o cabe-çalho dos cursos passará a ser configurado conforme a Figura 7.

Figura 07 - Proposta de cabeçalho dos cursos no AVA: fóruns e certificado

Fonte: Elaboração própria.

Em quarto lugar, para facilitar e criar maior interatividade no primeiro contato dos alunos com o Ciclo, o Curso e a Plataforma, sugere-se a criação de um vídeo de apresentação. Esse vídeo explicará a composição do Ciclo, a orga-nização dos cursos, o acesso à Plataforma Moodle e os principais recursos que os alunos nela encontrarão. Será dada especial atenção à leitura do Guia do Aluno, pois nele os alunos encontram boa parte das respostas às dúvidas frequentemen-te encaminhadas ao tutor, tais como cronograma do curso, obrigatoriedade dos exercícios, participação nos fóruns, obtenção do certificado, entre outras.

Em quinto lugar, como complemento ao vídeo de apresentação, ao Guia do Aluno e ao Manual do Moodle, sugere-se a postagem imediata de tópicos no Fórum Moodle com as dúvidas técnicas mais frequentemente apresenta-das pelos alunos, de modo a racionalizar o processo de trabalho e a incentivar o aprendizado autoinstrucional dos alunos.

Por fim, para um primeiro contato do aluno com os tópicos propostos, propõe-se a elaboração de objetos digitais de aprendizagem que apresentem o conteúdo de uma maneira mais simples e objetiva. O objetivo é aprimorar o de-senvolvimento dos alunos no curso e facilitar a absorção do conteúdo. Sugere-se

Page 40: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

38 CEGOV

a criação de apresentações em Power Point, apresentações animadas em Prezi, avatares, vídeos, animações e games, a serem inseridos nos cursos ao longo do tempo, de acordo com a respectiva complexidade de desenvolvimento. Para tanto, a Equipe contará com um grupo dedicado exclusivamente a isso, com a contrata-ção de profissionais especializados na área.

O Quadro 3 sintetiza as mudanças realizadas de uma edição para outra do Ciclo de Capacitação MDS, a fim de atender melhor às demandas de aprendi-zagem dos alunos.

Quadro 03 - Evolução do formato dos cursos do Ciclo de Capacitação MDS

Curso de Diagnóstico - Edição 02

Curso de Monitoramento - Edição 01 e Edição 02

Novo - Ciclo de Capacitação MDS

• Tutoreada

• 4 questões por aula

• Avaliação com 10 questões

• Obtenção do certificado condi-cionada a responder à pesquisa de avaliação do curso

• Nota do curso apenas da ava-liação final

• Um fórum por aula

• Fórum de Avisos e Notícias

• Questões temáticas por aula

• Conteúdo disponível por aulas

• Tutor com 4 turmas (até 415 alunos por tutor)

• Autonstrucional com tutores de apoio

• 4 questões por aula

• Avaliação com 10 questões

• Obtenção do certificado condi-cionada a responder à pesquisa de avaliação do curso

• Nota do curso apenas da ava-liação final

• Apenas um Fórum de Con-teúdo concentrado

• Fórum Moodle

• Fórum de Avisos e Notícias

• Questões temáticas por aula

• Conteúdo disponível por aulas

• Tutor com 1 turma (até 900 alunos por tutor)

• Autonstrucional com tutores de apoio

• 4 questões por aula

• Avaliação com 10 questões

• Obtenção do certificado condi-cionada a responder à pesquisa de avaliação do curso

• Nota do curso apenas da ava-liação final

• Apenas um Fórum de Conteú-do concentrado

• Fórum Moodle

• Fórum de Avisos e Notícias

• Fórum de Apresentação

• Questões temáticas gerais

• Conteúdo disponível por aulas

• Tutor com 1 turma (até 1000 alunos por tutor)

•Objetos digitais de apren-dizagem

Fonte: elaboração própria.

Como última consideração, diante do sucesso das edições até o momento realizadas, propõe-se o oferecimento não apenas da terceira etapa deste Ciclo – Curso de Avaliação –, mas de um novo Ciclo de Capacitação em Conceitos e Técnicas para Elaboração de Diagnósticos, Monitoramento e Avaliação de Pro-gramas e Ações do MDS, com vistas a potencializar o material já desenvolvido e a ampliar seu alcance para novos alunos e interessados. Para tanto, novas inscri-ções serão abertas, buscando atingir não somente aqueles trabalhadores do SUAS que não se inscreveram na primeira oportunidade mas também aqueles que se inscreveram, porém não conseguiram iniciar/finalizar os cursos (seja por motivos

Page 41: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

39CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

pessoais, seja por razões profissionais).

O CEGOV avalia a experiência do Ciclo como extremamente positiva, es-pecialmente em relação à qualidade do material instrucional desenvolvido e pela relação do conteúdo com o dia a dia dos gestores, conforme identificado na ava-liação de reação. O Centro identifica nesse projeto uma ação de impacto significa-tivo no que diz respeito à capacitação de profissionais nos municípios e estados brasileiros e aposta no seu desenvolvimento como fundamental à realização da política de assistência social.

Page 42: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

40 CEGOV

ANEXO 0I - EXERCÍCIOS DE FIXAÇÃO

AULA 1

TEMA: O QUE É O MONITORAMENTO?

1. Sobre o monitoramento de programas sociais, assinale V para a afirmativa verdadeira e F para a falsa.

( ) O monitoramento de programas sociais permite verificar se os objetivos e metas estão sendo alcançados.( ) O monitoramento é realizado por meio de indicadores.( ) O monitoramento é uma ferramenta que usa informações para acompanhar o desenvolvi-mento dos programas e, ao mesmo tempo, produzir informações sobre o funcionamento das atividades.

As afirmativas são, respectivamentea) V-V-V ✓b) V-F-Vc) V-V-Fd) V-F-Fe) F-V-V

TEMA: QUAL A IMPORTÂNCIA DO MONITORAMENTO PARA A GESTÃO DOS PROGRAMAS SOCIAIS?

2. O monitoramento é uma ferramenta de gestão de políticas públicas. Sobre ele analise as afirmativas a seguir.

I. O monitoramento visa a aprimorar a etapa de implementação das políticas públicas.II. O monitoramento produz informações sobre a execução dos programas incrementando a transparência na gestão pública.III. O pressuposto do monitoramento é de que as políticas e programas são executados exata-mente conforme está previsto em seu desenho.

Assinale:a) Se somente a afirmativa II estiver correta.b) Se somente a afirmativa III estiver correta.c) Se somente as afirmativas I e II estiverem corretas. ✓d) Se somente as afirmativas II e III estiverem corretas.e) Se todas as alternativas estiverem corretas.

TEMA: QUAIS SÃO AS PRINCIPAIS FUNÇÕES DO MONITORAMENTO EM POLÍTICAS PÚBLICAS?

3. Sobre os elementos e sua sequencia no ciclo de gestão da política pública, marque a resposta correta.a) Recursos – atividades – produtos – resultados – impactos ✓b) Recursos – produtos – atividades – resultados – impactosc) Recursos – produtos – atividades – impactos- resultadosd) Recursos- atividades- produtos – impactos – resultadose) Recursos – atividades – resultados- produtos – impactos

ANEXOS

Page 43: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

41CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

4. O monitoramento gerencial refere-se a quais elementos do ciclo de gestão de políticas públicas:a) Recursos, atividades e produtos. ✓b) Somente aos impactos.c) Recursos, atividades e impactos.d) Recursos, atividades e seus resultados.e) Recursos, produtos e resultados.

5. O monitoramento gerencial e o monitoramento analítico são importantes ferramentas de gestão de políticas públicas. Sobre eles analise as afirmativas a seguir.

I. O monitoramento gerencial é uma ferramenta de gestão de políticas públicas que visa ao acompanhamento dos processos.II. O monitoramento analítico está voltado para a análise e comparação de indicadores ao longo do tempo.III. O monitoramento analítico diz respeito somente ao acompanhamento dos impactos dos programas.

Assinale:a) Se somente a afirmativa I estiver correta.b) Se somente a afirmativa II estiver correta.c) Se somente a afirmativa III estiver correta.d) Se somente as afirmativas I e II estiverem corretas. ✓e) Se todas as alternativas estiverem corretas.

TEMA: QUAL A DIFERENÇA ENTRE MONITORAMENTO E AVALIAÇÃO?

6. Sobre o monitoramento e a avaliação de políticas públicas, assinale V para a afirmativa verdadeira e F para a falsa.

( ) A avaliação oferece informações sobre os efeitos das políticas públicas.( ) O monitoramento gera informações sobre a operação das políticas públicas.( ) O monitoramento e a avaliação de políticas públicas são atividades completamente indepen-dentes uma da outra.

As afirmativas são, respectivamente,a) V -V- F ✓b) V -V- Vc) V-F-Fd) V-F-Ve) F- V-F

7. O monitoramento e a avaliação de políticas e programas são ferramentas que buscam contribuir para a melhoria da gestão pública. Sobre as diferenças entre o monitoramento e a avaliação, analise as afirmações abaixo.

I. O monitoramento é uma atividade regular da gestão e a avaliação é realizada de forma episódica.II. A avaliação pode ser realizada por avaliadores externos, já o monitoramento é realizado por atores internos (gestores, supervisores), financiadores ou pela comunidade.III. O monitoramento tem seu foco na efetividade, a avaliação está voltada para o impacto.

Assinale:a) Se somente as alternativas I e II estiverem corretas. ✓b) Se somente as alternativas I e III estiverem corretas.c) Se somente a alternativa I estiver correta.d) Se somente a alternativa II estiver correta.e) Se todas as alternativas estiverem corretas.

Page 44: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

42 CEGOV

TEMA: QUAIS INSTRUMENTOS SÃO USADOS NO MONITORAMENTO DE PROGRAMAS SOCIAIS?

8. Sobre os instrumentos utilizados para realizar o monitoramento de políticas públicas, marque a alternativa incorreta.a) Os indicadores sociais transformam aspectos da realidade em números, taxas e razões, tornando possível sua observação e avaliação.b) Os indicadores sociais permitem acompanhar aspectos da realidade e o desenvolvimento de pro-gramas.c) Os sistemas de monitoramento são formados por um conjunto de atividades articuladas, sistemáti-cas e formalizadas de produção, registro, acompanhamento e análise crítica de informações geradas na gestão de políticas públicas.d) Um painel de monitoramento reúne um conjunto limitado de indicadores-chave que permitem monitorar aspectos cruciais das políticas públicas.e) O modelo lógico é um instrumento que reúne um conjunto de indicadores que reflitam o aspecto a ser acompanhado a partir de um encadeamento de atividades e etapas. ✓

9. Analise as afirmativas sobre os sistemas de monitoramento.

I. Um sistema de monitoramento é um conjunto de atividades articuladas, sistemáticas e for-malizadas.II. Os sistemas de monitoramento reúnem um conjunto restrito de indicadores sobre os efeitos das políticas públicas.III. A estruturação de um sistema de monitoramento envolve a coleta de dados de diferentes fontes e sua integração em uma mesma plataforma.

Assinale:a) Se somente a afirmativa I estiver correta.b) Se somente a afirmativa II estiver correta.c) Se somente as afirmativas I e II estiverem corretas.d) Se somente as afirmativas I e III estiverem corretas. ✓e) Se todas as alternativas estiverem corretas.

TEMA: PAINÉIS DE MONITORAMENTO

10. “____________ é um conjunto um conjunto limitado de sete a 10 indicadores-chave, para moni-toramento de aspectos cruciais e mais visíveis dos programas.” A sentença apresenta a definição de:a) Indicadores sociaisb) Sistemas de monitoramentoc) Painel de monitoramento ✓d) Modelo lógico e) Estrutura lógica

TEMA: MODELO LÓGICO

11. Analise as afirmações sobre o modelo lógico.

I. O modelo lógico esclarece a cadeia de causalidade do programa.II. O modelo lógico é formado por um conjunto de indicadores específicos, referentes a um de-terminado aspecto da realidade social.III. A estrutura lógica é formada pelos seguintes elementos: Recursos, atividades, produtos, re-sultados (intermediários e finais) e impactos.

Assinale:

Page 45: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

43CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

a) Se somente as alternativas I e III estiverem corretas. ✓b) Se somente as alternativas I e II estiverem corretas.c) Se todas as alternativas estiverem corretas.d) Se somente a alternativa I estiver correta.e) Se somente a alternativa III estiver correta.

12. “____________ é uma proposta para organizar as ações que fazem parte de um programa e ar-ticulá-las aos resultados esperados.” Essa definição corresponde a qual instrumento de monitoramento.a) Modelo lógico ✓b) Sistema de monitoramentoc) Painel de monitoramentod) Indicador sociale) Painel síntese de indicadores

AULA 2

TEMA: QUAIS SÃO AS PROPRIEDADES DOS INDICADORES?

1. Como é definida a propriedade de validade de um indicador?a) A validade se refere à capacidade de representar, com a maior proximidade possível, a realidade que se deseja medir e modificar. ✓b) A validade é uma característica referente à facilidade de obtenção, construção, manutenção, comu-nicação e entendimento do indicador por parte do público em geral.c) A validade é a capacidade de representação regionalizada de grupos sociodemográficos.d) A validade é a capacidade de apresentar mudanças estatísticas após a aplicação de políticas públicas.e) A validade se refere ao custo de obtenção do indicador.

2. Analise as afirmativas a seguir.

I. Indicador deve refletir tempestivamente as mudanças decorrentes das intervenções realizadas.II. Indicadores devem ter origem em fontes fidedignas, que utilizem metodologias reconhecidas e transparentes de coleta, processamento e divulgação.

As afirmativas referem-se, respetivamente à:a) Sensibilidade e desagregabilidade.b) Sensibilidade e confiabilidade ✓c) Estabilidade e confiabilidaded) Mensurabilidade e estabilidadee) Simplicidade e confiabilidade

TEMA: COMO SÃO CLASSIFICADOS OS INDICADORES

3. Relacione as colunas.

1. Indicador classificado segundo sua natureza2. Indicador classificado segundo avaliação de desempenho

( ) Indicadores ambientais( ) Indicadores de eficiência( ) Indicadores de economicidade( ) Indicadores sociais

A correspondência correta, entre as colunas, de cima para baixo, é:a) 1-2-2-1 ✓

Page 46: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

44 CEGOV

b) 1-2-1-1c) 2-2-2-1d) 1-1-2-1e) 1-2-1-2

4. Os indicadores podem ser classificados segundo a temática da realidade social a que se referem. Dentre os seguintes indicadores, os _______________ são os que pertencem a essa classificação.a) habitacionais ✓b) econômicosc) institucionaisd) de conjunturae) sintéticos

5. “É um tipo de indicador que agrupa diferentes conceitos da realidade, como renda, educação e saúde para avaliar o bem-estar geral da população, condições de vida ou nível socioeconômico.” A definição refere-se aos indicadores:a) Sintéticos ✓b) Socioeconômicosc) De bem-estard) Subjetivose) De processo

6. Os indicadores podem ser classificados segundo a objetividade. Nessa classificação, os indicadores subjetivos são:a) Aqueles que dizem respeito a qualidade dos recursos humanos a serem utilizados nos programas.b) Aqueles construídos a partir da avaliação dos indivíduos com relação a diferentes aspectos da real-idade. ✓c) Aqueles que refletem o esforço empreendido na obtenção dos resultados esperados.d) Aqueles que medem os efeitos da intervenção na vida dos sujeitos para verificar se houve mudanças.e) Aqueles que expressam os benefícios, para o público-alvo, decorrentes das ações realizadas pelo programa.

7. São exemplos de indicadores classificados segundo gestão do fluxo de implementação:a) Indicadores de processo e produto ✓b) Indicadores de eficiência e efetividadec) Indicadores de renda e desigualdaded) Indicadores econômicos e institucionaise) Indicadores de infraestrutura

TEMA: QUAL A IMPORTÂNCIA DOS INDICADORES SOCIAIS NO CICLO DE POLÍTICAS PÚBLICAS?

8. Os indicadores sociais fornecem subsídios para a tomada de decisão em todas as etapas do ciclo de políticas públicas. Os indicadores de processo são mais adequados para apoiar a fase dea) Implementação ✓b) Avaliação de resultadosc) Definição de alternativasd) Definição da agendae) Diagnóstico

9. A etapa do ciclo de políticas públicas na qual um problema adquire relevância e passa a receber atenção dos gestores públicos requer indicadores ___________________ para seu acompanhamento.a) De impacto

Page 47: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

45CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

b) Que dimensionem os problemas sociais ✓c) Referentes à alocação de recursos.d) Que apreciem os resultados dos esforços empreendidos.e) Que caracterizem o público-alvo.

10. Assinale a alternativa que apresenta um exemplo de indicador de processo.a) Número de famílias cadastradas. ✓b) Expectativa de vida.c) IDH.d) Rede socioassistencial instalada.e) Renda per capita.

AULA 3

TEMA: O QUE É O MODELO LÓGICO?

1. Sobre o modelo lógico, assinale V para a afirmativa verdadeira e F para a falsa.

( ) O modelo lógico é uma representação gráfica das relações entre recursos, atividades , resulta-dos e impactos de um programa.( ) O modelo lógico é uma técnica participativa que auxilia a definição dos problemas sociais cujas causas serão alvo de um programa.( ) As relações de causalidade existentes entre os elementos de um programa conformam a chamada “teoria do programa”.

As afirmativas são, respectivamentea) V-F-V ✓b) F-V-Vc) F-V-Fd) V-F-Fe) V-V-V

TEMA: COMPONENTES DO MODELO LÓGICO

2. Sobre os componentes do modelo lógico analise as seguintes afirmativas:

I. Os resultados dizem respeito às mudanças sociais promovidas pela implementação da intervenção.II. A execução das atividades depende da disponibilidade e qualidade dos recursos utilizados.III. Os produtos são os resultados das atividades executadas, sem eles não se pode falar em resultados.

As afirmativas são, respectivamentea) F-V-V ✓b) F-F-Vc) V-V-Vd) V-V-Fe) V-F-F

3. Relacione as colunas.

1. Produto.2. Resultado.

( ) Número de famílias em situação de extrema pobreza localizadas por meio da Busca Ativa.( ) Mudança na redistribuição de papéis de gênero na família após orientação e acompanhamento realizados no CRAS.

Page 48: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

46 CEGOV

( ) Número de famílias atendidas no CRAS.( ) Encaminhamentos à projetos, benefícios e serviços socioassistenciais realizados pelo CRAS no mês.

A correspondência correta, entre as colunas, de cima para baixo, é:a) 1-2-1-1 ✓b) 2-1-1-1c) 2-2-2-1d) 2-2-1-2e) 1-2-1-2

4. Podem ser considerados resultado e impacto do Programa Bolsa Família, respectivamente:a) Recursos humanos alocados no programa e transferência direta de renda.b) Aumento da frequência escolar das crianças e aumento de gastos com alimentação.c) Melhoria no padrão de consumo das famílias e diminuição dos partos prematuros. ✓d) Famílias cadastradas no Cadastro Único e benefícios distribuídos.e) Aumento da autoestima das mulheres beneficiadas e aumento da aquisição de carnes e peixes.

5. No modelo lógico, a busca ativa é um exemplo do componente:a) Recursosb) Atividades ✓c) Produtod) Impactoe) Resultado

6. A localização e cadastramento de famílias extremamente pobres são __________ da busca ativa.a) Produtos ✓b) Resultados intermediáriosc) Resultados finaisd) Impactose) Recursos

7. No modelo lógico, o aumento o bem estar de crianças em decorrência da participação de suas famílias em serviços socioeducativos seria considerado uma) Impacto ✓b) Resultado finalc) Resultado intermediáriod) Produtoe) Processo

TEMA: ELABORAÇÃO DO MODELO LÓGICO

8. Sobre a elaboração do modelo lógico, analise as afirmativas a seguir.

I. A elaboração do modelo lógico para um novo programa deve ser precedida pela definição das causas do problema social.II. A elaboração do modelo lógico para um programa em execução parte da sistematização dos recursos, atividades e produtos envolvidos na implementação e dos resultados e impactos espe-rados.III. A árvore de problemas é uma ferramenta para entender um problema social por meio da definição de suas causas e consequências.

Assinale:a) Se somente a afirmativa II estiver correta.b) Se somente a afirmativa III estiver correta.c) Se somente as afirmativas I e II estiverem corretas.

Page 49: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

47CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

d) Se somente as afirmativas II e III estiverem corretas.e) Se todas as alternativas estiverem corretas. ✓

AULA 4

TEMA: O QUE SÃO OS PAINÉIS DE INDICADORES PARA MONITORAMENTO?

1. Sobre os painéis de indicadores para monitoramento, assinale V para a afirmativa verdadeira e F para a falsa.

( ) Um painel reúne indicadores que descrevem, classificam, ordenam, comparam ou quantifi-cam uma realidade social específica.( ) Um painel deve reunir indicadores que permitam acompanhar todas as dimensões da reali-dade social ou dos programas de interesse.( ) Um painel de indicadores é uma ferramenta que permite a análise da evolução dos indica-dores ao longo do tempo.

As afirmativas são, respectivamentea) V-F-V ✓b) V-V-Vc) V-V-Fd) F-F-Ve) F-V-V

2. Sobre as características dos painéis de indicadores para monitoramento, marque a resposta correta.a) Reúne um conjunto articulado e abrangente de dados e informações sobre a realidade social.b) Permite visualizar a estrutura dos programas sociais e a relação entre seus elementos.c) Os indicadores são selecionados de acordo com sua relevância para o acompanhamento do pro-grama. ✓d) São ferramentas de monitoramento gerencial, pois permitem identificar falhas operativas do pro-grama.e) É formado a partir de um sistema de indicadores de monitoramento.

3. Os painéis de indicadores para monitoramento são ferramentas de gestão de políticas públicas. Sobre eles analise as afirmativas a seguir.

I. Os painéis de indicadores são formados por poucos indicadores.II. A seleção dos indicadores é feita conforme sua relevância para o monitoramento do programa ou realidade social.III. Os indicadores devem ser apresentados ao longo de um período de tempo.

Assinale:a) Se somente a afirmativa I estiver correta.b) Se somente a afirmativa II estiver correta.c) Se somente a afirmativa III estiver correta.d) Se somente as afirmativas I e II estiverem corretas.e) Se todas as alternativas estiverem corretas. ✓

TEMA: COMO SE CONSTRÓI UM PAINEL DE INDICADORES?

4. Uma etapa do processo de construção de um painel é a definição do tipo de indicador que será uti-lizado. Como são denominados os indicadores que refletem a disponibilidade de recursos? Marque a resposta correta.a) Indicadores de impacto.

Page 50: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

48 CEGOV

b) Indicadores de resultado.c) Indicadores de processo.d) Indicadores de infraestrutura.e) Indicadores de insumo. ✓

5. No sistema de classificação de indicadores segundo a Gestão do Fluxo de implementação de pro-gramas, os indicadores de _______________ medem os benefícios, para o público-alvo, das ações executadas.a) Insumob) Resultado ✓c) Impactod) Produtoe) Processo

6. A dinamização da economia local decorrente do aumento de renda das famílias beneficiárias do Bolsa Família é um exemplo de indicador:a) De Produtob) De impacto ✓c) Econômicod) De processoe) De renda

7. O número de famílias em condições de extrema pobreza cadastradas no Cadastro Único em um dado período e o número de famílias que efetivamente recebem a transferência de renda do Bolsa Família são exemplos de indicadores:a) De processo e produto. ✓b) De produto e resultado.c) De processo e resultado.d) De produto e impacto.e) De produto e processo.

8. Uma etapa da construção de um painel de indicadores para monitoramento é a definição do público que o utilizará. Se o painel for destinado ao nível _________ devem ser priorizados indicadores de insumo, processo e produto.a) Operacionalb) Gerencial ✓c) Estratégicod) Táticoe) Analítico

9. Uma etapa da construção de um painel de indicadores é a definição da finalidade do monitoramen-to. Deve-se decidir se o monitoramento será gerencial ou analítico. Sobre isso analise as afirmativas a seguir.

I. O monitoramento gerencial está voltado para o acompanhamento de metas e prazos das ativ-idades executadas.II. Indicadores de impacto são utilizados no monitoramento analítico.III. No monitoramento gerencial indica-se a utilização de indicadores de resultado.

Assinale:a) Se somente a afirmativa I estiver correta.b) Se somente a afirmativa II estiver correta.c) Se somente a afirmativa III estiver correta.d) Se somente as afirmativas I e II estiverem corretas. ✓e) Se todas as alternativas estiverem corretas.

Page 51: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

49CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

AULA 5

1. Qual das ferramentas informais abaixo é um painel de indicadores para monitoramento de pro-gramas e políticas no âmbito da assistência social, com ênfase nas ações do Plano Brasil Sem Miséria?a) TabCADb) MOPSc) PIC ✓e) IDV

2. Qual das alternativas abaixo NÃO é um dos grandes grupos do Painel de Acompanhamento de Conjuntura e de Programas Sociais?a) Plano Brasil Sem Misériab) Cadastro Único ✓ c) Acompanhamento de Contexto e Conjuntura Socieconômicad) Programas, Benefícios e Serviços

3. Qual desses painéis NÃO pode ser encontrado no grupo Acompanhamento de Contexto e Conjun-tura Socioeconômica?a) Painéis Situacionais de Rendab) Painéis Situacionais de Educaçãoc) Painéis Situacionais de Mercado de Trabalhod) Painéis Situacionais de Saúde ✓

4. Analise as afirmativas a seguir:

I. A maioria das fontes utilizadas pela PIC oriunda de registros administrativos ou de pesquisas sociais.III. Dentre as fontes de dados utilizadas pela PIC, destaca-se a PNAD e o Cadastro ÚnicoIII. O preenchimento correto dos registros administrativos por parte do gestor é fundamental para garantir a precisão das informações utilizadas para o monitoramento de políticas e pro-gramas

Estão corretas:a) As afirmativas I e IIb) As Afirmativas I e IIIc) As afirmativas II e IIId) Todas as afirmativas ✓

5. Um gestor necessita monitorar a evolução da desigualdade social em seu município. Para isso, ele pretende utilizar o coeficiente de Gini. Dentre quais painéis ele pode encontrar essa informação?a) Nos painéis de Garantia de Rendab) Nos painéis Síntese do BSMc) Nos painéis Situacionais de Renda ✓d) Nos painéis Situacionais de Mercado de Trabalho

6. Um gestor precisa monitorar o acompanhamento de condicionalidades de saúde e educação dos beneficiários do Bolsa Família no seu município. Em qual painel ele pode encontrar essas informações?a) Garantia de Rendab) Painel Síntese ✓c) Repasses de valores do Governo Federald) Beneficiários de Programa

7. Qual dessas informações NÃO pode ser encontrada no painel Garantia de Rendaa) Renda familiar per capita dos beneficiários do Programa Bolsa Família ✓b) Valor repassado do Programa Bolsa Família

Page 52: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

50 CEGOV

c) Quantidade de famílias inscritas no Cadastro Único com renda familiar per capita de até 1/2 salário mínimod) Quantidade de benefícios variáveis para o público de 0 a 6 anos e 7 a 15 anos

8. Quantidade de famílias beneficiárias do Programa Bolsa Família, quantidade de beneficiários do Benefício de Prestação Continuada (BPC) para idosos e para pessoas com deficiência são informações contidas em qual painel de monitoramento da PIC?a) Garantia de Rendab) Evolução da Pobrezac) Repasses de valores do Governo Federald) Beneficiários de Programa ✓

Page 53: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

51CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

ANEXO 02 - QUESTÕES DE CONTEÚDO

AULA 1Olá, gestores!

A NOB/SUAS de 2012 estabelece que é responsabilidade comum à União, aos estados e aos municípios a implantação de um sistema de informação, acompanhamento, monitoramento e aval-iação.

De que forma um sistema desse tipo pode auxiliar no aprimoramento dos serviços prestados pela instituição na qual você trabalha?

AULA 2Olá, gestor!Você costuma utilizar indicadores para acompanhar os programas ou serviços com os quais

trabalha?Se sim, quais os indicadores que você mais utiliza e qual órgão os produz?Se não, quais as razões de não utilizar os indicadores?

AULA 3Olá, gestores! De que forma a elaboração de um modelo lógico contribuiria para melhorar os

programas e serviços nos quais você trabalha?

Ainda, se você puder, tente elaborar um modelo lógico simplificado de um programa com o qual trabalha. Faça um exercício de reflexão sobre os recursos, as atividades, os resultados e os impac-tos. Em seguida, discuta no fórum como foi essa experiência.

AULA 4Olá, gestor!

Você acha que um painel de indicadores de monitoramento melhoraria a gestão de programas e serviços socioassistenciais?

No seu trabalho, se você fosse selecionar sete indicadores para montar um painel de monito-ramento, quais indicadores você escolheria e por quê?

AULA 5Olá, gestor!

Parabéns por ter chegado à última aula do curso! Queremos saber o que você acha da seguinte questão:

O Painel de Conjuntura e Programas Sociais oferece vários indicadores que podem ser usados para o monitoramento. Em sua opinião, esses indicadores são úteis para o seu trabalho? Por quê?

Boa sorte com a avaliação final!

Page 54: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

52 CEGOV

ANEXO 03 – AVALIAÇÃO FINAL

1. Um gestor municipal da assistência social deseja construir um painel de indicadores para monito-ramento. Ele sabe que na primeira etapa deve decidir qual o objeto do monitoramento, ou seja, o que quer monitorar. Decide que, primeiramente, construirá um painel de monitoramento de insumos. Qual o conjunto de indicadores seria mais adequado para essa iniciativa?

a) Número de visitas domiciliares realizadas no mês, número de atendimentos realizados no mês, per-centual de famílias totalmente acompanhadas nas condicionalidades de saúde, percentual de crianças e adolescentes de 6 a 15 anos acompanhados nas condicionalidades de educação.b) Quantidade de famílias extremamente pobres incluídas no Cadastro Único, quantidade de famílias inscritas no Cadastro Único, quantidades de famílias referenciadas na rede socioassistencial do SUAS, quantidade de famílias contra-referenciadas.c) Quantidade de famílias beneficiárias do Programa Bolsa Família, quantidade de famílias que re-cebem o benefício de superação da extrema pobreza, frequência escolar das crianças e adolescentes acompanhados na condicionalidade de educação.d) Valor total repassado ao município pelo governo federal através do Índice de Gestão Descentral-izada Municipal, quantidade de equipes de referência em relação ao número de famílias e indivíduos referenciados, horas de participação em cursos de capacitação por profissional alocado em atividade fim, Índice de Desenvolvimento do CRAS (IDCRAS). ✓

2. Um gestor municipal coletou no Painel de Acompanhamento da Conjuntura e de Programas Sociais sete indicadores para monitorar o Plano Brasil Sem Miséria:

- Coeficiente de Gini;- Taxa de frequência à escola da população de 6 a 14 anos de idade;- Percentual de frequência à escola da população 20% mais pobre com idade entre 6 e 14 anos;- Quantidade de vínculos empregatícios em ocupações formais;- Taxa de desocupação da população economicamente ativa de 16 anos ou mais de idade dentre os 20% mais pobres;- Quantidade de moradores de domicílios particulares permanentes com renda domiciliar per capita de R$ 0,00 a 70,00;- Quantidade de moradores de domicílios particulares permanentes de 0 a 6 anos de idade com renda domiciliar per capita de R$ 0,00 a 70,00.

O gestor está construindo um painel de indicadores para o monitoramento de:a) resultadob) produtoc) impacto ✓d) processo

3. “Direciona-se para o acompanhamento do desenvolvimento de um programa ou serviço, com vistas a alcançar os objetivos previamente definidos e realizar correções de rota. Sua realização se dá por meio da coleta e da análise de indicadores sociais.” A afirmação refere-sea) Ao diagnósticob) À avaliaçãoc) Ao monitoramento ✓d) À mensuração de desempenho

4. A classificação de indicadores segundo Área Temática é mais comum na gestão pública. Os seguintes indicadores foram coletados no Painel de Acompanhamento da Conjuntura e de Programas Sociais.Relacione as colunas.

1. Indicadores de mercado de trabalho2. Indicadores de renda e desigualdade

Page 55: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

53CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

( ) Percentual de contribuintes com o Instituto de Previdência Social dentre a população ocupada de 16 anos ou mais de idade (%)( ) Percentual de empregados e trabalhadores domésticos sem carteira assinada dentre a população ocupada de 16 anos ou mais de idade entre os 20% mais pobres da população( ) Coeficiente de Theil

A correspondência correta, entre as colunas, de cima para baixo, é: a) 1-1-2 ✓b) 2-1-2c) 1-2-2d) 2-2-1

5. O modelo lógico é um instrumento de monitoramento que explicita a teoria de um programa. Para elaborar um modelo lógico de um programa ou serviço existente deve-se averiguar a disponibilidade e qualidade _________________. Para isso, a ferramenta SUAS Visor oferece informações sobre quan-tidade de trabalhadores, formação profissional, cargo e vínculo dos trabalhadores dos equipamentos de assistência social.a) da estrutura físicab) dos serviços ofertadosc) dos recursos ✓d) dos materiais e equipamentos

6. Analise as afirmativas a seguir.

I. Os produtos são os resultados concretos das atividades desenvolvidas a partir dos recursos disponíveis.II. O número de famílias incluídas no Cadastro Único é um indicador de produto disponível no Painel de Acompanhamento de Conjuntura e de Programas Sociais.III. A quantidade de idosos e deficientes beneficiários do BPC é um indicador de resultado e pode ser coletado na ferramenta Painel BPC.

Assinale:a) Se somente a afirmativa I estiver correta.b) Se somente as afirmativas I e II estiverem corretas.c) Se somente as afirmativas II e III estiverem corretas.d) Se todas as alternativas estiverem corretas. ✓

7. Organize os componentes do modelo lógico da Busca Ativa para o Plano Brasil Sem Miséria, consid-erando a sequencia: recursos, atividades, produtos, resultados, impactos.

1. Recursos humanos treinados, listagens territorializadas das famílias em descumprimento de condicionalidades do Programa Bolsa Família, com bloqueio ou suspensão do benefício.2. Visitas domiciliares.3. Acesso a serviços e benefícios socioassistenciais, interrupção dos efeitos do descumprimento sobre o benefício das famílias beneficiárias do Programa Bolsa Família.4. Inscrição no Cadastro Único, acompanhamento das famílias em descumprimento de condi-cionalidades do Programa Bolsa Família.5. Melhoria as condições de vida, aumento da frequência escolar, aumento da renda familiar.

A sequência correta é:a) 1-2-3-4-5b) 1-2-4-3-5 ✓c) 1-2-5-3-4d) 1-2-3-5-4

Page 56: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

54 CEGOV

8. O Painel Síntese BSM- Beneficiários de Programas disponibilizado na ferramenta Painel de Conjun-tura e Programas Sociais oferece uma série histórica dos seguintes indicadores:

- quantidade de famílias beneficiárias do Programa Bolsa Família,- quantidade de beneficiários do Benefício de Prestação Continuada para Idosos,- quantidade de beneficiários do Benefício de Prestação Continuada para Pessoas com Deficiência.

Com esses indicadores pode-se montar um painel para monitorar:a) Impactosb) Produtosc) Resultadosd) Recursos

9. Para montar um painel de indicadores para monitoramento de insumos, um gestor coletou no Painel de Acompanhamento da Conjuntura e de Programas Sociais do Plano Brasil Sem Miséria os seguintes indicadores. Marque a resposta correta.a) Valor total repassado aos municípios e Estados através do Índice de Gestão Descentralizada Mu-nicipal (IGD-M) - PBF, valor total repassado aos municípios e Estados através do Índice de Gestão Descentralizada Municipal (IGD-M), SUAS. ✓b) Valor total repassado às famílias beneficiárias do Programa Bolsa Família, valor total repassado aos beneficiários do Benefício de Prestação Continuada (BPC - Idosos + PCD).c) Benefício médio mensal por família do Programa Bolsa Família, quantidade de benefícios variáveis para o público de 0 a 6 anos e 7 a 15 anos.d) Valor total repassado do Programa Bolsa Família, quantidade de benefícios variáveis gestantes e nutrizes.

10. Analise os indicadores listados abaixo, coletados no Painel de Acompanhamento da Conjuntura e de Programas Sociais do Plano Brasil Sem Miséria. Marque a opção que apresenta indicadores que podem ser usados para montar um painel de monitoramento de produto.a) Quantidade de famílias inscritas no Cadastro Único com renda familiar per capita de até 1/2 salário mínimo, quantidade de famílias extremamente pobres incluídas no Cadastro Único e no Programa Bolsa Família. ✓b) Quantidade de famílias beneficiárias do Programa Bolsa Família, quantidade de famílias que re-cebem o benefício de superação da extrema pobreza.c) Quantidade de moradores de domicílios particulares permanentes com renda domiciliar per capita de R$ 0,00 a 70,00, quantidade de moradores de domicílios particulares permanentes com renda domiciliar per capita de R$ 70,01 a 140,00.d) Taxa de frequência à escola da população de 6 a 14 anos de idade (%), renda domiciliar per capita média (R$).

Page 57: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

55CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

ANEXO 04 – PESQUISA DE AVALIAÇÃO DO CURSO

A) IDENTIFICAÇÃO FUNCIONAL

1. Vínculo institucional (cargo e função):

2. Tempo no cargo (determinar se anos ou meses):

3. Grau de instrução (assinale o maior grau de instrução completo):o Ensino Médio o Graduação o Especialização o Mestrado o Doutorado

B) AVALIAÇÃO DO AMBIENTE VIRTUAL

4. Você já havia realizado outro curso na modalidade Ensino a Distância?o Sim o Não

5. Qual?

6. Você teve dificuldades para acessar o ambiente virtual do curso?o Sim o Não

7. Tive problemas de senha:o Poucas vezes o Muitas vezes

8. Tive problemas com a Web (Internet):o Poucas vezes o Muitas vezes

Como você avalia cada um dos seguintes itens referentes ao ambiente virtual do curso?

9. Layout (desenho do ambiente):o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

10. Texto de apresentação do curso:o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

11. Navegação no ambiente:o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

12. Ícones (facilidade de compreensão):o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

13. Velocidade das respostas do ambiente eletrônico às minhas ações:o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

14. Layout do Caderno de Estudos:o Inadequado o Pouco adequado o Relativamente adequado o Perfeitamente adequado

Page 58: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

56 CEGOV

15. Quantas vezes você participou dos Fóruns do curso?o Nenhuma vez o Em 3 aulas ou menos o Em 4 aulas ou mais

16. Os Fóruns contribuíram para promover um espaço de debates e trocas de experiência entre você e seus colegas?

o Nunca contribuíram o Contribuíram poucas vezes o Contribuíram na maiorias das vezes o Sempre contribuíram

17. Alguma vez você necessitou de apoio técnico para tirar dúvidas de conteúdo ou da plataforma?o Sim o Não

18. Lembrando que as informações não serão identificadas, quando você mais utilizou o ambiente virtual de aprendizagem?o Durante a jornada de trabalho o Após a jornada de trabalho

C) ESTRUTURA DO CURSO

Em relação ao curso, você considera que foi bem informado sobre:

19. Os objetivos do curso e de cada aula?o Sim o Não

20. O cronograma de desenvolvimento?o Sim o Não

21. A dinâmica de estudo (estudos individuais, exercícios, fórum, avaliação das aulas e avaliação final)?o Sim o Não

22. A avaliação de seu desempenho?o Sim o Não

D) SISTEMÁTICA DE AVALIAÇÃO DA APRENDIZAGEM

Por favor, avalie agora os conteúdos do curso.

23. Aula 1:o Insatisfatório o Regular o Bom o Muito Bom

24 Aula 2:o Insatisfatório o Regular o Bom o Muito Bom

25 Aula 3:o Insatisfatório o Regular o Bom o Muito Bom

26 Aula 4:o Insatisfatório o Regular o Bom o Muito Bom

27 Aula 5:o Insatisfatório o Regular o Bom o Muito Bom

Page 59: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

57CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E AVALIAÇÃO DE PROGRAMAS E AÇÕES DO MDS

F) CONTEÚDO

Em relação às atividades pedagógicas, assinale:

28. Li os textos indicados pela leitura complementar (Leia +):o Nunca o 3 vezes ou menos o 4 vezes ou mais

29. Utilizei os recursos do Saiba Mais:o Nunca o 3 vezes ou menos o 4 vezes ou mais

30. Utilizei os tutoriais e vídeos:o Nunca o 3 vezes ou menos o 4 vezes ou mais

Em relação à pertinência dos conteúdos, assinale as afirmações conforme sua realidade:

31. Associei os conteúdos do curso aos meus conhecimentos anteriores.o Não concordo o Concordo parcialmente o Concordo plenamente

32. Associei os conteúdos do curso às minhas experiências práticas.o Não concordo o Concordo parcialmente o Concordo plenamente

33. Procurei, no meu dia-a-dia, situações em que fosse possível aplicar o conteúdo do curso.o Não concordo o Concordo parcialmente o Concordo plenamente

34. Os conteúdos do curso facilitaram a compreensão e utilização das ferramentas do Portal SAGI.o Não concordo o Concordo parcialmente o Concordo plenamente

35. Os exercícios e a prova final estão claros e de acordo com o conteúdo ensinado.o Não concordo o Concordo parcialmente o Concordo plenamente

36. De acordo com a escala de 1 a 5 (1 - Muito Ruim; 2 - Ruim; 3 - Regular; 4 - Bom; 5 - Muito Bom), que nota você dá ao curso?o 1 o 2 o 3 o 4 o 5

G) CONSIDERAÇÕES FINAIS

37. Você utilizou os conhecimentos adquiridos no Curso de Indicadores?o Sim o Não

38. Por gentileza, exemplifique:

39. Nesse caso, como planeja utilizar?

Page 60: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

58 CEGOV

40. Como você utilizará os conteúdos do curso de Monitoramento para o aprimoramento dos serviços públicos prestados em seu local de trabalho?

41. Agradecendo sua participação, deixamos espaço para outras considerações que queira fazer.

RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOSE INSTRUMENTOS PARAO MONITORAMENTODE PROGRAMAS

Campus do Vale - Prédio 43322 - Av. Bento Gonçalves, 9500 Porto Alegre - RS - 91509-900 - Phone: + 55 51 3308.9860

IP Videoconference CEGOV 143.54.129.46

cegov.ufrgs.br

CICLO DE CAPACITAÇÃO

MDS

SAGISecretaria de Avaliação e Gestãoda Informação

Termo de Cooperação 001/2013Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

CEG

OV

CIC

LO D

E C

APA

CIT

ÃO

MD

S -

R

ELA

RIO

DE E

XEC

ÃO

DO

CU

RSO

MO

NIT

OR

AM

EN

TO

Ministério doDesenvolvimento Social

e Combate à Fome

Page 61: CICLO DE MDS - UFRGS(SAGI) do Ministério do Desenvolvimento Social e Combate à Fome (MDS) e exe cutado em cooperação com o Centro de Estudos Internacionais sobre Governo (CEGOV)

RELATÓRIO DE EXECUÇÃO DO CURSO EM CONCEITOSE INSTRUMENTOS PARAO MONITORAMENTODE PROGRAMAS

Campus do Vale - Prédio 43322 - Av. Bento Gonçalves, 9500 Porto Alegre - RS - 91509-900 - Phone: + 55 51 3308.9860

IP Videoconference CEGOV 143.54.129.46

cegov.ufrgs.br

CICLO DE CAPACITAÇÃO

MDS

SAGISecretaria de Avaliação e Gestãoda Informação

Termo de Cooperação 001/2013Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de Programas Sociais e Ações do MDS

CEG

OV

CIC

LO D

E C

APA

CIT

ÃO

MD

S -

R

ELA

RIO

DE E

XEC

ÃO

DO

CU

RSO

MO

NIT

OR

AM

EN

TO

Ministério doDesenvolvimento Social

e Combate à Fome