No outono de 2012, nove equipes espalhadas por seis províncias da Zâmbia, visitando 200 escolas. A tarefa deles: coletar dados que serviriam como base para medir o sucesso de um programa de leitura nas primeiras séries financiado pela USAID. O empreendimento envolveu acompanhar o progresso de um grupo de amostra de 4,600 alunos e professores em 18 distritos - e as equipes chegavam para suas tarefas apenas com papel e caneta.

Eles viajaram para províncias remotas; a escola do projeto mais próxima da capital, Lusaka, ficava a sete horas de carro. Quando chegaram a essas escolas, as equipes registraram manualmente as informações em pilhas de questionários em papel. Então, com pelo menos uma semana desses papéis a reboque, estava de volta a Lusaka, onde os responsáveis ​​pela digitação de dados inseriam manualmente as informações dos questionários preenchidos em planilhas.

Era um sistema tedioso com algumas desvantagens importantes para a Creative Projeto Leia para Ter Sucesso, que funciona em 18 distritos da Zâmbia para resolver a falta de aprendizagem e alfabetização entre os alunos do ensino primário.

O principal deles foi a constatação posterior de que os questionários preenchidos do estudo de base estavam faltando em algumas regiões.

Tivemos que enviar avaliadores de dados de volta ao campo para coletar novamente as informações que já haviam obtido. Como resultado, uma fase que era para não durar mais que seis meses acabou demorando um ano.

Quando o processo está no papel

A Creative não está sozinha em nossa dependência de métodos antigos para coleta de dados em campo.

As organizações de desenvolvimento acostumadas a economizar muitas vezes se preocupam com os custos de incorporação de novas tecnologias – especialmente se isso não funcionar na primeira vez.

Eles duvidam que a recolha e análise de dados digitais funcione em países pobres., ambientes rurais onde equipamentos delicados não aguentam e conexões de internet confiáveis ​​são um achado raro. Eles podem não ter certeza se os coletores de dados podem ser facilmente treinados na coleta de dados móveis.

E por mais que a Creative tivesse gostado de usar a tecnologia móvel assim que o Read to Succeed começou - na verdade, havíamos planejado isso desde o início - o cronograma simplesmente não permitia os longos procedimentos de aquisição para obter tablets digitais ou testá-los em o campo.

Tornando nossos dados digitais

Para nossa pesquisa de linha média dois anos depois, tivemos tempo suficiente para desenvolver um plano de ação.

Primeiramente reunimos todas as informações técnicas sobre o uso de tablets/notebooks, selecionamos um tablet compatível com pesquisas para atender às nossas necessidades (Nexo 7 comprimidos que são compatíveis com Tangerina, um software de coleta eletrônica de dados de código aberto desenvolvido pela RTI International), e trabalhamos com especialistas em tecnologia de nosso escritório central para digitalizar questionários de pesquisa.

Em seguida, treinamos nossa equipe de monitoramento e avaliação no uso do Tangerine para inserir e visualizar dados, e baixar relatórios. Também oferecemos um workshop de treinamento de 5 dias para nossos 45 coletores de dados em Lusaka.

Quando nossos avaliadores de dados se espalharam pelos locais de campo, eles coletaram dados eletronicamente de nossa amostra de 4,000 estudantes, 200 diretores e 400 professores do segundo e terceiro ano, selecionado aleatoriamente de 200 escolas em todo 18 distritos, incluindo quatro onde Read to Succeed não estava ativo.

Descobrimos que mesmo sem conexão com a internet, nossos coletores de dados poderiam registrar informações quantitativas e carregá-las mais tarde. Os tablets poderiam ser carregados usando carregadores de carro para que não dependêssemos de energia em vilas remotas. Nada disso estava sendo feito há apenas um ou dois anos.

Benefícios imediatos

O uso dos tablets nos ajudou a conseguir a coleta e a entrada de dados simultaneamente – uma economia de tempo significativa em comparação com a execução sequencial de cada uma dessas etapas, como fizemos durante a fase de linha de base.

Um sistema baseado em papel envolveu muitas pessoas- colecionadores, avaliadores, e funcionários com computadores dedicados. Eles ocupam salas de conferência por meses enquanto pilhas e mais pilhas de papel ocupam mesas, armários e cantos. A mudança para a coleta de dados digitais liberou salários e espaço.

O sistema também possui mecanismos anti-erro integrados que reduzem erros de entrada de dados. Isso garantiu, por exemplo, que uma escola em um distrito não apareceria em outro, o que aconteceu quando usamos o sistema baseado em papel.

Com uma lista tão extensa de escolas do projeto, o nosso diretor de monitorização e avaliação já tinha passado horas e horas a conduzir pelo país para monitorizar a recolha de dados – uma tarefa recorrente e extenuante durante a fase de referência.

Com o uso de comprimidos, ele conseguiu monitorar os dados à medida que chegavam ao vivo nas telas do nosso escritório principal em Lusaka. Isto não só reduziu o stress associado às viagens, mas também contribuiu para uma melhor qualidade dos dados, uma vez que os erros foram corrigidos assim que foram detectados..

É claro que nosso maior benefício foi eliminar a perda potencial de cópias impressas.

O uso de tablets trouxe seus próprios desafios, como a impossibilidade de editar entradas depois de salvas eletronicamente. Além disso, tablets da forma como os usamos não podem coletar dados qualitativos. Além disso, O software Tangerine só permite o download de dados em formato de planilha CSV. Não pode ser baixado diretamente em outros programas estatísticos como o SPSS, STATA ou SAS.

Mas no geral, graças à nossa nova abordagem, conseguimos coletar dados de maior qualidade a um custo mais razoável e em um curto período de tempo, além de colher os benefícios do monitoramento ao vivo. O processo também apresentava menos erros do que a abordagem baseada em papel e não precisávamos armazenar fisicamente um grande volume de documentos no escritório.

Mesmo contabilizando o investimento inicial em dispositivos de software (passamos cerca $20,000 para equipamento), conexão à Internet e custos relacionados ao treinamento, de modo geral, ao longo da vida do projeto, economizamos tempo e dinheiro e, o mais importante, obtivemos informações confiáveis ​​que podemos usar para medir o impacto do nosso projeto e torná-lo melhor.

Equipe de Monitoramento e Avaliação da Creative na Zâmbia, liderado pelo Diretor Rhodwell Chitanda, contribuiu com informações para esta peça. Fotos por: Nephas Hindamu e A Noite dos Mortos