Ryan Meuth acredita que existe um enorme potencial para tutores de IA. O professor da Escola de Computação e Lucidez Aumentada das Escolas de Engenharia Fulton da Universidade Estadual do Arizona está particularmente interessado no potencial da IA para ajudar os alunos on-line da universidade que fazem cursos condensados de sete semanas e meia.
“São estudantes que têm empregos, famílias e vidas”, diz Meuth, observando que muitas vezes fazem trabalhos escolares tarde da noite ou de manhã cedo, quando pode não ter alguém por perto para responder às suas perguntas. “Eles são os alunos que mais precisam de escora geralmente nos piores horários do dia para obter suporte ao vivo.”
Meuth acredita que o tutor de IA evidente pode ajudar esses alunos. “Isso pode dar-lhes feedback e assistência imediatos, para que possam continuar avançando nesse cronograma comprimido”, diz ele.
Para esse termo, Meuth e a Arizona State University fizeram parceria com a Wiley, uma empresa editorial e educacional, para gerar um tutor de ciência da computação que pode ajudar os alunos que ficam presos enquanto trabalham no laboratório de codificação zyBooks da Wiley, que a ASU usa para as aulas.
O tutor de IA, uma vez que qualquer bom tutor de IA, é projetado para ajudar os alunos a encontrar a resposta, em vez de fornecê-la a eles. Mas gerar uma utensílio que realmente faça isso é mais fácil de falar do que fazer. Portanto, em vez de lançar levante programa em toda a escola, Meuth e a equipa de Wiley estão a realizar vários estudos-piloto e a melhorar o tutor à medida que avançam para prometer a sua eficiência a longo prazo.
Cá está uma olhada no que eles aprenderam até agora.
Um tutor de IA, mas não um chatbot
Quando imaginamos um tutor de IA, muitos de nós imaginamos uma interface de chatbot estilo ChatGPT por meio da qual o aluno pode fazer qualquer pergunta e a IA responderá com uma resposta generativa. No entanto, não é isso que está acontecendo com levante tutor de IA do zyBooks.
“Um dos segredos do design é que ele não é um campo de texto cândido”, diz Lyssa Vanderbeek, vice-presidente de material didático do grupo Wiley. Se um aluno estiver enfrentando um problema, o tutor aparecerá e fornecerá seis opções de ingresso diferentes, por exemplo, oferecendo-se para dar uma dica ao aluno ou fornecer uma explicação escolha.
Isso dá ao tutor de IA uma interface mais controlada e pode mantê-lo focado em ajudar os alunos a resolver um problema, em vez de fornecer a resposta, acrescenta Meuth. “Não importa que tipo de proteção coloquemos uma vez que aviso de direção, os alunos, se tiverem a capacidade de conversar com a coisa, irão enganá-la para que lhe dê a resposta”, diz Meuth.
Ensinando um tutor de IA
Durante um estudo piloto inicial com 150 alunos neste outono, o tutor de IA não foi particularmente eficiente no início. No início, não dava as dicas mais úteis aos alunos, por isso teve que ser programado para dar dicas melhores, de congraçamento com Vanderbeek.
“Nós realmente identificamos as dicas de maior valor”, diz Vanderbeek. “Porque se um aluno estiver travado, pode ter dez coisas que você poderia sugerir, mas, na verdade, quais são as principais coisas que irão desvencilhar o aluno?”
Ela acrescenta: “Através do ciclo de feedback que tivemos com Ryan e sua equipe, conseguimos refinar o tutor para que ele possa identificar melhor o que há de mais valioso a proferir ao aluno”.
Por sua vez, Meuth também percebeu que o tutor tendia a oscilar entre dois extremos: dar a resposta ou dar uma dica que era vaga demais para ser útil. Ele diz que a equipe da Wiley descobriu uma vez que sintonizar esse ponto intermediário – onde é acionável, mas não é a resposta.
Em seguida essas melhorias, um segundo grupo de 350 alunos começou a usar o tutor de IA neste outono e, até agora, está usando-o dez vezes mais frequentemente. “Os alunos estão voltando a fazer isso com mais frequência e as respostas são altamente direcionadas para ajudá-los a superar a barreira”, diz Meuth.
Próxima tempo de pesquisa
Apesar de estarem satisfeitos com o funcionamento do tutor de IA, Meuth e a equipe da Wiley ainda estão estudando a melhor forma de utilizá-lo.
“Acabamos de obter aprovação para iniciar o próximo experimento, e será um estudo de grupo de controle”, diz Meuth. Um grupo terá chegada ao tutor e outro não. Meuth e colegas compararão o desempenho acadêmico entre os dois grupos de estudantes e também avaliarão a autoeficácia das atitudes dos estudantes em relação à programação. Eles querem saber se os alunos que utilizam o tutor estão mais ou menos confiantes.
Embora Meuth adore a forma uma vez que esse tutor de IA funciona, ele se dedica a usá-lo com os alunos de uma forma cuidadosa, apoiada por pesquisas. “Estamos preocupados com coisas uma vez que os alunos se tornarem excessivamente dependentes de ajuda ou coisas assim”, diz ele. “Portanto, queremos ter certeza de que o valor que os alunos obtêm com a utilização do tutor está contribuindo de forma saudável.”
