Defendi a minha dissertação de mestrado, Governed Human-AI Collaboration Across the Software Development Lifecycle, no Instituto Superior Técnico a 23 de outubro de 2026, dezasseis dias depois de a entregar. Tinha vinte minutos para apresentar seis meses de trabalho: uma framework que delimita o que a IA faz em cada fase do ciclo de vida do software, e o Apex, a ferramenta que a implementa. A dissertação teve 17/20.
Foi mais difícil do que esperava e correu bem no geral, e concordo com a maior parte das críticas que recebi.
Porque foi difícil
Vinte minutos é pouco para uma framework com seis fases, cinco portões de qualidade, três métricas de governação, um modelo de chapéus e uma implementação de referência. A maior parte da preparação foi decidir o que deixar de fora e percorrer as fases uma a uma, por isso a avaliação ficou com menos espaço do que merecia.
O momento que não esperava veio do presidente do júri. Para mim, as entrevistas com profissionais e com o especialista eram uma das partes mais sólidas da avaliação. O presidente viu conversas semiestruturadas, usadas de forma demasiado casual para contarem como um instrumento de avaliação rigoroso. Foi justo, e a avaliação devia ter sido mais rigorosa.
O que correu bem
A framework aguentou-se. A ideia central é que cada fase define o que a IA pode contribuir, o que tem de produzir, quem é responsável e que portão a fecha. Isso passou, e passou também a honestidade dos resultados. O Apex ficou abaixo da média em usabilidade (SUS 56,73, nota D) e a tese di-lo. Pus esses números nos diapositivos, e acho que mostrá-los ajudou mais do que prejudicou.
Onde o júri insistiu
O formato DSRM
A dissertação segue a Design Science Research Methodology: identificar o problema, definir objetivos, desenhar, demonstrar, avaliar, comunicar. O presidente do júri questionou a forma como apliquei essa estrutura. Em alguns pontos, os capítulos seguem as atividades da DSRM mais de perto do que a investigação precisava, e o método acabou por moldar mais o documento do que as decisões.
Uma avaliação demasiado casual
Treze participantes, uma sessão não moderada cada, um único projeto preparado de antemão, uma amostra tirada da minha própria rede e instrumentos que medem perceção e nada dizem sobre a qualidade do software entregue. Listei tudo isto como ameaças à validade na dissertação, mas listar uma limitação não a elimina. A avaliação descreve como treze pessoas viveram a ferramenta; não mostra que a framework funciona para equipas.
Consistência dos papéis
A framework atribui o trabalho a funções a que chama chapéus. Alguns papéis referidos noutras partes do texto não constavam da tabela principal de papéis, o que fazia o modelo parecer menos fechado do que é. Corrigi isto na versão final que entreguei depois da defesa.
O que faria de outra forma
- Desenhar a avaliação antes da ferramenta. O estudo de usabilidade foi planeado à volta de uma ferramenta que já existia. Se tivesse decidido primeiro o que provaria que a framework estava errada, e construído nessa direção, o estudo teria sido mais certeiro.
- Envolver uma equipa real desde cedo. A demonstração numa organização parceira nunca aconteceu. Uma equipa que não desenhou a framework, a usá-la no seu próprio projeto, ter-me-ia dito mais do que treze sessões a solo.
- Usar a metodologia com leveza. A DSRM é útil para pensar, mas não deve ditar o índice.
A tese apareceu também onde eu não esperava: foi o tema principal da minha última entrevista de emprego.
O estudo de caso, o PDF da dissertação e o código em github.com/thomastabs/apex são públicos, fragilidades incluídas.