Este artículo aborda la comprobación de los índices de validez de un cuestionario de evaluación docente en la Universidad, a través de la utilización de Modelos Jerárquicos Lineales. Los resultados obtenidos sugieren que este tipo de evaluaciones deben interpretarse con cautela especialmente si van a ser utilizadas con fines sumativos por los responsables académicos de la Universidad.