La evaluación automatizada de textos es un campo de investigación emergente que está demostrando el potencial que los ordenadores tienen a la hora de procesar el lenguaje y de ser aplicados a la evaluación de textos. Este artículo ofrece una introducción a los principales conceptos y procedimientos empleados en el diseño de software para evaluar composiciones escritas. ESSA es un programa fruto de las investigaciones en este campo. Describiremos su funcionamiento para comprender mejor cómo analiza y evalúa narraciones cortas en el área de inglés. El grado de acuerdo entre la calificación de ESSA y la de cuatro docentes evaluando los mismos textos ascendió a 0.799.