Northwestern Anagram Test (NAT)

Standard Operating Procedure (SOP)

What is the Northwestern Anagram Test?

The Northwestern Anagram Test (NAT) is a clinical measure of sentence production developed by Weintraub, Mesulam, Wieneke, Rademaker, Rogalski, and Thompson (Northwestern University), first published in 2009. It was originally designed to assess grammatical/syntactic competence in patients with primary progressive aphasia (PPA), but the same rationale applies to stroke-induced aphasia and other populations where sentence production is difficult to test with conventional methods.

What it measures: The NAT assesses a patient's ability to construct grammatically correct sentences with accurate word order — both simple (canonical) and complex (noncanonical) sentence structures — using a picture-based anagram assembly task. The patient is given all the words needed to produce a target sentence, printed on individual cards in scrambled order, and must arrange them correctly to describe a picture.

Why it's used instead of other sentence-production measures: Most sentence-production tasks (picture description, spontaneous speech analysis, cloze procedures) require intact speech production, adequate word-finding, single-word comprehension, and working memory to be interpretable — a patient can score poorly for reasons that have nothing to do with syntax. The NAT was built to isolate grammatical/syntactic ability from these other domains:

• Because the patient never has to retrieve or produce words independently — only sequence words already provided — the test is minimally affected by motor speech deficits, word-finding difficulty (anomia), and speech production limitations.

• Because the actors and action are pre-labeled directly on the stimulus picture, the test minimizes reliance on single-word comprehension.

• Because all target words are physically present as cards, the test reduces the working memory demand seen in tasks requiring the patient to hold and produce a full sentence from scratch.

¿Qué es el Northwestern Anagram Test (NAT)?

El Northwestern Anagram Test (NAT) es una prueba clínica de producción de oraciones desarrollada por Weintraub, Mesulam, Wieneke, Rademaker, Rogalski y Thompson (Northwestern University) y publicada por primera vez en 2009.

Originalmente fue diseñada para evaluar las habilidades gramaticales y sintácticas de personas con afasia progresiva primaria (APP). Sin embargo, los mismos principios permiten utilizarla en personas con afasia secundaria a un accidente cerebrovascular (ACV) y en otras poblaciones en las que la producción de oraciones es difícil de evaluar mediante pruebas convencionales.

¿Qué evalúa?

El NAT evalúa la capacidad del participante para construir oraciones gramaticalmente correctas con un orden adecuado de las palabras, tanto en estructuras canónicas (simples) como no canónicas (complejas).

La tarea consiste en describir una imagen organizando correctamente un conjunto de palabras impresas en tarjetas que se presentan en un orden desorganizado. Todas las palabras necesarias para formar la oración objetivo ya están disponibles; el participante únicamente debe colocarlas en el orden correcto.

¿Por qué se utiliza en lugar de otras pruebas de producción de oraciones?

Muchas tareas tradicionales de producción de oraciones —como la descripción de imágenes, el análisis del habla espontánea o las tareas de completar oraciones— requieren que la persona tenga preservadas varias habilidades además de la sintaxis. Un bajo desempeño puede deberse a dificultades que no están relacionadas con la capacidad para construir oraciones, como problemas motores del habla, dificultades para encontrar palabras o limitaciones de memoria de trabajo.

El NAT fue diseñado para evaluar la gramática y la sintaxis con la menor influencia posible de estos otros procesos.

En particular:

• No requiere recuperar palabras de manera independiente. El participante no tiene que pensar ni producir el vocabulario por sí mismo, sino únicamente organizar palabras que ya se encuentran disponibles. Esto reduce el impacto de la anomia, las alteraciones motoras del habla y otras limitaciones de la producción oral.

• Reduce la dependencia de la comprensión de palabras aisladas. Los personajes y las acciones aparecen identificados directamente en la imagen del estímulo, por lo que la tarea exige menos comprensión léxica que otras pruebas.

• Disminuye la carga sobre la memoria de trabajo. Como todas las palabras de la oración están visibles durante la tarea, el participante no necesita mantener mentalmente la oración completa antes de producirla, como ocurre en otras evaluaciones de producción de oraciones.

When to Administer

Refer to the following guide for the most up-to-date information on when to administer this assessment, as the testing schedule varies by study (e.g., R01, AARG-D, etc.):

/wiki/spaces/MADRWiki/pages/97058818.

Cuándo Administrar

Consulte la siguiente guía para obtener la información más actualizada sobre cuándo administrar esta prueba, ya que el momento de administración varía según el estudio (p. ej., R01, AARG-D, etc.):

/wiki/spaces/MADRWiki/pages/97058818

Structure of the Test

• This SOP covers the validated 10-item short form of the NAT, not the full 30-item version.

• The 10-item short form consists of 5 Subject-extracted Wh-question (Subj-Wh) items and 5 Object-extracted Wh-question (Obj-Wh) items — one canonical structure type and one noncanonical structure type, selected because this subset was shown to correlate highly with the full 30-item test's canonical, noncanonical, and total scores, while taking less time to administer.

• 2 practice items precede testing (1 canonical, 1 noncanonical, consistent with the full-test practice format) — feedback and correction are given on practice items only, not on the 10 scored items.

• Administered in English only, via Full NAT (laptop version).

Scoring:

• Mark “correct” or “incorrect” on Redcap and write out the sentence the patient created.

• The patient should say "done" to indicate their final answer. This is the signal for the clinician to score the item and move to the next one.

• Timing: the tool has no built-in timer. The clinician manually times each item and allows a maximum of 20 seconds (per the original NAT manual) before moving to the next item if the patient has not said "done." Record the time taken for each item in the corresponding REDCap field.

Estructura de la Prueba

• Este procedimiento corresponde a la versión corta validada de 10 ítems del Northwestern Anagram Test (NAT), no a la versión completa de 30 ítems.

• La versión corta consta de:

  • 5 ítems de preguntas Wh con sujeto extraído (Subject-extracted Wh-questions; Subj-Wh).

  • 5 ítems de preguntas Wh con objeto extraído (Object-extracted Wh-questions; Obj-Wh).

• Estos representan una estructura canónica y una no canónica, respectivamente. Este subconjunto fue seleccionado porque ha demostrado una alta correlación con las puntuaciones de estructuras canónicas, no canónicas y la puntuación total de la versión completa de 30 ítems, mientras requiere menos tiempo de administración.

• Antes de iniciar la evaluación se administran 2 ítems de práctica (1 estructura canónica y 1 no canónica), siguiendo el mismo formato de práctica de la prueba completa.

• La retroalimentación y las correcciones solo se proporcionan durante los ítems de práctica. Una vez iniciados los 10 ítems puntuables, no debe ofrecerse ayuda ni corrección.

• La prueba se administra únicamente en inglés, utilizando la versión completa del NAT para computadora portátil (Full NAT – Laptop Version).

Puntuación:

• Para cada ítem:

  • Marque "Correcto" o "Incorrecto" en REDCap.

  • Registre textualmente la oración producida por el participante en el campo correspondiente.

  El participante debe decir "done" para indicar que ha terminado su respuesta. Esta es la señal para que el evaluador califique el ítem y continúe con el siguiente

How to Administer

• Open Full NAT (laptop version) and start screen sharing.

• In Zoom, after starting the share, go to the Remote Control option in the Zoom toolbar (More → Request/Give Remote Control), and grant the patient control of the screen.

• Confirm the patient can see the shared screen and successfully move a tile before beginning the practice items, to verify remote control was granted correctly.

Contingency — connectivity/remote control issues:

• If screen control transfers with a noticeable lag, drops mid-item, or the patient's actions are not visibly registering on the clinician's view, pause timing, re-establish remote control, and restart the item from the beginning.

• Note in the REDCap comment box if an item required restarting due to a technical issue, so this can be distinguished from a genuine no-response/incorrect score during later review.

To-Do List

• Confirm exact Zoom remote-control click path prior to administration

• Document the sentence the patient created on the textbox provided for each item on RedCap

Cómo Administrar

• Abra la versión completa del NAT en la computadora portátil e inicie la función de compartir pantalla.

• En Zoom, una vez iniciada la pantalla compartida, vaya a la opción Control remoto en la barra de herramientas (Más → Solicitar/Dar control remoto) y otorgue al participante el control de la pantalla.

• Antes de comenzar los ítems de práctica, confirme que el participante:

  1. Puede ver correctamente la pantalla compartida.

  2. Puede mover una ficha (tile) correctamente utilizando el control remoto.

  Esto permite verificar que el control remoto se ha otorgado correctamente antes de iniciar la evaluación.

Contingencia: Problemas de conexión o control remoto

Si el control remoto presenta retrasos importantes, se interrumpe durante un ítem o las acciones del participante no se reflejan correctamente en la pantalla del evaluador:

• Detenga el cronómetro o la administración del ítem.

• Restablezca el control remoto.

• Reinicie el ítem desde el principio.

Registre en el cuadro de comentarios de REDCap si fue necesario reiniciar un ítem debido a un problema técnico, de modo que posteriormente pueda distinguirse de una respuesta incorrecta o de una ausencia de respuesta.

Lista de tareas:

• Confirmar la ruta exacta para otorgar el control remoto en Zoom antes de administrar la prueba.

• Documentar en el cuadro de texto correspondiente de REDCap la oración producida por el participante para cada ítem.

Lab Decisions/ Decisiones del lab

No lab decisions have been made regarding the use of this assessment. It should be administered as stated in the steps.

No se han tomado decisiones en el laboratorio con respecto al uso de esta evaluación. Debe administrarse tal como se indica en los pasos.

Frequently Asked Questions/ Dudas Frecuentes

No frequently asked questions or doubts have been asked. If you have any, bring them up in SLP meeting and update this Wiki page.

Hasta el momento no se han identificado preguntas frecuentes ni dudas recurrentes sobre la administración de esta prueba.

Si surge alguna pregunta o situación de puntuación o administración que no esté contemplada en esta guía, preséntela en la próxima reunión del equipo de SLP y actualice esta página del Wiki con la resolución acordada.