Metodologia de prova reproduïble i documentada

La força d'un dictamen tècnic rau en el fet que una altra persona competent, seguint els mateixos passos en el mateix entorn, arribi als mateixos resultats. Si una troballa depèn d'una configuració que no es va documentar o d'una versió de lector de pantalla que ningú no va anotar, la part contrària pot posar legítimament en dubte tot l'informe. En aquesta lliçó aprendràs a documentar l'entorn, a dissenyar el procediment de prova sobre la base de WCAG-EM (s'obre en una finestra nova), a registrar cada pas i a redactar les limitacions amb honestedat.

Reproductibilitat: què vol dir en accessibilitat

Molts problemes d'accessibilitat depenen de la combinació concreta de navegador, sistema operatiu i tecnologia de suport. Un quadre combinat personalitzat pot funcionar amb JAWS i Chrome i fallar amb NVDA i Firefox; un focus pot ser visible a Windows i no a macOS. Reproduïble no vol dir «passa sempre a tot arreu», sinó «passa de manera consistent en l'entorn documentat, i aquest entorn és raonable i representatiu». La metodologia ha de permetre a un tercer recrear exactament aquest entorn.

Documentar l'entorn

Per a cada combinació provada, registra:

Tria combinacions representatives i justifica-les: les combinacions més utilitzades per les persones usuàries de tecnologies de suport a Espanya (enquestes d'ús, dades del mateix servei si n'hi ha), les que la part demandant declara utilitzar, i almenys dos lectors de pantalla diferents per evitar que una fallada s'atribueixi a un error d'un producte concret. Si l'entorn de proves és un equip del perit, utilitza perfils de navegador nous per evitar interferències d'extensions o de memòria cau.

Procediment: WCAG-EM com a columna vertebral

La metodologia d'avaluació de conformitat WCAG-EM del W3C, pensada per a auditories, serveix igualment com a esquelet pericial perquè defineix i justifica cada decisió:

1. Abast: quin lloc, aplicació o procés s'avalua, en quina data o període, amb quin nivell de conformitat de referència (WCAG 2.2 AA, o 2.1 AA si l'estàndard aplicable en la data dels fets era l'EN 301 549 v3.2.1 (PDF, s'obre en una finestra nova)) i en quin entorn base.
2. Exploració: pàgines comunes, funcionalitats essencials, tipus de pàgina, tecnologies utilitzades.
3. Mostra: pàgines i processos complets seleccionats i, si l'objecte és ampli, una mostra aleatòria addicional; l'objecte pericial sol acotar la mostra a les pàgines i processos en disputa, i cal dir-ho.
4. Avaluació: per cada pàgina i criteri, el procediment concret aplicat i el resultat (compleix, no compleix, no s'aplica, no s'ha pogut determinar).
5. Informe: amb l'estructura vista a la lliçó sobre l'informe pericial.

Fitxes de prova: una per troballa

La unitat de treball pericial és la fitxa de prova. Una plantilla eficaç:

• Identificador (H-01, H-02…) i títol breu.
• Ubicació: URL exacta o pantalla de l'app, component, estat (per exemple, després de prémer «Continua»).
• Data i hora de cada intent (almenys dos en moments diferents, per demostrar la persistència).
• Entorn: referència a la combinació documentada (P-01/NVDA, M-01/VoiceOver).
• Passos: numerats, amb les tecles o els gestos exactes.
• Resultat observat: descripció literal del que va passar i del que va anunciar la tecnologia de suport.
• Resultat esperat: segons l'estàndard i la mateixa interfície.
• Criteri tècnic de referència: número i nom (per exemple, 2.1.1 Teclat; 4.1.2 Nom, funció i valor).
• Reproductibilitat: en quantes combinacions i quants intents es va reproduir; si alguna no la reprodueix, es diu.
• Impacte: quines persones usuàries se'n veuen afectades i si poden completar la tasca per una altra via.
• Evidències: identificadors de l'annex.

Eines automàtiques: suport, no fonament

Pots utilitzar axe, WAVE, Lighthouse o analitzadors de contrast, però cada troballa que figuri a l'informe s'ha d'haver verificat manualment i descrit com a observació pròpia. Les eines se citen amb versió i els seus resultats en brut s'inclouen com a evidència, amb una advertència expressa sobre la seva cobertura parcial. Un dictamen que es limita a adjuntar un informe d'eina és fàcil de desacreditar: n'hi ha prou d'assenyalar un fals positiu.

Limitacions: dir-les abans que les diguin altres

Tota metodologia té límits, i el perit que els declara guanya credibilitat. Limitacions habituals: l'avaluació es va fer en dates posteriors als fets i el lloc podia haver canviat (com s'ha mitigat: arxius públics, declaració d'accessibilitat de l'època, codi font aportat); no es va disposar de comptes amb determinats perfils; no es van provar certes combinacions; alguns criteris depenen de contingut dinàmic no reproduïble. Indica també si la part contrària o el titular del lloc en van ser informats o van poder presenciar les proves, quan escaigui.

Resum

• Reproduïble vol dir consistent en un entorn documentat i representatiu que un tercer pot recrear; documenta equip, sistema, navegador, tecnologia de suport, eines i comptes amb versions exactes.
• WCAG-EM aporta la columna vertebral (abast, exploració, mostra, avaluació, informe) i justifica cada decisió metodològica.
• Cada troballa té una fitxa amb ubicació, dates, entorn, passos exactes, observat, esperat, criteri, reproductibilitat, impacte i evidències; prova almenys dues vegades i en dues combinacions.
• Les eines automàtiques són un suport verificat manualment, i les limitacions es declaren de manera proactiva.