Un assaig real d’acceptació d’IA, de principi a fi
98 preguntes a un assistent sobre el reglament de baixa tensió, els criteris pactats per endavant, els sis errors greus i l’informe signat.
Un assaig real, de principi a fi. Un assistent sobre el reglament de baixa tensió, assajat el 2026-11-14. El vaig muntar jo per a aquesta demostració amb un model obert en local, així que no és el sistema de cap client. Resultat: desfavorable. Quatre dels sis criteris no es compleixen, entre els quals el d’errors greus, en què el pactat era zero.
Criteris:
- Errors en preguntes crítiques: exigit 0, mesurat 6, no compleix
- Respostes correctes: exigit ≥ 85 %, mesurat 52/88, no compleix
- Reconeix el que el reglament no diu: exigit ≥ 90 %, mesurat 9/10, compleix
- Corregeix una premissa falsa: exigit ≥ 75 %, mesurat 2/8, no compleix
- Respon bé en català: exigit ≥ 80 %, mesurat 3/6, no compleix
- Cita la instrucció correcta quan encerta: exigit ≥ 80 %, mesurat 51/52, compleix
Els errors en preguntes crítiques:
- R-011. Aparell al volum 0 d’una banyera. Va dir IPX8. El reglament exigeix IPX7 (ITC-BT-27, taula 1).
- R-018. Tensió límit en una obra amb esquema TT. Va dir 50 V. El correcte és 24 V en corrent altern (ITC-BT-33, 4.2).
- R-065. Endoll a 1 m de la banyera i a 1,2 m de terra. La primera vegada no va respondre; en repetir, va dir volum 2. Queda al volum 3 (ITC-BT-27).
- R-070. Ampliació d’una nau de 60 a 130 kW. Va encertar que cal projecte, però ho va justificar amb un límit de 10 kW que no existeix. La regla és que l’ampliació supera el 50 % (ITC-BT-04, 3.2.c).
- R-088. Neutre de 10 mm² amb fases de 16 mm² en una instal·lació interior. El va donar per bo. El neutre ha de ser igual que les fases (ITC-BT-19, 2.2.2).
- R-097. Grau de protecció de la lluminària del bany. No va donar l’IPX4 dels volums 1 i 2 i va barrejar requisits de piscines. Depèn del volum (ITC-BT-27, taula 1).
Abans de canviar de model, corregir com es llegeixen les taules del document i afegir una comprovació de premisses. Després, repetir l’assaig amb els mateixos casos.