Una respuesta generada por IA puede sonar profesional y aun así fallar en una resta, usar un denominador equivocado o mezclar periodos. Este caso enseña un procedimiento para contrastar las cifras, no a predecir el precio de una acción. Todos los datos numéricos de esta página son sintéticos y el ejemplo de respuesta errónea está construido para enseñar controles; no es una prueba realizada a ChatGPT, Claude, Gemini ni a ningún otro producto real.
Contenido educativo. No es asesoramiento financiero personalizado ni recomendación de comprar o vender. Utiliza documentos oficiales, verifica las fórmulas y solicita ayuda profesional cuando la decisión lo requiera.
- Cómo reconciliar una cifra con sus datos de entrada.
- Cómo detectar errores de unidad, denominador y redondeo.
- Cómo registrar fuente, fórmula y estado de verificación.
1. El conjunto de datos: pequeño, transparente y reproducible
Imagina una compañía que no existe. La tabla se ha creado únicamente para que las operaciones puedan repetirse a mano o con la calculadora de ratios financieros. No representa una empresa real, cotización, estimación de mercado o resultado de una prueba de producto.
| Dato (M€ salvo indicación) | 2023 | 2024 | 2025 |
|---|---|---|---|
| Ingresos | 800,0 | 920,0 | 1.010,0 |
| Resultado operativo | 64,0 | 73,6 | 90,9 |
| Deuda bruta | 210,0 | 220,0 | 240,0 |
| Caja y equivalentes | 80,0 | 90,0 | 95,0 |
| EBITDA usado en el ejercicio | 90,0 | 100,0 | 115,0 |
| Beneficio neto | 36,0 | 42,0 | 51,0 |
| Patrimonio neto medio | 260,0 | 275,0 | 300,0 |
En una investigación real, cada fila se sustituiría por una cifra extraída del informe del emisor. La ficha debe registrar el enlace al documento, ejercicio, página o tabla, divisa, unidad, definición de la partida y fecha de extracción. Si no encuentras esa evidencia, el dato no pasa a «verificado».
Descargar dataset sintético (CSV) para recalcular los ejemplos del artículo.
2. Calcula antes de interpretar
| Métrica 2025 | Fórmula | Resultado correcto con los supuestos |
|---|---|---|
| Margen operativo | 90,9 ÷ 1.010 × 100 | 9,0 % |
| Deuda neta | 240 − 95 | 145 M€ |
| Deuda neta/EBITDA | 145 ÷ 115 | 1,26x (aprox.) |
| ROE aproximado | 51 ÷ patrimonio neto medio 300 × 100 | 17,0 % |
La aritmética es una cosa; la definición contable es otra. Antes de aceptar el resultado, confirma que ingresos y resultado operativo pertenecen al mismo periodo y perímetro, que la caja se define de forma compatible con deuda bruta, y que el EBITDA es el numerador/denominador comparable que pretende el análisis. No todas las compañías publican una definición homogénea de EBITDA ajustado.
3. Simulación de una respuesta plausible, pero errónea
Para enseñar el control, imaginemos que una respuesta ficticia afirma: «El margen operativo de 2025 es del 10 %, la deuda neta asciende a 150 M€ y el ROE es del 20 %». La fluidez del texto no lo convierte en evidencia.
| Afirmación simulada | Revisión independiente | Resultado del control |
|---|---|---|
| Margen operativo 10 % | 90,9 / 1.010 = 9,0 % | Rechazar: no coincide con los datos |
| Deuda neta 150 M€ | 240 − 95 = 145 M€ | Rechazar: resta incorrecta o dato diferente no citado |
| ROE 20 % | 51 / 300 = 17,0 % | Rechazar: denominador o cifra no justificada |
Los errores anteriores son inventados a modo de ejercicio y no se atribuyen a un modelo concreto ni a una prueba real. Si el asistente responde que usó cifras distintas, pide que las identifique con exactitud. Si el documento no respalda esa variante, conserva la discrepancia como no verificada.
4. Revisión FARO y registro de evidencia
Utiliza FARO como una lista de control editorial, no como una certificación científica. Para cada afirmación crítica, comprueba:
- Fuente: ¿el enlace lleva al documento original y respalda exactamente la afirmación?
- Actualidad: ¿el periodo y fecha de corte son los adecuados?
- Reproducibilidad: ¿otra persona puede recalcular el valor con las entradas publicadas?
- Omisiones: ¿se anotan supuestos, límites y evidencia contradictoria?
Registra cada problema en la matriz de evidencia financiera y prueba la herramienta FARO. Una puntuación alta no significa que la inversión sea buena; solo ayuda a recordar qué partes de la afirmación se han revisado.
La CNMV publicó en 2026 un estudio que identificó errores de cálculo, interpretación y uso de información desactualizada o inventada en modelos de lenguaje aplicados a mercados financieros. El estudio es evidencia de riesgos y de la importancia de la supervisión; no constituye una medición de los asistentes actuales en el conjunto sintético de esta página.
5. Fuentes originales para repetir el ejercicio con una empresa real
- CNMV · Documento de trabajo 96 (2026): modelos de lenguaje y mercados financieros
- SEC EDGAR · búsqueda de informes corporativos para emisores estadounidenses
- Investor.gov · guía para leer un informe anual 10-K
- ESMA · advertencia sobre el uso de IA para invertir
- Google Search Central · crear contenido útil y fiable
Para una empresa española, consulta también la información financiera regulada publicada por el emisor y la CNMV. La SEC/EDGAR es un recurso primario para emisores que presentan informes en Estados Unidos; no sustituye el registro nacional pertinente para todas las compañías.
6. Cómo diseñar una prueba reproducible de una IA financiera
Un error aislado sirve para enseñar una comprobación, pero no permite concluir que un asistente sea sistemáticamente bueno o malo. Para evaluar una herramienta con rigor, define las tareas antes de ver las respuestas y registra exactamente qué versión, fecha, instrucciones y documentos utilizaste. Otra persona debería poder repetir el proceso sin adivinar qué hiciste.
La batería de abajo es un protocolo propuesto para el lector, no un benchmark ejecutado por FindIA Lab. No asigna una puntuación a ChatGPT, Claude, Gemini ni a ningún otro modelo. Su objetivo es separar tipos de error que suelen quedar mezclados en una respuesta fluida.
| Prueba | Entrada | Qué comprobar | Error que buscas |
|---|---|---|---|
| Extracción | Un dato explícito de un informe | Valor, unidad, periodo y página | Cifra inventada o periodo equivocado |
| Aritmética | Datos de una fórmula simple | Rehacer el cálculo fuera del chatbot | Denominador equivocado o redondeo que cambia la lectura |
| Comparabilidad | Dos ejercicios consecutivos | Misma definición, moneda y perímetro de consolidación | Mezcla de datos trimestrales y anuales |
| Medida ajustada | Cifra ajustada y conciliación contable | Diferencia frente a la medida reportada | Tratar una medida no GAAP como equivalente a la contable |
| Contradicción | Dos fragmentos con cifras distintas | Si explica el conflicto y su contexto | Elegir una cifra sin explicar la discrepancia |
| Dato ausente | Pregunta sobre un dato que no se aporta | Si responde «no consta» | Rellenar el hueco con una invención plausible |
| Fuente | Afirmación material con un enlace | Si el documento respalda exactamente la afirmación | Cita decorativa o URL que no demuestra el dato |
| Fecha de corte | Informe y fecha de corte explícita | Si respeta el periodo indicado | Introducir información posterior |
| Unidades | Tabla con miles, millones y divisas | Conversión, escala y signo | Error por miles/millones o EUR/USD |
| Riesgos | Sección de riesgos del informe | Salvedades, contingencias y límites | Omitir un riesgo material |
| Procedencia | Documento original y resumen de terceros | Si prioriza el original y señala discrepancias | Repetir un resumen sin confirmación |
| Privacidad | Archivo con información innecesaria | Minimización y anonimización | Compartir datos que la tarea no requiere |
7. Rúbrica para revisar el proceso, no para coronar un modelo
Para cada dimensión utiliza 0 = no cumple, 1 = parcial o ambiguo, 2 = cumple con evidencia localizada. Marca «no aplicable» cuando una dimensión no corresponda. Revisa por separado: trazabilidad, aritmética, consistencia de periodos y unidades, tratamiento de datos ausentes, cobertura de riesgos, claridad de los límites y reproducibilidad.
Conserva los errores concretos además de la puntuación. Si el resultado es 12/14, por ejemplo, no significa «85,7 % de fiabilidad» ni que exista esa probabilidad de ganar dinero. La rúbrica es una herramienta editorial de cribado ideada para ordenar comprobaciones; no es una escala científica validada ni una certificación de exactitud.
8. Cómo ejecutar el test en condiciones comparables
- Elige el documento, la fecha de corte y la lista de tareas antes de ejecutar los prompts. No cambies la prueba después de ver qué respuesta prefieres.
- Registra la herramienta y versión visible, fecha y hora, modo empleado, instrucciones, archivo de entrada y cualquier limitación de carga.
- Utiliza la misma pregunta y el mismo documento en cada plataforma. Si una herramienta puede buscar en internet y otra no, anótalo: no serían condiciones equivalentes.
- Guarda la respuesta original sin editar. Contrasta cada cifra material con la fuente y registra el enlace y la página que la respaldan.
- Cuando sea posible, pide a una segunda persona que aplique la rúbrica sin conocer qué herramienta produjo la respuesta. Reduce, aunque no elimina, el sesgo de preferencia.
- Publica el tamaño de la muestra, los criterios de inclusión, las exclusiones y los casos sin resolver. No extrapoles una muestra pequeña al mercado entero.
9. Qué métricas aportan información y cuáles no bastan
En extracción de datos, puedes registrar campos correctos entre campos comprobados, indicando cómo seleccionaste la muestra. Para cálculos, registra el error absoluto y relativo e identifica si cambia la interpretación. En verificación de fuentes distingue entre que la URL exista, que el documento sea primario y que respalde realmente la frase.
No conviertas una exactitud del 90 % en «90 % de probabilidades de ganar dinero»: son magnitudes distintas. Tampoco compares resultados si una herramienta recibió instrucciones, documentos o tiempo diferentes. En finanzas importan las comisiones, la volatilidad, los impuestos, la ejecución, el horizonte y el sesgo de selección; acertar una etiqueta histórica no basta para demostrar rentabilidad neta sostenible.
10. Repite el caso con el CSV y luego utiliza un documento real
Empieza con el CSV sintético descargable y la matriz de trazabilidad. Después reemplaza los datos ficticios por un documento público, descargado desde el emisor o un registro oficial, y conserva la fecha y versión del archivo.
Para emisores estadounidenses, la SEC ofrece el buscador oficial EDGAR. Para empresas españolas, consulta la información regulada de la compañía y los registros de la CNMV. Una nota de prensa puede servir como contexto, pero no siempre sustituye a las cuentas, sus notas o el informe de auditoría.
11. Lista de control antes de publicar una conclusión
- ¿Cada cifra tiene documento, periodo, unidad y ubicación?
- ¿Los cálculos se pueden reproducir con los datos publicados?
- ¿Los valores sintéticos se distinguen de datos reales?
- ¿Cada fuente respalda la afirmación que acompaña?
- ¿Se declara lo que no se ha probado?
- ¿Se evita convertir una explicación educativa en una recomendación personalizada?
Límite de este recurso: las cifras y la respuesta fallida del ejercicio son sintéticas. Esta página no afirma haber realizado un benchmark independiente de productos comerciales ni recomienda comprar o vender activos.
Preguntas frecuentes
¿Este ejemplo prueba que ChatGPT comete esos errores?
No. Tanto las cifras como la respuesta errónea están construidas para enseñar un método de revisión. La página no afirma haber ejecutado una prueba real de ningún chatbot.
¿Si la fórmula cuadra, está verificado el análisis?
No necesariamente. También hay que confirmar que la fuente sea la correcta, la cifra esté en la unidad adecuada, el periodo sea comparable y la definición de la partida coincida con la fórmula.
¿Puedo usarlo para decidir si compro una acción?
No. Sirve para aprender a comprobar cifras y separar errores aritméticos de interpretación. No evalúa objetivos, horizonte, tolerancia al riesgo ni circunstancias particulares.
Abrir el laboratorio de pruebas reproducibles de IA financiera para registrar versión, fuente, periodo, cálculos y límites de las respuestas que evalúes. La herramienta no ejecuta modelos ni valida las respuestas automáticamente.
Lectura adicional
Continúa con cómo analizar un informe anual con IA, la guía de ratios financieros o la metodología para comparar asistentes de IA. Los tres recursos completan el flujo: extraer, calcular y evaluar.