IA aplicada · Conocimiento

Antes de indexar nada compruebo si el problema está en la búsqueda o en que el documento no existe

He montado canalizaciones de recuperación sobre documentación propia, y a menudo el problema no era de búsqueda. Era que el procedimiento estaba desactualizado, que había tres versiones circulando o que la respuesta no estaba escrita. Indexar eso solo consigue que la máquina repita el desorden más deprisa. Cuando el material tiene una versión vigente, una persona responsable y un procedimiento de retirada, existe una base fiable para la recuperación; todavía hay que medir el método de búsqueda sobre el corpus y las consultas reales.

  • Si la respuesta no está escrita en ninguna parte, no hay recuperación que la encuentre.
  • La búsqueda literal y la vectorial fallan de formas distintas: combinarlas puede mejorar la cobertura de términos exactos y formulaciones equivalentes, pero hay que medir el resultado sobre el corpus real.
  • El índice es una representación derivada del corpus y también envejece. Documento qué conserva, con qué frecuencia se actualiza y cómo se elimina.
  • A medio y largo plazo, mantener vigente el material puede costar tanto como montar la recuperación o más. Mido por separado la implantación, el gobierno editorial, la infraestructura, las consultas y la evaluación.

Experiencia en recuperación de conocimiento

Diseño la recuperación de información con fuentes versionadas, permisos heredados y citas que permitan volver al fragmento original. Comparo búsqueda literal, vectorial e híbrida con un corpus de evaluación y documento cuándo el sistema debe declarar que no dispone de respaldo suficiente.

Mi trayectoria

Señales de que no basta con buscar

Casi siempre después de que alguien pruebe un asistente genérico y vea que no sabe nada de la organización.

01

El conocimiento está repartido

Documentación, decisiones, incidencias, correos y la cabeza de tres personas. Encontrar la respuesta cuesta más que aplicarla.

02

La misma pregunta llega cada semana

Y cada vez se responde un poco distinto, según quién conteste.

03

No está claro qué versión manda

Circulan un procedimiento en el gestor documental, otro en un correo y un tercero en una carpeta compartida.

04

El buscador existente no encuentra nada

Devuelve el documento correcto solo si se escribe el término exacto, y nadie recuerda cómo se llamaba.

Cómo funciona por dentro

Seis pasos que decido antes de escribir código.

  1. 01

    Comprobar que la respuesta existe

    Tomo veinte preguntas reales y busco la respuesta a mano. Si no está escrita, el problema es editorial y ninguna canalización lo arregla.

  2. 02

    Decidir el gobierno del documento

    Qué versión manda, quién la aprueba, cuándo caduca y quién retira lo derogado. Sin esto, el índice hereda el desorden.

  3. 03

    Trocear con criterio

    El tamaño del fragmento decide qué se recupera. Trozos grandes traen ruido; trozos pequeños pierden el contexto que da sentido a la frase.

  4. 04

    Buscar de dos maneras

    La literal para códigos, nombres y referencias exactas; la vectorial para preguntas formuladas con otras palabras. Los resultados se combinan y se ordenan.

  5. 05

    Componer con citas

    El sistema recibe los fragmentos recuperados y debe citar el documento y la posición de cada afirmación o abstenerse. La evaluación comprueba que no introduce afirmaciones sin apoyo; la arquitectura reduce ese riesgo, pero no permite darlo por imposible.

  6. 06

    Vigilar el envejecimiento

    El índice se refresca cuando el material cambia. Al retirar un documento, el sistema inicia su eliminación del índice y comprueba que deja de recuperarse dentro del plazo acordado.

Cómo decido

Siete preguntas antes de montar nada.

  1. 01

    ¿La respuesta está escrita?

    Compruébalo a mano con veinte preguntas reales. Si no está, el trabajo es editorial, no técnico.

  2. 02

    ¿Quién gobierna el documento?

    Una persona por familia documental, con capacidad de aprobar y de retirar.

  3. 03

    ¿Cada cuánto cambia el material?

    Determina si el índice se refresca en tiempo real, cada noche o cuando alguien lo pide.

  4. 04

    ¿Quién pregunta y qué permisos tiene?

    Si hay material restringido, el filtrado por permisos condiciona toda la arquitectura.

  5. 05

    ¿Debe actuar además de consultar?

    Un agente con herramientas se añade sobre una recuperación ya evaluada. Cada acción exige autorización para la identidad y el alcance correspondientes, contratos explícitos, confirmación cuando proceda, límites y una forma de revertir o compensar el efecto.

  6. 06

    ¿Cómo se mide que funciona?

    Con un conjunto de preguntas de respuesta conocida y de casos sin respuesta posible, formulados al sistema antes y después de cada cambio.

  7. 07

    ¿Cuánto cuesta al volumen previsto?

    Estimado con supuestos explícitos y contrastado con el uso real del primer mes.

Lo que he visto salir mal

Cinco problemas que aparecen a los pocos meses.

El índice envejece en silencio

El cambio del material pasa inadvertido hasta que alguien actúa con un procedimiento derogado.

Troceado que rompe el sentido

Una tabla partida por la mitad o una condición separada de su excepción producen respuestas correctas en apariencia y equivocadas en el fondo.

Ruido por indexar de más

Borradores, plantillas vacías y actas antiguas compiten con el documento bueno y a veces ganan.

Medición inexistente

Se cambia el troceado o la instrucción y, sin una medida previa, no se puede saber si ha mejorado.

Coste por consulta subestimado

La estimación se hizo con preguntas cortas y el uso real trae preguntas largas con mucho contexto recuperado.

Las dos arquitecturas de recuperación con las que he trabajado

Primero elijo cómo recuperar información. La capacidad de ejecutar acciones se decide después, sobre una recuperación ya evaluada.

01

Búsqueda literal sobre documentación con versión vigente

Sin modelo de lenguaje en la recuperación. Un buscador bien configurado sobre material bien ordenado.

A favor

  • Barato de operar y de explicar
  • Resultados predecibles y reproducibles
  • No inventa nada

En contra

  • Obliga a acertar con el término exacto
  • No responde: devuelve documentos

Cuándo tiene sentido Cuando el material está bien escrito y quien pregunta conoce el vocabulario. Muchas veces basta con esto.

02

Recuperación híbrida con respuesta citada

Búsqueda literal y vectorial combinadas, y una respuesta compuesta con los fragmentos recuperados y sus citas.

A favor

  • Puede recuperar formulaciones equivalentes; lo compruebo sobre consultas reales
  • Las citas permiten comprobar las afirmaciones de la respuesta
  • Se puede medir con un conjunto de preguntas fijo

En contra

  • Exige mantener el índice y vigilar que siga actualizado
  • El coste crece con el volumen de consultas

Cuándo tiene sentido Cuando el material tiene una versión vigente, una persona responsable y un procedimiento de retirada, pero el vocabulario de quien pregunta no coincide con el de quien escribió.

Comprobaciones según la arquitectura elegida

Hay controles comunes y otros que solo corresponden a las opciones que componen respuestas o ejecutan acciones.

  • Todas las fuentes tienen una versión vigente, una persona responsable, permisos y un procedimiento de retirada.
  • Retirar un documento impide recuperarlo dentro del plazo acordado, como demuestra una prueba.
  • En la búsqueda literal, cada resultado permite reconstruir los términos y filtros aplicados.
  • Si se combinan búsqueda literal y vectorial, se mide por separado la aportación de cada método sobre consultas reales.
  • Si el sistema compone respuestas, cada afirmación incluye una referencia al documento y a la posición concreta que la respaldan, y existe una prueba de abstención.
  • Si el sistema ejecuta acciones, se prueban autorización, confirmación, límites y reversibilidad.
  • El coste y la latencia se miden sobre la arquitectura y el volumen previstos.

Qué cambia al crecer

El volumen de material y el de consultas escalan por caminos distintos.

  1. Cientos de documentos

    Se puede revisar el corpus a mano. Ajusto el troceado mediante una muestra documentada de consultas y reviso manualmente los fragmentos resultantes. La calidad depende sobre todo de la limpieza del material.

  2. Miles de documentos

    Aparece la necesidad de metadatos: familia, vigencia, responsable. Sin ellos, el ruido gana.

  3. Consultas continuas

    El coste y la latencia pasan al primer plano. Puede compensar almacenar resultados o respuestas en caché solo si la clave incorpora la identidad o el alcance de los permisos, la versión de las fuentes y el contexto relevante, y si la caché se invalida cuando cambian el corpus o los permisos. También mido qué parte del contexto puede recortarse sin reducir la calidad.

  4. Varias organizaciones

    El aislamiento entre corpus deja de ser una opción de configuración: lo trato como un requisito que tengo que demostrar con pruebas.

Qué pedir en una propuesta

Cuatro requisitos que distinguen lo operable de lo demostrable.

RequisitoEvidencia exigibleCriterio de aceptación
Gobierno del materialLista de fuentes con responsable, vigencia y procedimiento de retiradaToda fuente indexada tiene responsable y fecha de revisión
Frescura del índiceProcedimiento de reindexación y prueba de que un documento retirado desapareceEl material retirado deja de recuperarse dentro del plazo acordado
Evaluación propia de la arquitecturaConsultas de búsqueda, preguntas con respuesta y abstención o acciones permitidas, según la opción elegidaLa ficha define qué cambios de instrucciones, modelo, proveedor, fuentes, permisos o configuración obligan a repetir la evaluación; los resultados se conservan por versión
Coste y latenciaRangos aceptables acordados para el volumen previsto, con supuestos declaradosDurante el primer mes se miden el coste por consulta y la latencia con el uso real; toda desviación fuera de los rangos abre la revisión acordada

Los atajos habituales

Tres formas de gastar tiempo sin resolver el problema.

  • Indexarlo todo y ya se verá

    Meter la unidad compartida entera en el índice permite que los documentos derogados compitan con los vigentes y puede hacer que el sistema los cite sin distinguir su estado.

  • Cargar los documentos en el contexto

    Cargar todo el material en el contexto solo funciona mientras cabe y sigue siendo pertinente. Cuando el contenido se acerca al límite de la ventana de contexto o lo supera, el proveedor puede rechazar la petición. La aplicación solo seleccionará, resumirá o truncará material si ese comportamiento se ha definido e implementado; también debe medirse y hacerse visible.

  • Cambiar de modelo

    Si el problema es que el documento no existe o está mal, un modelo mejor solo redacta mejor la respuesta equivocada.

Referencias

En qué me apoyo

  • Documentación oficialSubsistema de IA de Moodle

    Documentación consultada el 3 de agosto de 2026. Define cómo la plataforma gestiona proveedores, acciones y políticas. Miro qué resuelve de serie antes de construir una capa propia.

Esto sale de canalizaciones que he montado y operado sobre documentación propia. No incluye comparativas de proveedores ni cifras de precisión: dependen tanto del corpus que un número aislado no significaría nada.

Blog

Casos, pruebas y fuentes.

En el blog desarrollo casos particulares, pruebas y fuentes que amplían esta página de referencia.

Ir a blog.albertolarah.com

Contacto

¿Tenéis el conocimiento repartido y cuesta encontrarlo?

Antes de montar nada compruebo, con una muestra de preguntas reales, si las respuestas existen y están vigentes. Esa comprobación acotada permite decidir si el problema es editorial o de recuperación antes de invertir en un índice.

hola@albertolarah.comLinkedIn ↗