Dify v1.1.0 Nuevo filtro inteligente "Metadatos" para la base de conocimientos

En la era de la explosión de la información, cómo localizar de forma rápida y precisa la información clave a partir de datos masivos se ha convertido en el principal reto de la gestión del conocimiento empresarial y personal. Recientemente, el equipo de producto de Dify ha lanzado la versión 1.1.0 y ha introducido de forma innovadora los "metadatos" como núcleo de la función de filtro de conocimiento. Esta actualización es como instalar un sistema de navegación inteligente para la base de conocimientos, que puede mejorar significativamente la eficiencia y la precisión de la recuperación de datos, y ofrecer a los usuarios una experiencia de acceso a la información más fluida y eficiente.

Antes, cuando se enfrentaban a una enorme base de conocimientos, los usuarios se encontraban a menudo como buscando una aguja en un pajar, lo que dificultaba encontrar rápidamente la información que necesitaban. La introducción del filtrado de metadatos ha cambiado esta situación. Los metadatos, en pocas palabras, son "datos sobre datos". Añade etiquetas y atributos descriptivos adicionales a los datos originales, como el creador del documento, la fecha de creación, palabras clave, etc. Con esta información estructurada, los usuarios pueden encontrar rápidamente la información que necesitan. Con esta información estructurada, los usuarios pueden establecer condiciones de filtrado específicas en función de sus necesidades, para localizar rápidamente los contenidos.

¿Cómo puede el filtrado de metadatos potenciar las aplicaciones GAR?

Para las dependencias RAG El filtrado de metadatos reviste especial importancia para la aplicación de la tecnología de Generación Mejorada de Recuperación (RAG). No sólo mejora la precisión de la recuperación de información para las aplicaciones RAG, sino que también desempeña un papel clave en la seguridad de los datos y el control de acceso. Imagínese un escenario empresarial en el que distintos usuarios puedan necesitar acceder a la información con distintos niveles de permiso. Con el filtrado de metadatos, los administradores pueden gestionar fácilmente los permisos a un nivel granular, garantizando que la información sensible sólo esté disponible para los usuarios autorizados.

Además, el filtrado de metadatos también optimiza el rendimiento de la búsqueda y ahorra recursos informáticos. Gracias a las etiquetas de metadatos preestablecidas, el sistema puede localizar más rápidamente los documentos pertinentes y reducir las búsquedas ineficaces, mejorando así la eficiencia global. Esta capacidad de personalización es, sin duda, una importante herramienta de mejora de la eficiencia para las empresas con bases de conocimiento masivas.

El siguiente diagrama muestra las ventajas del filtrado de metadatos para el control de acceso. Mediante el establecimiento de condiciones de metadatos como el nivel de privacidad, el cargador y la fecha de actualización, el sistema puede controlar con precisión los derechos de acceso de los distintos usuarios a información específica, por ejemplo, para las hojas de ruta RAG 2.0.

En pocas palabras, el filtrado de metadatos es como un administrador inteligente del conocimiento, que permite una recuperación de la información más inteligente, segura y eficiente al añadir atributos contextuales y control de acceso a los datos. Especialmente en los sistemas GAR, la importancia del filtrado de metadatos es mayor cuando tanto la privacidad como la relevancia del conocimiento son cruciales.

¿Cómo se aplica el filtrado de metadatos en Dify?

existe Dify En la versión 1.1.0, los usuarios pueden añadir y gestionar fácilmente metadatos para los documentos de la base de conocimientos y configurar reglas de filtrado de metadatos para una recuperación de conocimientos más precisa.

Paso 1: Añadir metadatos a los documentos de la base de conocimientos

En la interfaz de gestión de la base de conocimientos de Dify, los usuarios pueden añadir metadatos personalizados para cada documento. El sistema genera automáticamente algunos metadatos predeterminados cuando se crea un documento, como el nombre del archivo, el cargador y la fecha de carga, y el usuario puede añadir manualmente nuevos campos de metadatos y personalizar los nombres de los campos y los tipos de datos según sea necesario. Además, los usuarios pueden añadir manualmente nuevos campos de metadatos y personalizar los nombres de los campos y los tipos de datos según sea necesario. dify admite la edición y modificación por lotes de los metadatos de los documentos, lo que facilita a los usuarios la rápida gestión y actualización de sus bases de conocimientos. Esta forma de "etiquetar" los documentos sienta las bases para una búsqueda y gestión posteriores más refinadas.

Paso 2: Configurar el filtrado de metadatos en la aplicación

Dify v1.1.0 añade la sección "Contexto" a Chatbot, así como el Chatflow y el Flujo de trabajo El portal de configuración del filtrado de metadatos está disponible en todos los nodos de recuperación de conocimientos. Los usuarios pueden elegir entre los modos de filtrado automático o manual en función de sus necesidades reales. En el modo automático, el sistema analiza de forma inteligente las consultas de los usuarios y extrae y genera automáticamente las condiciones de filtrado. El modo manual permite a los usuarios personalizar las condiciones de filtrado en función de los tipos de campo de metadatos (cadena, numérico, hora) y establecer con flexibilidad la relación "Y" u "O" entre varias condiciones.

Los tres principales tipos de metadatos y sus escenarios de aplicación

Dify v1.1.0 admite actualmente tres tipos de metadatos -de cadena, numéricos y temporales- para satisfacer las necesidades de gestión del conocimiento en distintos escenarios.

• Metadatos de cadenas: mejora de la relevancia del contexto de búsqueda

  Por ejemplo, cuando un usuario busca "informe de proyecto", el sistema puede dar prioridad a la devolución de documentos con etiquetas de metadatos como "Marketing" o "I+D", filtrando así una gran cantidad de información irrelevante y mejorando la precisión de los resultados de la búsqueda. De este modo se filtra una gran cantidad de información irrelevante y se mejora la precisión de los resultados de la búsqueda.

• Metadatos numéricos: control de acceso mejorado

  El control de acceso basado en niveles de permiso puede lograrse mediante metadatos numéricos. Por ejemplo, sólo los usuarios con permisos específicos pueden recuperar documentos con un nivel de privacidad superior a un umbral establecido, lo que garantiza la seguridad y el cumplimiento de los datos.

• Metadatos temporales: gestión eficaz de las versiones de los documentos

  Los metadatos temporales ayudan a los usuarios a distinguir entre versiones antiguas y nuevas de un documento. Cuando un documento se actualiza y se vuelve a cargar, los usuarios pueden recuperar rápidamente la última versión gracias al filtrado temporal. Además, en combinación con la información del cargador, los metadatos temporales también permiten a los usuarios comparar y analizar diferentes versiones históricas del mismo documento para garantizar la coherencia en el tratamiento de los documentos.

En general, la función de filtrado de metadatos introducida en Dify v1.1.0 es una importante mejora de la solución de gestión de bases de conocimiento existente. No sólo mejora la eficiencia y la precisión de la recuperación de información, sino que también proporciona un mayor apoyo en la seguridad de los datos y el control de acceso. Dify v1.1.0 es una actualización digna de mención para empresas y desarrolladores que deseen crear aplicaciones RAG inteligentes. Para conocer más detalles, recomendamos consultar la base de conocimientos oficial de Dify para experimentar por sí mismo la comodidad y eficacia del filtrado de metadatos.

https://docs.dify.ai/zh-hans/guides/knowledge-base