Ecommerce

Herramientas de IA para analizar documentos complejos

La IA generativa es útil para condensar y simplificar grandes cantidades de información. Los casos de uso para especialistas en marketing y ejecutivos de negocios incluyen:

  • Explicar documentos complicados como las patentes.
  • Resumir narrativas largas en puntos y definiciones clave.
  • Extracción de secciones importantes de libros electrónicos y documentos técnicos para blogs y materiales promocionales.

A continuación se muestran cuatro herramientas de IA generacionales para realizar estas tareas. Para probar, instruí a las herramientas para analizar un 2023. patentar de Google para Search Generative Experience, con tres solicitudes:

  • ¿De qué trata este documento?
  • ¿Cómo selecciona la SGE los recursos externos en sus respuestas? ¿Las funciones se originan en resultados de búsqueda orgánicos?
  • Definir los términos esenciales del documento.

Mis objetivos eran evaluar la precisión de las respuestas y comprobar si había información inventiva “alucinante”.

Chat GPT

Página de inicio de ChatGPT

Chat GPT

Chat GPT ahora puede procesar documentos cargados, incluidos archivos PDF. Proporcionó una descripción general genérica del mensaje «¿De qué trata este documento?»

Pero fue la única herramienta que respondió a la segunda pregunta: «¿Las funciones se originaron a partir de resultados de búsqueda orgánicos?»

Según el documento de patente, no todos los documentos se seleccionan exclusivamente de los resultados de búsqueda orgánicos. El proceso de selección involucra diferentes categorías de documentos de resultados de búsqueda:

Documentos de resultados de búsqueda que responden a consultas: Son documentos obtenidos en respuesta a la consulta original enviada por el usuario.

Buscar documentos de resultados que respondan a consultas relacionadas: Estos documentos se derivan de búsquedas realizadas para consultas relacionadas con la consulta original.

Documentos de resultados de búsqueda que responden a búsquedas recientes: Estos son documentos que respondieron a consultas recientes, posiblemente relacionadas con la consulta actual o el historial de búsqueda del usuario.

ChatGPT inventó los nombres de las categorías (en negrita)! La patente no utiliza estos términos.

Entonces pregunté: “No veo esos nombres de categorías en el documento original. ¿Los inventaste?

Respuesta de ChatGPT:

Tienes razón y me disculpo por la confusión. Los nombres de categorías que utilicé (“Documentos de resultados de búsqueda que responden a consultas”, “Documentos de resultados de búsqueda que responden a consultas relacionadas” y “Documentos de resultados de búsqueda que responden a consultas recientes”) eran de hecho mis propias oraciones resumidas de los conceptos descritos en la patente. No se citan directamente en el documento.

De hecho, la patente analiza el proceso de selección de documentos en función de su capacidad de respuesta a una consulta determinada, consultas relacionadas y búsquedas recientes. Estas selecciones pueden incluir documentos que respondieron a la consulta original, así como aquellos que responden a consultas relacionadas o recientes. Mi intención era aclarar este proceso, pero debería haber indicado claramente que estos nombres de categorías eran mis propios resúmenes y no citas directas del documento.

Gracias por señalar esta discrepancia.

La respuesta de ChatGPT es un ejemplo de alucinación, una debilidad de muchas herramientas de generación de IA.

Claudio

La página de inicio de Claude

Claudio

Claudio es independiente modelo de IA generativa de Anthropic que no utiliza ChatGPT, a diferencia de las otras herramientas de esta lista. En mis pruebas, Claude fue el más cauteloso al responder.

Por ejemplo, las otras tres herramientas respondieron «Sí» a la pregunta «¿Se seleccionan documentos en los resultados de búsqueda orgánicos?» Sólo Claude ofreció una respuesta matizada:

La patente no indica explícitamente si los documentos se seleccionan a partir de resultados de búsqueda orgánicos.

Sin embargo, hay algunas pistas contextuales que sugieren que se refieren a resultados de búsqueda orgánicos:

    • Los antecedentes describen el suministro de resúmenes basados ​​en consultas de «documentos de resultados de búsqueda» sin especificar si son resultados orgánicos o pagos. Normalmente, los «resultados de búsqueda» se refieren a resultados orgánicos devueltos por un motor de búsqueda.
    • No se menciona filtrar o tratar los documentos de resultados pagados/promocionados de manera diferente a los documentos orgánicos al seleccionar documentos para resumir.
    • El objetivo parece ser resumir los documentos más relevantes para la consulta de búsqueda para proporcionar una descripción general a los usuarios. Los resultados de búsqueda orgánicos generalmente están más optimizados para su relevancia que los resultados promocionales o pagos.
    • Las consultas relacionadas se utilizan para ampliar la selección de documentos. Las consultas relacionadas/ampliadas normalmente se utilizan con conjuntos de documentos orgánicos, no con resultados de publicidad paga.

Por lo tanto, aunque no se indica de manera definitiva, el lenguaje de la patente sugiere fuertemente que los documentos que responden a consultas seleccionados para generar resúmenes son resultados de búsqueda orgánicos en lugar de resultados pagos o promocionales.

Amigos PDF

Página de inicio de PDF Pals

Amigos PDF

Amigos PDF es una aplicación de escritorio que ofrece 30 preguntas de prueba gratuitas. Requiere una clave API ChatGPT para estas pruebas.

Una vez instalado, PDF Pals puede procesar archivos cargados Documentos PDF.

La herramienta incluye números de página en sus respuestas, lo que facilita la verificación de la información. Al hacer clic en cualquier número de página, accederá a esa sección del documento.

En mis pruebas, PDF Pals no simplificó la patente a mi nivel de comprensión. Sus respuestas fueron muy técnicas, a pesar de que solicité lo contrario. Aún así, los resúmenes fueron útiles, aunque complicados.

Pregunta tu PDF

AskYourPDF Inicio

Pregunta tu PDF

Pregunta tu PDF Es una aplicación web que no requiere una clave API para realizar pruebas. Después de escanear un documento, AskYourPDF sugiere preguntas de seguimiento opcionales. Al igual que PDF Pals, incluye números de página, aunque no se puede hacer clic en ellos.

Las respuestas de AskYourPDF fueron más fáciles de entender que las de PDF Pals y, a la inversa, menos completas. Y no extrajo definiciones de patentes del PDF, afirmando incorrectamente que ninguna de ellas estaba allí.

Por lo tanto, AskYourPDF en mis pruebas fue útil para descripciones generales de nivel superior, pero no detalladas. Sin embargo, un beneficio de este enfoque es probablemente que haya menos alucinaciones.

Curiosamente, las cuatro herramientas analizaron la patente de Google PDF de forma ligeramente diferente. Cada uno proporcionó explicaciones únicas. La clave es verificar la información. Todas las herramientas cometieron errores.

Fuente

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *