Construyendo Soluciones de IA Agente Fiables con Amazon Bedrock: Aprende de la Experiencia de Pushpay en la Evaluación de GenAI

0
1
Build reliable Agentic AI solution with Amazon Bedrock: Learn from Pushpay’s journey on GenAI evaluation

Pushpay ha lanzado una innovadora función de búsqueda impulsada por inteligencia artificial (IA) diseñada específicamente para satisfacer las necesidades de las organizaciones religiosas y de fe. Esta nueva herramienta utiliza procesamiento de lenguaje natural para permitir que el personal de los ministerios formulen preguntas en inglés simple y obtengan información en tiempo real sobre su comunidad. Esta solución aborda un desafío fundamental al que se enfrentan los líderes ministeriales: la necesidad de acceso rápido a información sobre la comunidad sin la necesidad de tener conocimientos técnicos.

Con esta nueva función, los líderes de las iglesias pueden simplemente introducir consultas como “muéstrame las personas que son miembros de un grupo, pero que no han contribuido este año” o “muéstrame las personas que no están comprometidas con mi iglesia”, y utilizar los resultados para tomar decisiones informadas que apoyen a los individuos de su comunidad. Según los informes de los primeros usuarios, esta herramienta ha reducido el tiempo para obtener información de minutos a segundos, lo que permite a los líderes de ministerios actuar de manera más efectiva.

La implementación del sistema se realizó utilizando la infraestructura de Amazon Web Services (AWS) y se han implementado rigurosas medidas de aseguramiento de calidad para garantizar la eficacia de la nueva herramienta. El proceso incluye un marco de evaluación personalizado que permite la mejora continua a través de un bucle de retroalimentación rápida. Así, es posible realizar ajustes constantes basados en la interacción del usuario con la herramienta.

El sistema de búsqueda está compuesto por varias capas clave, comenzando con la interfaz de usuario, donde los usuarios de Pushpay envían consultas en lenguaje natural. En el núcleo del sistema se encuentra el agente de búsqueda de IA, que genera respuestas utilizando modelos de lenguaje avanzados. Además, se ha establecido un sistema de evaluación que captura e instrumenta las interacciones del usuario, permitiendo a los equipos de producto y ingeniería analizar los resultados y realizar mejoras iterativas en el agente de búsqueda.

Pushpay tomó en cuenta diversas variables para optimizar la respuesta de la herramienta. Se han categorizado las consultas en dominios específicos, lo que ha facilitado decisiones estratégicas de implementación y mejora, dirigiendo esfuerzos a las áreas que necesitan más atención. Esta diferenciación también permite a los líderes de los ministerios acceder a información más clave y relevante según las necesidades individuales de sus comunidades.

La introducción de esta nueva herramienta no solo mejora la experiencia del usuario al democratizar el acceso a información útil, sino que también ha acelerado significativamente la velocidad de desarrollo del producto. A medida que se han ajustado y optimizado los procesos, la precisión del sistema ha aumentado de un 60-70% a más del 95%, lo que proporciona la confianza necesaria para su implementación en entornos reales.

Así, la transformación de Pushpay en la utilización de capacidades de IA está brindando nuevas oportunidades para las organizaciones religiosas, permitiéndoles conectarse de manera más efectiva con sus comunidades y fomentar la generosidad y el compromiso entre sus miembros.
vía: AWS machine learning blog