auditor violinista
v0.0.5
¡Auditar modelos de lenguaje grandes es fácil!
Los modelos de lenguaje permiten a las empresas crear y lanzar aplicaciones innovadoras para mejorar la productividad y aumentar la satisfacción del cliente. Sin embargo, se sabe que los LLM pueden alucinar, generar respuestas adversas que pueden dañar a los usuarios e incluso exponer información privada en la que fueron entrenados cuando se les solicita o no. Es más importante que nunca que los equipos de aplicaciones de software y aprendizaje automático minimicen estos riesgos y debilidades antes de lanzar modelos LLM y NLP. Como resultado, es importante que incluya un proceso para auditar minuciosamente los modelos de lenguaje antes de la producción. Fiddler Auditor le permite probar modelos LLM y NLP, identificar debilidades en los modelos y mitigar posibles resultados adversos antes de implementarlos en producción.
Fiddler Auditor apoya
Un informe de ejemplo generado por Fiddler Auditor para text-davinci-003.Auditor está disponible en PyPI y lo probamos en Python 3.8 y superior. Recomendamos crear un entorno virtual de Python e instalarlo usando el siguiente comando
pip install fiddler-auditorPuede instalar desde la fuente después de clonar este repositorio usando el siguiente comando
pip install . Actualizamos continuamente esta biblioteca para admitir modelos de lenguaje a medida que evolucionan.
Para obtener instrucciones paso a paso, siga la Guía de contribuciones.
