Adding Private Data to LLMs

Adding Private Data to LLMs

기타 소스코드

1.0.0

다운로드

RAG - LLM에 개인 데이터 추가

LLM은 사실적인 이미지, 코드 및 대화를 만드는 능력으로 세상을 놀라게 했습니다. 의심할 여지 없이 ChatGPT는 전 세계를 강타했습니다. 수백만 명이 그것을 사용하고 있습니다. 그러나 범용 지식에는 훌륭하지만 훈련을 받은 정보, 즉 2021년 이전에 일반적으로 사용 가능한 인터넷 데이터만 알고 있습니다. 개인 데이터에 대한 인식이 부족하고 최근 데이터 소스에 대한 정보가 없습니다. 따라서 이러한 점을 개선하기 위해 검색 단계에서 검색한 정보를 제공할 수 있습니다. 이를 통해 모델을 더욱 사실적으로 만들고 이러한 대규모 모델을 재교육할 필요 없이 모델에 최신 정보를 제공할 수 있는 더 나은 기능을 제공합니다. 이것이 바로 검색 증강 LLM 또는 검색 증강 생성(RAG) 시스템입니다. 실제로 이 저장소는 RAG 시스템 생성을 정확하게 설명하고 관련된 최적화 단계를 설명합니다.

조각

기술 스택

랭체인
라마인덱스
Azure OpenAI
그라디오

설치

Github 저장소 복제

 자식 클론 https://github.com/zekaouinoureddine/Adding-Private-Data-to-LLMs.git

요구 사항 CD를 프로젝트 디렉터리로 이동하고 필요한 종속성과 함께 Python 3이 설치되어 있는지 확인하세요.
```
 cd LLM에 개인 데이터 추가
pip 설치 -r 요구사항.txt
```
그라디오 앱을 실행하세요
```
 파이썬 rag.py
```

앱을 테스트하려면 컴퓨터에서 http://127.0.0.1:7860을 방문하세요. 다음과 같은 내용이 표시됩니다.

유용한 링크

블로그	판형	언어
자신의 데이터에 물어보세요	하이베루스 블로그	ES
자신의 데이터에 물어보세요	중간	KO
귀하의 웹 페이지에 물어보세요	하이베루스 블로그	ES
귀하의 웹 페이지에 물어보세요	중간	KO