Explore RAG

Teknik Pengambilan RAG

Proyek ini mendemonstrasikan berbagai teknik pengambilan dokumen menggunakan Python. Teknik yang diterapkan antara lain HyDe, Basic, Reciprocal Rank Fusion (RRF), Fusion Retrieval dan Sub Query Decomposition (SQD). Proyek ini menggunakan Streamlit untuk antarmuka pengguna dan berbagai perpustakaan untuk pemrosesan dan pengambilan dokumen.

Daftar isi

• Instalasi
• Penggunaan
• Teknik Pengambilan
  • HyDe
  • Dasar
  • RRF
  • Fusi
  • Dekomposisi Sub Kueri
• Berkontribusi
• Lisensi

Instalasi

1. Kloning repositori:

   git clone https://github.com/yourusername/yourrepository.git
   cd yourrepository

2. Instal dependensi yang diperlukan:

   pip install -r requirements.txt

Penggunaan

1. Jalankan aplikasi Streamlit:

   streamlit run app.py

2. Unggah file PDF menggunakan sidebar.

3. Pilih teknik pengambilan dari sidebar.

4. Masukkan kueri di kotak input teks dan lihat dokumen yang diambil.

Teknik Pengambilan

HyDe

Pengambilan HyDe (Dokumen Hipotetis) menghasilkan dokumen hipotetis berdasarkan kueri dan mengambil dokumen serupa.

Dasar

Pengambilan dasar menggunakan pencarian kesamaan sederhana untuk mengambil dokumen berdasarkan kueri.

RRF

Reciprocal Rank Fusion (RRF) menggabungkan hasil beberapa algoritma pengambilan untuk meningkatkan kinerja pengambilan secara keseluruhan.

Fusi

Pengambilan fusi menggabungkan pencarian vektor dan hasil pencarian BM25 menggunakan jumlah tertimbang untuk mengambil dokumen yang paling relevan.

Dekomposisi Sub Kueri

Dekomposisi Sub Kueri (SQD) adalah teknik yang menguraikan kueri menjadi sub-kueri dan mengambil dokumen berdasarkan sub-kueri tersebut.

Berkontribusi

Kontribusi dipersilakan! Silakan buka masalah atau kirimkan permintaan penarikan untuk perbaikan atau perbaikan bug apa pun.

Lisensi

Proyek ini dilisensikan di bawah Lisensi MIT. Lihat file LICENSE untuk lebih jelasnya.