schema2dwh

️ Catatan Penting!

schema2dwh didukung oleh AI - Gemini Google - Pastikan untuk memeriksa semua keluaran kode sebelum mendaftarkannya ke produksi. Perlu diketahui juga bahwa pemrosesan melalui skrip ini akan memanfaatkan API Gemini tempat data diproses oleh Google.

skema2dwh [Skema DB Bertenaga AI ke Skrip Pembuatan Skema DWH]

schema2dwh adalah kerangka kerja sumber terbuka yang dirancang untuk menyederhanakan dan secara otomatis menghasilkan model data berdasarkan database Anda menggunakan skema informasinya, memanfaatkan AI, dan beberapa pertanyaan tentang masukan Anda, ini akan dengan cepat menghasilkan file SQL DDL, siap untuk membuat kerangka di belakang gudang data Anda yang baru dibangun.

Fitur

• Kumpulkan masukan yang diperlukan dari pengguna secara interaktif
• Gunakan AI Generatif Google untuk menghasilkan skema STAR/SNOWFLAKE
• Mendukung berbagai perangkat lunak database (MySQL, SQL Server, PostgreSQL, dll.)
• Menghasilkan pernyataan SQL DDL yang kompatibel dengan perangkat lunak database yang ditentukan
• menambahkan komentar ke semua kolom untuk referensi ke pengguna database Anda
• Menyimpan skema yang dihasilkan ke file keluaran tertentu

Pratinjau:

Silakan lihat di bawah untuk contoh cara kerjanya.

Input (Menjalankan skrip menggunakan my_schema.csv :

Keluaran DDL ( output_schema.sql :

Prasyarat

• Python 3.x
• Paket Google Generative AI Python ( google-generativeai )
• Kunci API AI Generatif Google - https://aistudio.google.com/app/apikey

Instalasi

1. Kloning repositori:

   git clone https://github.com/cqllum/schema2dwh.git
   cd schema2dwh

2. Instal paket yang diperlukan:

   pip install google-generativeai

3. Siapkan kunci API AI Generatif Google Anda: Ganti placeholder your-api-key di skrip dengan kunci API AI Generatif Google Anda yang sebenarnya. Hasilkan kunci di sini: https://aistudio.google.com/app/apikey

4. Ganti contoh file skema masukan (my_schema.csv): Harap dicatat, agar ini seakurat mungkin, Anda perlu mengambil skema informasi dari database Anda. Dalam kebanyakan kasus, ini sesederhana SELECT * FROM information_schema.columns - Jika tidak, kunjungi dokumentasi perangkat lunak database Anda.

Penggunaan

1. Jalankan skrip:

   python schema2dwh.py

2. Ikuti petunjuknya: Skrip akan meminta Anda untuk informasi berikut:

   • Perangkat lunak basis data (misalnya MySQL, SQL Server, PostgreSQL)
   • Nama database/skema
   • Industri yang terkait dengan database Anda (misalnya, e-niaga, konstruksi, asuransi)
   • Konvensi penamaan untuk tabel/kolom (misal, Snake_case, PascalCase, camelCase)
   • Jalur file ke skema informasi dalam format CSV
   • Poin data penting untuk pelaporan

3. Keluaran: Skrip akan menghasilkan pernyataan DDL SQL dan menyimpannya ke output_schema.sql . Jika skema tidak dapat dibuat, Anda akan diminta untuk memberikan skema informasi yang tepat.

Struktur Naskah

• configure_genai(api_key) : Mengonfigurasi model AI Generatif dengan kunci API yang disediakan.
• create_model() : Membuat dan mengonfigurasi model AI Generatif dengan pengaturan yang ditentukan.
• start_chat_session(model) : Memulai sesi obrolan dengan model menggunakan instruksi yang telah ditentukan sebelumnya.
• gather_user_input() : Mengumpulkan masukan yang diperlukan dari pengguna secara interaktif.
• format_response(db_software, db_name, industry, case_type, input_schema, additional_value) : Memformat input pengguna menjadi respons untuk sesi obrolan.
• save_schema_to_file(output_file, schema_output) : Menyimpan output skema yang dihasilkan ke file yang ditentukan.
• main() : Fungsi utama yang menggerakkan skrip.