MetaSpore

中文介绍

Metaspore: แพลตฟอร์มการพัฒนาการเรียนรู้ของเครื่องแบบครบวงจร

Metaspore เป็นแพลตฟอร์มการพัฒนาการเรียนรู้แบบครบวงจรแบบครบวงจรซึ่งให้กรอบการทำงานเต็มรูปแบบและอินเทอร์เฟซการพัฒนาสำหรับการประมวลผลข้อมูลล่วงหน้าการฝึกอบรมแบบจำลองการทดลองแบบออฟไลน์การคาดการณ์ออนไลน์

Metaspore ได้รับการพัฒนาและเปิดตัวโดยทีม Dmetasoul คุณสามารถเข้าร่วมพื้นที่การสนทนาของผู้ใช้ Slack ของเรา

คุณสมบัติหลัก

Metaspore มีคุณสมบัติดังต่อไปนี้:

1. การพัฒนาแบบครบวงจรแบบครบวงจรตั้งแต่การฝึกอบรมแบบจำลองออฟไลน์ไปจนถึงการทำนายออนไลน์และการทดลองที่มีประสบการณ์ด้วยประสบการณ์การพัฒนาแบบครบวงจรตลอดกระบวนการทั้งหมด
2. กรอบการฝึกอบรมการเรียนรู้อย่างลึกซึ้งเข้ากันได้กับนิเวศวิทยา Pytorch สนับสนุนการเรียนรู้คุณสมบัติเบาบางขนาดใหญ่กระจาย;
3. เฟรมเวิร์กการฝึกอบรมเชื่อมต่อกับ Pyspark เพื่ออ่านข้อมูลการฝึกอบรมจาก Data Lake และ Data Warehouse อย่างราบรื่น
4. บริการทำนายออนไลน์ประสิทธิภาพสูงสนับสนุนการอนุมานอย่างรวดเร็วสำหรับเครือข่ายประสาท, แผนผังการตัดสินใจ, Spark ML, Sklearn และรุ่นอื่น ๆ รองรับการเร่งการอนุมานฮาร์ดแวร์ที่ต่างกัน
5. ในเฟรมเวิร์กการแยกฟีเจอร์ออฟไลน์แบบออฟไลน์การสร้างตรรกะการอ่านคุณลักษณะออนไลน์จะถูกสร้างขึ้นโดยอัตโนมัติและตรรกะการแยกฟีเจอร์นั้นเป็นแบบ Unified Cross Offline และออนไลน์
6. เฟรมเวิร์กแอปพลิเคชันอัลกอริทึมออนไลน์การทำนายแบบจำลองการทดลองและการแยกการจราจรการโหลดร้อนแบบไดนามิกของพารามิเตอร์และฟังก์ชั่นการดีบักที่หลากหลาย
7. ตัวอย่างอัลกอริทึมอุตสาหกรรมที่หลากหลายและโซลูชั่นแบบ end-to-end

เอกสารและตัวอย่าง

• การฝึกอบรมออฟไลน์เริ่มต้นการสอน

• แอปพลิเคชันอัลกอริทึมออนไลน์ (การใช้งาน Java)

  • การให้บริการรุ่นออนไลน์
  • การแยกคุณสมบัติออนไลน์
  • ท่อทดลองออนไลน์

• การสาธิตระบบผู้แนะนำแบบ end-to-end Movielens รวมถึง

  • รุ่นออฟไลน์
  • แอปพลิเคชันอัลกอริทึมออนไลน์ (การใช้งาน Java)

ดาวน์โหลดแพ็คเกจการติดตั้ง

แพ็คเกจฝึกอบรม

เราให้บริการแพ็คเกจล้อฝึกซ้อมแบบออฟไลน์ที่คอมไพล์อยู่บน PYPI ติดตั้งผ่าน PIP:

pip install metaspore

รุ่นงูหลามขั้นต่ำที่ต้องการคือ 3.8

หลังจากการติดตั้งให้ติดตั้ง pytorch และ pyspark (ไม่รวมอยู่ใน depenencies ของ Metaspore Wheel เพื่อให้คุณสามารถเลือกรุ่น Pyspark และ Pytorch ได้ตามต้องการ):

pip install pyspark
pip install torch==1.11.0+cpu -f https://download.pytorch.org/whl/cpu/torch_stable.html

แพ็คเกจเสิร์ฟ

เราให้ภาพนักเทียบท่า prebuilt สำหรับบริการบริการ Metaspore:

CPU ภาพเท่านั้น

 docker pull dmetasoul/metaspore-serving-release:cpu-v1.0.1

ภาพ GPU

 docker pull dmetasoul/metaspore-serving-release:gpu-v1.0.1

ดูบริการ Run Serving Service ใน Docker สำหรับรายละเอียด

รวบรวมรหัส

• การรวบรวมกรอบการฝึกอบรมออฟไลน์

แนวทางชุมชน

แนวทางชุมชน

ข้อเสนอแนะ

สำหรับคำถามเกี่ยวกับการใช้งานคุณสามารถโพสต์คำถามในการสนทนา GitHub หรือผ่านปัญหา GitHub

ส่งจดหมาย

ส่งอีเมลถึงเราที่ [email protected]

หย่อน

เข้าร่วมการสนทนาผู้ใช้ของเราช่อง Slack: Metaspore การสนทนาผู้ใช้

โครงการโอเพ่นซอร์ส

Metaspore เป็นโครงการโอเพ่นซอร์สที่เปิดตัวภายใต้ Apache License 2.0 ยินดีต้อนรับการมีส่วนร่วมข้อเสนอแนะและการบริจาครหัส