hellodata be

HelloDATA BE: แพลตฟอร์มข้อมูลองค์กรแบบโอเพ่นซอร์ส

แพลตฟอร์มข้อมูลองค์กรแบบเปิดในพอร์ทัลเดียว

HelloDATA BE ผสานรวมความสามารถของเครื่องมือโอเพ่นซอร์สเข้ากับแพลตฟอร์มข้อมูลระดับองค์กรแบบครบวงจร ช่วยให้วิศวกรรมข้อมูลแบบ end-to-end ง่ายขึ้นโดยการผสานรวมเครื่องมือต่างๆ เช่น dbt, Airflow และ Superset ซึ่งยึดอยู่บนฐานข้อมูล Postgres ที่แข็งแกร่ง แพลตฟอร์มของเราสรุปความคล่องตัวของโอเพ่นซอร์สพร้อมกับความน่าเชื่อถือของโซลูชันระดับองค์กร ปรับปรุงเวิร์กโฟลว์ข้อมูลของคุณในพอร์ทัลเดียวที่เข้าถึงได้

วิสัยทัศน์และเป้าหมาย

แพลตฟอร์มข้อมูลที่คล่องตัวและโปร่งใสมีความสำคัญในภูมิทัศน์ดิจิทัลที่มีการพัฒนาอย่างรวดเร็ว HelloDATA BE พยายามช่วยเหลือโดยนำเสนอโซลูชันโอเพ่นซอร์สที่ปรับให้เหมาะกับความต้องการขององค์กร ภารกิจของเราคือการทำให้ข้อมูลเป็นประชาธิปไตยและจัดให้มีการจัดการข้อมูลที่ขับเคลื่อนด้วยนวัตกรรมแบบ end-to-end เรียนรู้เพิ่มเติม

เริ่มต้นอย่างรวดเร็ว

การตั้งค่าที่จำเป็น

1. การตั้งค่า Docker Desktop : สำหรับผู้ใช้ Mac ให้ปรับการตั้งค่า Docker Desktop เพื่อรองรับหลายแพลตฟอร์ม (โดยเฉพาะสำหรับผู้ใช้ arm64-chip) รายละเอียด.
2. รายการไฟล์โฮสต์ : ตรวจสอบให้แน่ใจว่า 127.0.0.1 host.docker.internal ถูกเพิ่มใน /etc/hosts สำหรับ Windows เปิดใช้งานในการตั้งค่า Docker Desktop WSL วิธีการ

คำแนะนำการเริ่มต้น

เปลี่ยนไดเร็กทอรีเป็น hello-data-deployment/docker-compose และรัน:

docker-compose up -d

การดึงรูปภาพทั้งหมดและเริ่มต้นคอนเทนเนอร์จะใช้เวลาสักครู่ เมื่อเสร็จแล้ว ให้เข้าถึงเว็บพอร์ทัลที่ localhost:8080 (ค่าเริ่มต้น: admin/admin)

บันทึก:

• คำแนะนำการเริ่มต้นโดยละเอียด การแก้ไขปัญหา และคำถามที่พบบ่อยอยู่ใน README ที่เขียนโดยนักเทียบท่า
• ข้อมูลการตั้งค่าเฉพาะสำหรับผู้ใช้ Windows

คุณสมบัติที่สำคัญ

HelloDATA BE เป็นมากกว่าแพลตฟอร์ม เป็นโซลูชันข้อมูลแบบองค์รวม:

• แพลตฟอร์มข้อมูลองค์กรแบบครบวงจรพร้อมชุดเครื่องมือโอเพ่นซอร์สที่ราบรื่น
• สถาปัตยกรรมที่เน้นโดเมนเป็นศูนย์กลางเพื่อการกำกับดูแลข้อมูลที่มีประสิทธิภาพ
• การสร้างแบบจำลองข้อมูลที่แข็งแกร่งพร้อมการติดตามเชื้อสาย
• ข้อมูลเชิงลึกแบบเรียลไทม์เกี่ยวกับการวิ่งและการจัดวงดนตรี
• การสร้างและแบ่งปันแดชบอร์ดทั่วทั้งบริษัท

สถาปัตยกรรมและส่วนประกอบ

HelloDATA BE สร้างขึ้นโดยคำนึงถึงสถาปัตยกรรมแบบโมดูลาร์และความสามารถในการขยายได้ ซึ่งรองรับโดย NATS, Keycloak และอื่นๆ อีกมากมาย เพื่อให้มั่นใจว่าการจัดการข้อมูลมีความปลอดภัย มีประสิทธิภาพ และปรับเปลี่ยนได้ สำรวจสถาปัตยกรรม

มุมมองโดเมน: โดเมนธุรกิจและข้อมูล

มุมมองที่แตกต่างกันถือเป็นส่วนสำคัญของ HelloDATA BE การเพิ่มโดเมนธุรกิจหลายโดเมนด้วยโดเมนข้อมูล n รายการทำให้พร้อมสำหรับองค์กรตั้งแต่เริ่มต้น

• โดเมนธุรกิจ : บริการหลัก รวมถึงพอร์ทัล การจัดระบบ และการตรวจสอบ
• โดเมนข้อมูล : หัวใจของการจัดเก็บข้อมูล ครอบคลุมตาราง/สคีมา โมเดลข้อมูล dbt ดาต้ามาร์ท สภาพแวดล้อม DWH และอื่นๆ

โดเมนข้อมูลหลายโดเมนอยู่ร่วมกันในแต่ละโดเมนธุรกิจ โดยแต่ละโดเมนมีพื้นที่เก็บข้อมูลเฉพาะและโมเดลข้อมูลเฉพาะทาง ดำน้ำลึก นอกจากนี้ ให้ตรวจสอบคู่มือผู้ใช้เพื่อดูภาพรวมการทำงานโดยละเอียด

เว็บไซต์เอกสาร: เอกสารอ้างอิงและเอกสารสำหรับนักพัฒนาทั้งหมดบน GitHub นั้นถือเป็นเว็บไซต์เพื่อความสะดวกสบายที่มากขึ้น

การมีส่วนร่วมใน HelloDATA BE

เข้าร่วมการเดินทางเพื่อการพัฒนาของเรา:

• แนวทางสำหรับนักพัฒนา
• HelloDATA BE สถาปัตยกรรม
  • กองข้อมูลที่ใช้แล้ว
  • ภาพรวมสถาปัตยกรรม
  • ข้อมูลเชิงลึกด้านโครงสร้างพื้นฐาน

สถานะการพัฒนา

ติดตามความคืบหน้าและแผนงานของเราในแผนงานของเรา หรือติดต่อการอภิปรายหรือประชาสัมพันธ์/ปัญหา

ผู้ร่วมให้ข้อมูล

• เอเดรียน เบอร์เกอร์ (ผู้พัฒนา)
• แอนเดรีย ฮันเซล (ผู้ทดสอบ)
• ดาริโอ บากัตโต (ผู้พัฒนา)
• Lorin Reber (เจ้าของผลิตภัณฑ์ ผู้นำด้านคุณค่า)
• มิชา ไอค์มันน์ (ผู้พัฒนา)
• Michael Disteli (ผู้จัดการผลิตภัณฑ์)
• Nicolas Schmid (ผู้พัฒนาและสถาปนิกเบื้องต้น)
• ราจิบ มิตรา (ผู้พัฒนา)
• ไซมอน สปาติ (ผู้พัฒนา)
• สลาโวมีร์ วีซโซเร็ก (ผู้พัฒนา)
• โทมัส อัมลัง (ผู้พัฒนา)

(ตามลำดับตัวอักษร)

ใบอนุญาต

HelloDATA BE ได้รับการเผยแพร่ภายใต้ใบอนุญาต BSD 3-Clause ลิขสิทธิ์ (c) 2024 Kanton Bern

ได้รับการติดต่อ

เราขอแนะนำให้คุณเริ่มการสนทนาที่นี่บน GitHub หรือสร้างปัญหา หรือคุณสามารถติดต่อเราได้ที่ [email protected]