bens bites ai search

ค้นหาลิงก์ Ben's Bites

ค้นหาลิงก์ที่เกี่ยวข้องกับ AI ทั้งหมดในจดหมายข่าว Ben's Bites โดยใช้การค้นหาความหมายที่ขับเคลื่อนโดย AI

• บทนำ
• มันทำงานอย่างไร
  • การค้นหาความหมาย
• สิ่งที่ต้องทำ
• ใบอนุญาต

บทนำ

เป้าหมายของแอพนี้คือเพื่อให้การค้นหาที่ได้รับการดูแลเป็นอย่างดีเพื่อการติดตามข่าวสารล่าสุดเกี่ยวกับทรัพยากรและข่าวสาร AI ล่าสุด

ผลการค้นหาทั้งหมดดึงมาจากจดหมายข่าว Bites AI ของ Ben ซึ่งใช้เป็นแหล่งข้อมูลที่ได้รับการดูแลจัดการอย่างดี

มันทำงานอย่างไร

งาน cron จะถูกรันทุกๆ 24 ชั่วโมงเพื่ออัพเดตฐานข้อมูล

ขั้นตอนที่เกี่ยวข้องได้แก่:

1. กำลังรวบรวมข้อมูลจดหมายข่าว Beehiiv แหล่งที่มา
2. การแปลงแต่ละโพสต์เป็นมาร์กดาวน์
3. การแยกและแก้ไขลิงก์เฉพาะ
4. กำลังดึงข้อมูลเมตา opengraph สำหรับแต่ละลิงก์
5. การดึงข้อมูลเมตาเฉพาะของผู้ให้บริการสำหรับบางลิงก์ (เช่นข้อความทวีต)
6. การสร้างการฝังเวกเตอร์สำหรับแต่ละลิงก์โดยใช้ OpenAI
7. การเพิ่มลิงก์ทั้งหมดลงในฐานข้อมูลเวกเตอร์ Pinecone

เราใช้ IFramely เพื่อแยกข้อมูลเมตา opengraph สำหรับแต่ละลิงก์ และเรายังใช้ลิงก์ทวีตกรณีพิเศษเพื่อแยกข้อความทวีตด้วย

เมื่อเรามีลิงก์ทั้งหมดภายในเครื่องแล้ว เราจะเพิ่มลิงก์เหล่านั้นลงในฐานข้อมูลเวกเตอร์ Pinecone สำหรับการค้นหาเชิงความหมาย

การค้นหาความหมาย

การค้นหาความหมายขับเคลื่อนโดยโมเดลการฝัง `text-embedding-ada-002` ของ OpenAI และฐานข้อมูลเวกเตอร์ที่โฮสต์ของ Pinecone

สิ่งที่ต้องทำ

• ค้นหา UX ได้ดีขึ้น ดังนั้นปุ่มย้อนกลับจึงใช้งานได้
• แสดงจำนวนโพสต์ / ลิงก์ในหน้าแรกเพื่อให้ชัดเจนว่าอัปเดตครั้งล่าสุดเมื่อใด
• จัดเรียงตามความใหม่อย่างชัดเจนแทนที่จะแกล้งทำ
• ตั้งค่า cron เพื่ออัพเดต DB ทุกวัน
• ทดสอบบนซาฟารี/ไฟร์ฟอกซ์
• แสดงจดหมายข่าวที่โพสต์ปรากฏครั้งแรก
• สำรวจการค้นหาแบบไฮบริด
• เลื่อนได้ไม่สิ้นสุดเพื่อให้คุณสามารถเลื่อนผลลัพธ์ต่อไปได้

ใบอนุญาต

MIT © ทราวิส ฟิชเชอร์

ข้อมูลลิงก์ทั้งหมดดึงมาจากจดหมายข่าว Bites AI ของ Ben และได้รับอนุญาตภายใต้ CC BY-NC-ND 4.0

หากคุณพบว่าโครงการนี้น่าสนใจ โปรดพิจารณาสนับสนุนฉันหรือติดตามฉันบน Twitter