חיפוש וקטורי ואינדקסי DiskANN ב-Azure SQL Database זמינים לכולם

Microsoft העבירה את חיפוש הווקטורים ב-Azure SQL Database לזמינות כללית (GA). הפיצ'רים כוללים:

- טיפוס נתונים וקטורי מובנה;

- פונקציות VECTOR_DISTANCE לחישוב דמיון מדויק;

- חיפוש שכנים קרובים משוער (ANN) דרך תחביר חדש של CREATE VECTOR INDEX ו-VECTOR_SEARCH, על גבי אינדקסים של DiskANN.

בשורה התחתונה, צוותים יכולים לבנות RAG וחיפוש סמנטי ב-T-SQL רגיל, כשה-embeddings יושבים ליד הנתונים הרלציוניים שהם מתארים.

DiskANN הוא אלגוריתם ANN מבוסס גרף שפותח במקור ב-Microsoft Research. הוא נועד לשמור את רוב האינדקס על SSD ולא ב-RAM, וכך מאפשר לאינדקסים וקטוריים לגדול מעבר למגבלות הזיכרון עם recall ו-latency טובים. בתוך SQL Database המפתחים מקבלים לנתונים הווקטוריים עקביות טרנזקציונית, את מודל האבטחה הקיים, הרשאות ברמת שורה וגיבויים. כך נחסכים מהם צינורות הסנכרון שנדרשים כדי להחזיק vector store חיצוני מעודכן מול מקור האמת. הסקירה של WindowsForum על ה-GA מפרטת גם מגבלות production שכדאי לבדוק לפני מיגרציה.

מבחינה תחרותית, זה עוד שלב בבליעת חיפוש הווקטורים לתוך מסדי נתונים כלליים:

- ל-Postgres יש pgvector.

- Oracle, MongoDB ו-Elastic כולן מציעות אינדקסים וקטוריים.

- AWS מציעה תמיכה וקטורית ב-Aurora וב-OpenSearch.

הלחץ נופל על ספקיות מסדי נתונים וקטוריים ייעודיים כמו Pinecone ו-Weaviate, שהטיעון שלהן נשען יותר ויותר על קנה מידה ועל פיצ'רים מתמחים.

התגובות בקהילה חיוביות, ומפתחים משבחים את האפשרות לבנות RAG ב-T-SQL רגיל. סימני השאלה הם ביצועים בהיקפים גדולים מאוד, זמני בניית אינדקס והשוואת המגבלות למנועים ייעודיים. אבל עבור בסיס ההתקנות העצום של ארגוני SQL Server, ה-GA מסיר סיבה מרכזית להוסיף עוד מערכת ל-stack.