Amazon S3 Vectors מחזיר עד 10,000 תוצאות חיפוש דמיון בכל שאילתה

AWS העלתה את תקרת התוצאות לכל שאילתה ב-Amazon S3 Vectors ל-10,000 — קפיצה פי 100 מהמגבלה הקודמת. השינוי מכוון ל-pipelines של retrieval רב-שלבי — נפוצים יותר ויותר במערכות RAG ו-agentic — שבהם חיפוש וקטורי ראשוני חייב להחזיר מאגר מועמדים גדול, שאותו ה-rerankers וה-aggregators שבהמשך הצינור מזקקים. תקרת top-k נמוכה כופה pagination מסורבל או מספר round-trips; המגבלה הגבוהה מאפשרת ל-pipeline למשוך סט מועמדים עשיר בקריאה אחת.

השיפור הוא חלק מאותה דחיפה תשתיתית ב-Summit NYC שכללה גם S3 annotations, את InvokeGuardrailChecks של Bedrock Guardrails, ו-container caching ב-SageMaker — כולם מכוונים להפוך את S3 ו-Bedrock לשכבת הנתונים וה-retrieval שבברירת המחדל עבור agents. על ידי הטמעת חיפוש וקטורי ישירות ב-S3 במקום ב-database וקטורי נפרד, AWS נשענת על כוח המשיכה של האחסון שלה כדי לשמור את עומסי ה-retrieval בבית.

מבחינה תחרותית, המהלך מפעיל לחץ על databases וקטוריים ייעודיים כמו Pinecone, Weaviate ו-Milvus, שחלק מהטיעון שלהם נשען על סמנטיקת שאילתות עשירה יותר ותקרות תוצאות גבוהות יותר. ה-trade-off של S3 Vectors נשאר latency ועומק פיצ'רים מול מנועים מתמחים; תקרת תוצאות פי 100 מצמצמת פער אחד אבל לא נותנת מענה לכל מה שמציעים databases וקטוריים ייעודיים. עם זאת, לצוותים שכבר על AWS, הנוחות והעלות של מיקום הווקטורים יחד עם אחסון האובייקטים משכנעים מאוד. כדאי לעקוב אחרי ה-latency בשכבת 10,000 התוצאות ואיך תפוקת ה-reranking מחזיקה מעמד.