Yeni kıyaslama, AI aracıları için arama API'lerini kalite, maliyet ve hıza göre sıralıyor

Yapay Analiz, arama API sağlayıcılarının kalite, maliyet ve hız açısından AI aracıları için ne kadar iyi çalıştığını ölçen bir kıyaslama olan "Arama Dizini"ni yayınladı. İlk kadroda Parallel, Exa, Firecrawl, You.com, Tavily, Keenable ve Brave yer alıyor. Her biri standartlaştırılmış bir aracı kurulumunda aynı modelle (GPT-5.6 Luna) test edilir. Yalnızca arama sağlayıcısı değişir. Aracı, Yapay Analiz'in açık kaynaklı bir çerçevesi olan Stirrup üzerinde çalışır ve web sayfalarını aramak ve açmak için görev başına 25 çalıştırma alır. Endeks eşit ağırlıklı üç kriteri birleştiriyor. DeepSearchQA'nın her biri birden fazla arama sorgusu gerektiren 900 araştırma sorusu vardır. Bir BrowseComp alt kümesi, çok adımlı tarama gerektiren, bulunması zor 200 gerçeği test eder. AA-Omniscience, altı bilgi alanında 600 soruyu kapsar. Modelin kendi başına yanıt verdiği aletsiz bir temel, karşılaştırma noktası sağlar. Reklam Daha iyi arama kalitesi aynı zamanda toplam maliyetleri de düşürür. Model, başlangıçta iyi sonuçlar aldığında daha az token kullanıyor. Paralel Arama (gelişmiş) ile token kullanımı, Temel sürüme kıyasla yüzde 40'ın üzerinde düşer. Görev başına arama maliyetleri artıyor ancak toplam maliyet düşüyor (0,084 ABD Doları'na karşı 0,11 ABD Doları). Reklam Sorgu başına ham hız, her zaman genel olarak daha hızlı sonuçlar anlamına gelmez. Paralel Arama (turbo), sorgu başına en kısa yanıt süresini belirler (Temel için 0,51 saniyeye karşı 1,03 saniye), ancak daha düşük kalitesi (67'ye karşı 73) aracıyı daha fazla geçiş yapmaya zorlar.

Görev başına toplam süre yaklaşık olarak aynı olur. Yapay Analiz, Paralel, Firecrawl ve Paralel'in (turbo) en iyi maliyet ve performans karışımına ulaştığını söylüyor. Diğer sağlayıcılar kıyaslamaya katılmak için başvurabilirler. Metodolojinin tamamı halka açıktır. Reklam