deepseek-harness/.bench-searxng-50.mjs

// 50 live searches directly through SearXngSearchProvider (bypassing the tool).
// Companion to .tool-searxng.mjs: that one goes through ctx.tools.execute(); this
// one calls provider.search() directly so the two surfaces can be compared.
import { SearXngSearchProvider } from '@deepseek-ai/dsh-web-search-searxng'

const BASE = process.env.SEARXNG_BASE ?? 'http://192.168.31.240:8066'

// Same 50 queries as the web_search exercise, in the same order.
const QUERIES = [
  'DeepSeek R1 reasoning model',
  'latest SpaceX starship launch news',
  'производительность видеокарт RTX 5090 обзор',
  'Python async programming best practices 2025',
  'Olympic games 2028 Los Angeles schedule',
  'how does search engine ranking algorithm work',
  'текущая погода в Москве сегодня',
  'Node.js v24 release notes',
  'best programming languages to learn 2026',
  'A.I. regulation EU AI Act summary',
  'Elon Musk Tesla news today',
  'заголовок новости главные события недели',
  'Docker compose tutorial beginners',
  'climate change global warming impact report',
  'как приготовить борщ рецепт пошагово',
  'SQL injection prevention cheat sheet OWASP',
  'самый быстрый способ выучить английский язык',
  'React 19 features new hooks',
  'gold price today per ounce forecast',
  'рецепт шарлотки с яблоками в духовке',
  'nuclear fusion breakthrough energy company',
  'как похудеть без диет советы диетолога',
  'TypeScript 5 generics tutorial',
  'sustainable fashion eco brands list',
  'история создания интернета кратко кто придумал',
  'machine learning vs deep learning difference explained',
  'лучшие фильмы 2025 года рейтинг топ',
  'home solar panels cost savings 2026',
  'как настроить VPN на Windows 11 инструкция',
  'Quantum computing stocks investment 2026',
  'how to write a resume for software engineer tips',
  'лучшие книги по программированию читать',
  'electric car battery recycling process technology',
  'что такое криптовалюта простыми словами',
  'web development full stack roadmap 2026',
  'space tourism first commercial passengers mission',
  'польза и вред кофе для здоровья исследования',
  'Rust vs Go backend performance comparison',
  'как выбрать ноутбук для работы критерии',
  'artificial intelligence in healthcare applications examples',
  'pluto dwarf planet facts discovery',
  'банановые оладьи рецепт просто и быстро',
  'GitHub copilot pricing plans comparison',
  'великие открытия российской науки список',
  'open source LLM models to run locally 2026',
  'microservices architecture patterns distributed systems',
  'как экономить электроэнергию дома советы',
  'sleep quality improvement tips science backed',
  'космос последние новости запуски ракет',
  'postgresql vs mysql performance use cases',
]

const provider = new SearXngSearchProvider({ baseURL: BASE })

let ok = 0
let errors = 0
let totalSources = 0
const out = []
for (let i = 0; i < QUERIES.length; i++) {
  const q = QUERIES[i]
  try {
    const res = await provider.search({ query: q, maxResults: 10 })
    const n = res.sources.length
    totalSources += n
    ok++
    out.push({ i: i + 1, q, ok: true, sources: n, firstUrl: res.sources[0]?.url ?? null })
  } catch (e) {
    errors++
    const code = e?.info?.code ?? null
    const msg = String(e?.message ?? e)
    out.push({ i: i + 1, q, ok: false, errorCode: code, error: msg.slice(0, 120) })
  }
}

console.log(JSON.stringify({ ok, errors, totalSources, queries: QUERIES.length, results: out }, null, 2))