Arize Phoenix

ШІ та МН

Налагоджуйте та оцінюйте ШІ-застосунки через Neotask на OpenClaw

Що ви можете робити

Neotask підключає Arize Phoenix до вашого робочого процесу розробки ШІ, надаючи спостережуваність і налагодження для конвеєрів LLM, RAG-систем та агентів.

Спостережуваність за трасами

Отримуйте, фільтруйте та аналізуйте траси виконання для ваших ШІ-додатків. Знаходьте повільні вузли, помилки та проблемні виклики моделей.

Оцінка та тестування

Запускайте оцінки якості виводів моделі. Порівнюйте підказки, версії моделей та конфігурації RAG за кількісними метриками.

Аналіз наборів даних

Керуйте наборами тестових даних і прикладами. Завантажуйте нові приклади, версіонуйте набори даних та відстежуйте ефективність у часі.

Аналітика проекту

Отримуйте аналітику використання та ефективності за проектами. Виявляйте регресії та відстежуйте тенденції у якості відповідей.

Налагодження в реальному часі

Перевіряйте останні траси для конкретних проблем: галюцинації, неправильні посилання RAG, збої з використанням інструментів.

Кожна дія виконується автономно або потребує вашого схвалення — ви вирішуєте.

Спробуйте запитати

  • "Покажи мені останні 20 трасів з помилками для нашого виробничого агента"
  • "Запусти оцінку вірності для моїх останніх 100 відповідей RAG"
  • "Порівняй ефективність між версією 1 і версією 2 моєї підказки"
  • "Які траси мали найвищу затримку минулого тижня?"
  • "Завантаж ці нові приклади до мого тестового набору даних"

    • Професійні поради

  • Інтегруйте Phoenix у ваш CI/CD конвеєр — агент запускає оцінки при кожному розгортанні та сигналізує про регресії
  • Комбінуйте з інструментами розробки для повного циклу: розробка коду, розгортання, моніторинг LLM в Phoenix
  • Використовуйте мультиагентні команди: один агент відстежує виробничі траси, інший запускає оцінки на нових даних

    • Works Well With