OpenRouter представил инструмент оценки AI моделей Ori Eval

OpenRouter представил инструмент оценки производительности, скорости и стоимости AI моделей под названием 'Ori Eval'. Этот инструмент помогает разработчикам находить подходящие модели без необходимости тестирования нескольких вариантов. Ori Eval выполняет реальные запросы и проверяет качество вызовов инструментов и ответов, предоставляя обоснование выбора модели. Этот инструмент оценивает, какая модель работает лучше в конкретном сервисе, учитывая данные отдельных продуктов и рабочую среду, которые трудно отразить в общих бенчмарках. В процессе оценки фиксируются рабочая среда и настройки модели, чтобы избежать искажения результатов. Содержимое оценки сохраняется в формате '.eval.ts' и выполняется с помощью метода 'bun test'. Также предоставляется функция преобразования проблем клиентов в тесты, что позволяет использовать инструмент для регрессионного тестирования в связке с GitHub Actions. Этот релиз демонстрирует, что бизнес-область OpenRouter расширяется от посредничества моделей к управлению разработкой и эксплуатацией. OpenRouter поддерживает не только кредитные карты и Alipay, но и стейблкоин USD Coin (USDC).

Этот контент предоставляется исключительно в общих информационных целях и не является финансовым, инвестиционным, юридическим или налоговым советом. Любые мероприятия, вознаграждения, онлайн-акции или связанная с ними информация, упомянутые в настоящем документе, не должны рассматриваться как рекомендация, приглашение к покупке, продаже, торговле или иной сделке с какими-либо криптоактивами. Криптоактивы очень волатильны и могут привести к убыткам. Доступность услуг, продуктов WEEX и связанных с ними событий может варьироваться в зависимости от региона. Вы несете ответственность за обеспечение того, чтобы ваше участие соответствовало применимым местным законам и нормативным актам.