OpenRouter ra mắt công cụ đánh giá mô hình AI Ori Eval

OpenRouter đã công bố công cụ đánh giá "Ori Eval" để so sánh hiệu suất, tốc độ và chi phí của các mô hình AI. Công cụ này giúp các nhà phát triển tìm kiếm mô hình phù hợp mà không cần phải thử nghiệm nhiều mô hình khác nhau. Ori Eval thực hiện các prompt thực tế và kiểm tra chất lượng câu trả lời cũng như các cuộc gọi công cụ, từ đó đưa ra cơ sở lựa chọn mô hình. Công cụ này đánh giá mô hình nào hoạt động tốt hơn trong các dịch vụ cụ thể, đồng thời xem xét dữ liệu và môi trường thực thi của các sản phẩm riêng lẻ mà các benchmark thông thường khó phản ánh. Trong quá trình đánh giá, môi trường thực thi và cấu hình mô hình được cố định để ngăn chặn sự sai lệch kết quả. Nội dung đánh giá được lưu dưới định dạng '.eval.ts' và được thực hiện theo cách "bun test". Nó cũng cung cấp chức năng chuyển đổi vấn đề của đại lý hỗ trợ khách hàng thành bài kiểm tra, có thể được sử dụng cho kiểm tra hồi quy thông qua kết nối với GitHub Actions. Lần ra mắt này cho thấy lĩnh vực kinh doanh của OpenRouter đang mở rộng từ trung gian mô hình sang quản lý phát triển và vận hành. OpenRouter cũng hỗ trợ stablecoin USD Coin (USDC) bên cạnh thẻ tín dụng và Alipay.

Nội dung này chỉ được đưa ra nhằm mục đích cung cấp thông tin chung, không phải là lời khuyên về tài chính, đầu tư, pháp lý hoặc thuế. Mọi sự kiện, phần thưởng, ưu đãi trực tuyến hoặc thông tin liên quan được đề cập trong nội dung này không được xem là khuyến nghị, chào mời hoặc lời mời mua, bán, giao dịch hoặc thực hiện bất kỳ hoạt động nào khác liên quan đến tài sản crypto. Tài sản crypto có độ biến động cao và có thể dẫn đến thua lỗ.Tính khả dụng của các dịch vụ, sản phẩm và sự kiện liên quan của WEEX có thể khác nhau tùy theo khu vực. Bạn có trách nhiệm bảo đảm việc tham gia của mình tuân thủ các luật và quy định hiện hành tại địa phương.