Loading…
إطار مفتوح المصدر لتقييم وكلاء الذكاء الاصطناعي وروبوتات المحادثة بمقيّمين جاهزين وإشارات مكافأة.
OpenJudge إطار عمل بلغة Python لقياس جودة تطبيقات الذكاء الاصطناعي. يقدّم مقيّمين (graders) جاهزين، ويستطيع توليد معايير تقييم خاصة بالسيناريو، وتحويل نتائج التقييم إلى إشارات مكافأة لضبط النماذج. ويضمّ المستودع نحو عشرين مهارة بصيغة SKILL.md لأعمال التقييم مثل مراجعة الأبحاث وفحص المراجع والمقارنة على نمط الحلبة وتصميم التقييم. يناسب الفرق التي تبني الوكلاء وتحسّنهم.
تنبيه: التقييم المعتمد على النماذج اللغوية يستهلك رصيد API وينبغي أن يراجع إنسان عيّنات من أحكامه.
Paste this prompt into Claude Code: it reads the README and installs it with you, showing each command before running it.
Help me install “OpenJudge” (https://github.com/agentscope-ai/OpenJudge) on my machine and use it with Claude Code. - Read the README and follow its installation method. The README documents this command: `pip install py-openjudge`. - Check the requirements first (versions, accounts, API keys). - Explain each command before running it; for API keys, use environment variables and never ask me to paste them here. - At the end, show me how to use it with a first example.
Once installed, try for example:
Evaluate my agent's answers on this test set with the built-in graders.
Generate a rubric for grading customer-support replies.
1.0.0