# ارزیابی چت‌بات فارسی (ParsBench)

نوشتن آزمون برای چت‌بات و عامل هوش مصنوعی فارسی و سنجش مدل‌ها روی بنچمارک‌های فارسی با کتابخانه ParsBench

- نوع: مهارت
- دسته: توسعه نرم‌افزار
- منبع: رسمی
- سازنده: ParsBench (https://github.com/ParsBench)
- مجوز: Apache-2.0
- آخرین بررسی: 2026-10-16
- صفحه: https://mcpfarsi.ir/skills/parsbench/
- مخزن: https://github.com/ParsBench/ParsBench
- وب‌سایت سرویس: https://parsbench.github.io/ParsBench/

## دریافت مهارت

- نصب: `npx skills add ParsBench/ParsBench`

## نمونه سؤال‌ها

- برای چت‌بات فروش بلیط من آزمون بنویس که قیمت به تومان و تاریخ شمسی را درست بررسی کند.
- این آزمون‌های فارسی را به CI پروژه اضافه کن.
- چند مدل را روی Persian MMLU و ParsiNLU مقایسه کن.

## توضیحات

این مهارت (Skill) به دستیار برنامه‌نویسی شما یاد می‌دهد با کتابخانه پایتون ParsBench برای چت‌بات یا عامل هوش مصنوعی فارسی‌تان آزمون بنویسد. مهارت را خود پروژه ParsBench در همان مخزن کتابخانه منتشر کرده است.

مشکل اصلی که حل می‌کند: آزمون‌هایی که برای متن انگلیسی ساخته شده‌اند روی فارسی بی‌صدا شکست می‌خورند. ParsBench هنگام مقایسه، ارقام فارسی و انگلیسی، نیم‌فاصله، مبلغ به ریال و تومان، و تاریخ شمسی و میلادی را برابر می‌داند. مثلاً مبلغی که به ریال نوشته شده با همان مبلغ به تومان یکی حساب می‌شود.

#### چه چیزهایی را پوشش می‌دهد

- آزمون برنامه: بررسی پاسخ، ابزارهایی که چت‌بات صدا زده و ابزارهایی که نباید صدا بزند؛ با هر چارچوبی (OpenAI SDK، LangGraph، Pydantic AI و غیره) و قابل اجرا در CI.
- شبیه‌سازی گفتگو با کاربر ایرانی (تعارف، فینگلیش، اشتباه ریال و تومان).
- سنجش مدل‌ها روی ۱۳ بنچمارک فارسی آماده مثل ParsiNLU و Persian MMLU؛ همان ابزاری که پشت جدول رتبه‌بندی ParsBench است.

#### نکته‌ها

- کتابخانه را جداگانه نصب کنید: `pip install parsbench` (پایتون ۳.۱۲ یا جدیدتر).
- دستور نصب، مهارت را برای پروژه فعلی نصب می‌کند. بدون `npx` می‌توانید پوشه `skills/parsbench/` مخزن را در پوشه مهارت‌های دستیار (برای Claude Code، `.claude/skills/`) کپی کنید.