به گزارش تابش کوثر ، گروهی از متخصصان هوش مصنوعی دانشگاه صنعتی امیرکبیر موفق شدند قدرتمندترین و جامع‌ترین سیستم ارزیابی مدل‌های زبانی فارسی را توسعه دهند.
دکتر سعیده ممتازی، عضو هیأت علمی دانشکده مهندسی کامپیوتر دانشگاه امیرکبیر و سرپرست آزمایشگاه پردازش زبان طبیعی، اعلام کرد: «در نمونه‌ای موفق از همکاری صنعت و دانشگاه، متخصصان مرکز تحقیقات هوش مصنوعی یک شرکت دانش‌بنیان و آزمایشگاه پردازش زبان طبیعی دانشگاه صنعتی امیرکبیر، جامع‌ترین سیستم ارزیابی مدل‌های زبانی فارسی را توسعه دادند.»
وی افزود: «با توسعه این سیستم، زیست‌بوم هوش مصنوعی کشور از این پس به سنجه‌ای دقیق و یکپارچه برای ارزیابی مدل‌های زبانی بزرگ (LLM) فارسی مجهز خواهد بود.»
به گزارش ایسنا، این سیستم که به نام «Open Persian LLM Leaderboard» شناخته می‌شود، شامل بیش از ۴۰ هزار نمونه داده است. بخشی از این داده‌ها از بنچ‌مارک‌های معتبر جهانی به فارسی ترجمه شده و بخش دیگر در داخل کشور تهیه و برچسب‌گذاری شده‌اند.
دکتر ممتازی همچنین اظهار کرد: «دادگان ارزیابی این سیستم به‌صورت مستمر در حال به‌روزرسانی و افزایش است تا دقت ارزیابی‌ها ارتقا یابد. مدل ارائه‌شده در این پروژه، هم‌سطح با برترین بنچ‌مارک‌های جهانی است و بخشی از دادگان آن به‌صورت متن‌باز در اختیار عموم قرار گرفته است.»
به گفته او، متخصصان می‌توانند برای ارزیابی مدل‌های زبانی خود از این سیستم استفاده کنند.

م/110