توسعه قدرتمندترین سیستم ارزیابی مدلهای زبان فارسی از طرف متخصصان هوش مصنوعی
نیو وبلاگ: به گزارش نیو وبلاگ، گروهی از متخصصان هوش مصنوعی دانشگاه صنعتی امیرکبیر موفق شدند قدرتمندترین و جامع ترین سیستم ارزیابی مدلهای زبان فارسی را توسعه دهند و به قول آنها با این اقدام زیست بوم هوش مصنوعی کشور مجهز به یک سنجه دقیق و یکپارچه برای ارزیابی LLMهای فارسی شد.
به گزارش نیو وبلاگ به نقل از روابط عمومی دانشگاه صنعتی امیرکبیر، سعیده ممتازی عضو هیأت علمی دانشکده مهندسی کامپیوتر دانشگاه و سرپرست لابراتوار پردازش زبان طبیعی اظهار داشت: در یک نمونه همکاری موفق میان صنعت و دانشگاه، متخصصان مرکز تحقیقات هوش مصنوعی پارت و لابراتوار پردازش زبان طبیعی دانشگاه صنعتی امیرکبیر جامع ترین و قدرتمندترین سیستم ارزیابی مدلهای زبانی فارسی (Open Persian LLM Leaderboard) را توسعه دادند.
وی ادامه داد: با توسعه این سیستم قدرتمند ارزیابی مدلهای زبانی فارسی، زیست بوم هوش مصنوعی کشور از این پس به سنجه ای دقیق و یکپارچه برای ارزیابی LLMهای فارسی مجهز خواهند شد.
ممتازی با اشاره به خاصیت های این سیستم ارزیابی مدلهای زبانی فارسی، اظهار داشت: این سیستم ارزیابی شامل بالاتر از 40 هزار نمونه است که قسمتی از آنها از چندین بنچ مارک معتبر جهانی به فارسی برگردانده شده و بخش دیگر در داخل کشور از پایه تهیه و برچسب زنی شده اند.
این عضو هیأت علمی دانشکده مهندسی کامپیوتر دانشگاه صنعتی امیرکبیر اشاره کرد: دادگان ارزیابی برای این سیستم درحال افزایش و بروزرسانی است تا ضریب دقت در ارزیابی ها بهبود یابد.
بگفته وی مدل ارائه شده در این پروژه، در کنار بالاترین بنچ مارک های جهانی قرار می گیرد، ضمن این که قسمتی از دادگان این سیستم ارزیابی (بنچ مارک) اکنون بصورت متن باز در دسترس عموم قرار گرفته است.
به گزارش روابط عمومی دانشگاه صنعتی امیرکبیر، متخصصان برای ارزیابی مدل زبانی خود و دیگران می توانند روی لینک زیر کلیک کنند:
https: //huggingface.co/spaces/PartAI/persian-llm-leaderboard
منبع: نیو وبلاگ
این مطلب را می پسندید؟
(0)
(0)
تازه ترین مطالب مرتبط
نظرات بینندگان در مورد این مطلب