هیئت داوران هوش مصنوعی نویسپار: داوری علمی متن پیش از استاد راهنما

بین نوشتنِ پیش‌نویسِ یک فصل و نشستن مقابلِ استاد راهنما، یک نقطهٔ کور وجود دارد: کسی نیست که متن را بی‌طرفانه و بی‌تعارف نقد کند. استاد راهنما وقتِ محدودی دارد و بیشتر به مسیرِ کلیِ کار نگاه می‌کند؛ هم‌کلاسی و دوست هم معمولاً دلش نمی‌خواهد تند نقد کند. نتیجه این می‌شود که بسیاری از ایرادهای ساختاری و استدلالی تازه در جلسهٔ دفاع یا در داوریِ رسمی دیده می‌شوند؛ یعنی جایی که اصلاحشان از همه گران‌تر است.

«هیئت داوران هوش مصنوعی» نویسپار برای پر کردنِ همین فاصله ساخته شده است: پیش از آن‌که کار را به استاد راهنما بدهید، چند هوش مصنوعیِ مستقل متنِ شما را داوری می‌کنند و یک گزارشِ خودبازبینی در اختیارتان می‌گذارند. این گزارش جای داوریِ انسانی را نمی‌گیرد، اما می‌تواند بگوید کجا ضعف دارید و با چه ترتیبی آن را برطرف کنید.

«هیئت داوران» چطور کار می‌کند

در مودالِ «داوری چند هوش مصنوعی» متنِ خود را برای داوری می‌گذارید و نوعِ داوری را انتخاب می‌کنید. از آن نقطه، هر یک از هوش مصنوعی‌های هیئت، مستقل از بقیه و با همان معیارهای مشترک، متن را می‌خواند و داوریِ خودش را می‌نویسد. یعنی چند داوریِ جداگانه در دست دارید، نه یک نظرِ واحد که اسمِ چند مدل روی آن خورده باشد.

مزیتِ چندداوری همین‌جاست. یک داور ممکن است روی ضعفِ روش‌شناسی دست بگذارد و داورِ دیگری همان بخش را قابل‌قبول بداند؛ داورِ سخت‌گیر به منابع ایراد بگیرد و داورِ دیگر به ساختار. اختلافِ نظرِ داورها خودش اطلاعاتِ ارزشمندی است: نشان می‌دهد کدام بخشِ متن محلِ بحث است و کدام بخش نزد همه محکم است. با یک نظرِ تنها، همین تمایزها دیده نمی‌شود.

دو نوع داوری در دسترس است. داوریِ «علمی» برای مقاله و پایان‌نامه است و با شش معیاری که در ادامه می‌آید کار می‌کند. داوریِ «ادبی» برای متن‌های غیرعلمی و داستانی است و شش معیارِ خودش را دارد: پیرنگ، شخصیت‌پردازی، زبان و لحن، ریتم، نوآوری و انسجام. انتخابِ نوعِ داوری مهم است، چون معیارها تعیین می‌کنند داور چه چیزی را ببیند و چه چیزی را نبیند.

شش معیارِ داوریِ علمی

هیئت داورانِ علمی با شش معیارِ ثابت داوری می‌کند؛ همان شش معیاری که در داوریِ متعارفِ یک مقالهٔ پژوهشی هم به کار می‌آید.

این معیارها باعث می‌شوند گزارش از «خوب بود» و «بازبینی لازم است» فراتر برود و بگوید کدام لایهٔ متن مشکل دارد. در ادامه هر معیار را کوتاه توضیح می‌دهیم تا بدانید از گزارش چه انتظاری داشته باشید.

ساختار

ساختار یعنی آیا بخش‌های متن در جای درست خود نشسته‌اند و رشتهٔ استدلال از یکی به دیگری می‌رسد. داور ترتیبِ مرسومِ نوشتارِ علمی — چکیده، مقدمه، روش، یافته‌ها، بحث و نتیجه‌گیری — و همچنین تناسبِ حجمِ بخش‌ها را می‌سنجد؛ مقدمهٔ بلندی که به روش نمی‌رسد یا نتیجه‌گیریِ کوتاهی که بحث را رها می‌کند، همین‌جا پیدا می‌شود.

دقت علمی

دقتِ علمی یعنی هر ادعا به اندازهٔ شاهدش مطرح شده باشد. داور می‌پرسد آیا تعریفِ مفاهیم روشن است، آیا جمله‌های مطلق پشتوانه دارند، و آیا نتیجه‌گیری از داده‌ها فراتر نرفته است. این معیار جایی به کار می‌آید که متن از شواهدِ خودش جلو می‌زند و ادعایی می‌سازد که داده‌ها آن را تحمل نمی‌کنند.

روش پژوهش

در معیارِ روش، داور همراستاییِ پرسش پژوهش با روش را می‌سنجد: آیا روشی که انتخاب شده واقعاً به همان پرسش پاسخ می‌دهد؟ توصیفِ نمونه و ابزارِ گردآوری داده روشن است؟ مراحلِ تحلیل آن‌قدر شفاف گفته شده که کسی بتواند منطقِ کار را بازسازی کند؟ محدودیت‌های کار هم بخشی از همین معیار است.

منابع

داور در معیارِ منابع به ارتباط و به‌روزیِ منابع، یک‌دستیِ شیوهٔ ارجاع، و همخوانیِ ارجاع‌های درون‌متنی با فهرستِ منابع نگاه می‌کند. توجه داشته باشید که این نقد دربارهٔ کیفیتِ ارجاع‌دهی است؛ سنجشِ شباهتِ متنی کارِ این هیئت نیست و جای دیگری انجام می‌شود.

نوآوری

نوآوری یعنی سهمِ تازهٔ کارِ شما نسبت به آنچه پیش‌تر گفته شده. داور می‌پرسد متن چه چیزی به بحث اضافه می‌کند که پیش از این نبوده، و اگر متن در عمل چیزی فراتر از تکرارِ پژوهش‌های پیشین نمی‌گوید، همین را صریح می‌نویسد. این معیار برای مقاطعِ بالاتر و برای مقاله حساس‌تر است.

نگارش

نگارش دربارهٔ زبانِ متن است: یک‌دستیِ لحن، نیم‌فاصله و نشانه‌گذاریِ درست، حذفِ حشو، شکستنِ جمله‌های بلند، و یکدست بودنِ اصطلاح‌ها در سراسرِ متن. ضعفِ نگارشی به‌تنهایی متن را بی‌اعتبار نمی‌کند، اما ذهنِ داور را از محتوا دور می‌کند و در مجموع به متن ضرر می‌زند.

خروجی چه شکلی است

خروجیِ هیئت داوران سه بخش دارد و همهٔ آن‌ها در همان مودالِ «داوری چند هوش مصنوعی» نمایش داده می‌شود. بخشِ اول یک جدولِ مقایسه است: هر داور یک سطر، معیارها یک ستون، به‌همراهِ امتیازِ هر معیار و امتیازِ کلی. با یک نگاه می‌بینید داورها کجا هم‌نظرند و کجا اختلاف دارند؛ ستون‌هایی که همه در آن‌ها کم‌امتیاز داده‌اند، اولویتِ اصلاحِ متنِ شماست.

بخشِ دوم نقدِ کاملِ هر داور است. هر داور جداگانه و مستقل متنِ تحلیلیِ خودش را می‌نویسد و دلیلِ امتیازش را توضیح می‌دهد؛ از همین بخش است که می‌فهمید یک معیار چرا ضعیف دیده شده و چه چیزی باید تغییر کند. بخشِ سوم دکمهٔ پرینت است تا همین گزارش را روی کاغذ ببرید یا برای خودتان نگه دارید.

یک نکته را روشن بگوییم: این خروجی سندِ خودبازبینی است، نه داوریِ رسمی. می‌توانید آن را به استاد راهنما نشان بدهید یا در جلسهٔ راهنمایی به آن استناد کنید، اما این گزارش دربارهٔ نتیجهٔ داوریِ رسمی یا سرنوشتِ نهاییِ کار هیچ تضمینی نمی‌دهد.

تفاوتِ آن با همانندجویی

«همانندجو»ی ایران‌داک و این هیئت داوران دو کارِ کاملاً متفاوت انجام می‌دهند و بهتر است با هم اشتباه گرفته نشوند. همانندجویی متنِ شما را با پایان‌نامه‌ها، رساله‌ها، مقاله‌ها و متنِ وب مقایسه می‌کند و شباهتِ متنی را نشان می‌دهد: گذرهای مشابه، درجهٔ شباهت و منبع. این سامانه نمی‌گوید چه کسی متن را نوشته و دربارهٔ هوش مصنوعی هم چیزی نمی‌سنجد.

هیئت داوران تقریباً برعکسِ این عمل می‌کند: شباهتِ متنی را نمی‌سنجد و دنبالِ سرقتِ علمی نیست. کارِ آن سنجشِ کیفیت، ساختار و استحکامِ استدلالِ متن است. پس این دو مکملِ یکدیگرند: همانندجویی می‌گوید متنِ شما چقدر به متن‌های دیگر شبیه است، و هیئت داوران می‌گوید همان متن چقدر خوب ساخته شده است.

هزینه از سهمیهٔ جوهر

کارِ حسابِ کاربری در نویسپار بر پایهٔ سهمیهٔ جوهر است و داوریِ چندگانه هم از همین سهمیه کسر می‌شود. دلیلش روشن است: چند مدلِ مستقل کلِ متنِ شما را می‌خوانند و برای هرکدام یک نقدِ کامل تولید می‌شود؛ این پردازش از یک پرسشِ ساده سنگین‌تر است.

پس توصیهٔ عملی این است که داوری را روی نسخهٔ پخته‌تر بگیرید. اول متن را خودتان بنویسید و ویرایشِ زبانی کنید، بعد سراغِ داوری بروید؛ داوری روی متنی که هنوز پر از غلطِ نگارشی است، بخشی از ظرفیتِ گزارش را صرفِ چیزهایی می‌کند که خودتان هم می‌توانستید ببینید.

هشدارِ صادقانه

داوریِ هوش مصنوعی جانشینِ استاد راهنما و داورِ انسانی نیست. تشخیصِ سلیقهٔ رشته، سنجشِ تناسبِ کار با انتظارِ گروه آموزشی، و مسئولیتِ داوریِ رسمی کارِ انسان است. خودِ هوش مصنوعی‌ها هم خطاپذیرند: ممکن است ایرادی بگیرند که وارد نیست، نکتهٔ درستی را از دست بدهند، یا معیاری را بد بفهمند.

استفادهٔ درست از این گزارش «مباحثه» با آن است، نه اطاعتِ بی‌چون‌وچرا. هر نقد را کنارِ متنِ خودتان بگذارید و بپرسید آیا ایراد وارد است؛ اگر بود اصلاح کنید و اگر نبود، بدانید که در دفاع باید بتوانید توضیحش بدهید. اگر گزارش را به استاد راهنما نشان می‌دهید، بگویید که این خودبازبینی با ابزار انجام شده است؛ همین شفافیت از یک سو کارِ شما را قابل‌دفاع می‌کند و از سوی دیگر جایگاهی برای ارجاعِ درست می‌سازد.

جمع‌بندی

هیئت داوران برای این ساخته شده که پیش از داورِ انسانی، ایرادهای متن را ببینید: چند هوش مصنوعیِ مستقل با شش معیارِ روشن — ساختار، دقت علمی، روش پژوهش، منابع، نوآوری و نگارش — داوری می‌کنند، جدولِ مقایسه و نقدِ کاملِ هر داور را می‌گیرید، و با دکمهٔ پرینت می‌توانید گزارش را نگه دارید. هزینه از سهمیهٔ جوهر کسر می‌شود و خروجی، سندی برای خودبازبینی است.

برای اینکه جای این ابزار در مسیرِ کارتان روشن باشد، دو متنِ مرتبط در همین خوشه را ببینید: پایان‌نامه‌نویسی با هوش مصنوعی که مرزِ کمکِ ابزاری و جانشینیِ نویسنده را جدا می‌کند، و نویسپار برای پایان‌نامه و مقاله که قابلیت‌های واقعیِ سرویس را فهرست می‌کند. اگر می‌خواهید معیارِ ساختار را از ریشه بشناسید، نوشتن مقالهٔ علمی و ساختار IMRAD نقطهٔ شروعِ خوبی است.