صورت مسئله
وقتی تصمیم‌های تحلیلی پس از دیدن نتیجه گرفته می‌شوند، مرز میان پیش‌بینی و توضیح پس از واقعه کمرنگ میشود. پیشثبت یعنی سؤال‌ها و تصمیم‌های کلیدی طراحی و تحلیل را پیش از مشاهده نتایج مربوط ثبت کنیم. این کار از همه خطاها جلوگیری نمی‌کند و طراحی ضعیف را خوب نمی‌کند، اما زمان تصمیم‌ها و انعطاف تحلیلی را شفاف‌تر می‌سازد.
1. سؤال، فرضیه و جهت پیش‌بینی را دقیق بنویس
اگر پژوهش تأییدی است، مشخص کن کدام فرضیه اصلی است، متغیرها چگونه تعریف می‌شوند و جهت یا شکل رابطه مورد انتظار چیست. عبارت‌هایی مثل «بین متغیرها رابطه وجود دارد» فضای تصمیم زیادی باقی می‌گذارند. اگر سؤال اکتشافی است، همان را صریح بنویس؛ اکتشافی بودن عیب نیست.
2. پیامدها و متغیرهای اصلی را اولویت‌بندی کن
مشخص کن کدام پیامد اولیه و کدام ثانویه است، سازه‌ها چگونه نمره‌گذاری می‌شوند و اگر چند شاخص ممکن وجود دارد کدام برای آزمون اصلی استفاده میشود. این کار مانع انتخاب پیامدی میشود که بعد از تحلیل جذاب‌تر به نظر رسیده است.
3. نمونه‌گیری، توقف و قواعد حذف را مشخص کن
هدف حجم نمونه و منطق آن، معیارهای ورود و خروج، شرایط حذف مشاهده و قاعده توقف جمعآوری داده را ثبت کن. اگر داده پرت یا پاسخ نامعتبر معیار مشخص دارد، قبل از دیدن اثر اصلی تعریفش کن. قواعد مبهم امکان انعطاف پس از نتیجه را بالا می‌برند.
4. طرح تحلیل را تا سطح تصمیم‌های اثرگذار بنویس
مدل اصلی، متغیرهای تعدیل‌شونده، کدگذاری متغیرها، تبدیل‌ها، مدیریت داده گمشده، آزمون‌های اصلی، اندازه اثر و برخورد با چندگانگی را مشخص کن. طرح باید آن‌قدر دقیق باشد که دو تحلیلگر مستقل برداشت کاملاً متفاوتی از آزمون اصلی نداشته باشند.
5. پیشثبت را زماندار و نسخه‌بندی‌پذیر ثبت کن
ارزش اصلی پیشثبت در روشن بودن زمان ثبت نسبت به دسترسی به نتایج است. از سامانه‌ای استفاده کن که زمان و نسخه را ثبت می‌کند. اگر داده از قبل وجود دارد، صادقانه بنویس چه چیزهایی را پیش از ثبت دیده‌ای و کدام نتایج هنوز برایت ناشناخته بوده‌اند.
6. انحراف از برنامه را گزارش کن، نه پنهان
پیشثبت قرارداد ممنوعیت تغییر نیست. مشکل داده، خطای طراحی یا بازخورد روش‌شناختی میتواند تغییر موجه ایجاد کند. تحلیل اصلاح‌شده را انجام بده، اما آن را از برنامه اولیه متمایز کن، دلیل تغییر را توضیح بده و در صورت امکان نتیجه تحلیل برنامه‌ریزی‌شده را نیز نشان بده.
تأییدی و اکتشافی دشمن هم نیستند
پژوهش اکتشافی برای کشف الگو، تولید فرضیه و توسعه نظریه ضروری است. مشکل زمانی ایجاد میشود که تحلیلی که پس از دیدن داده شکل گرفته به‌عنوان پیش‌بینی از پیش تعیین‌شده گزارش شود. پیشثبت این مرز را قابل مشاهده می‌کند.
یک پروژه میتواند هم بخش تأییدی و هم اکتشافی داشته باشد. بخش تأییدی طبق طرح ثبت‌شده تحلیل میشود و تحلیل‌های اضافی یا یافته‌های غیرمنتظره با برچسب اکتشافی گزارش می‌شوند. این تفکیک از ارزش کشف کم نمی‌کند؛ فقط قدرت ادعای هر بخش را روشن‌تر می‌کند.
یک طرح تحلیل خوب چه جزئیاتی دارد؟
جزئیات لازم به طراحی بستگی دارد، اما رابطه سؤال با متغیرها و آزمون اصلی باید روشن باشد. برای رگرسیون، پیامد، پیش‌بین‌ها، تعدیل‌گرها، نحوه کدگذاری، تعامل‌های برنامه‌ریزی‌شده و تصمیم‌های تشخیصی مهم را مشخص کن.
اگر چند مسیر تحلیل معقول وجود دارد، قاعده انتخاب را از قبل بنویس. مدیریت داده گمشده، داده پرت و توقف نمونه‌گیری را نیز بخشی از استنباط بدان، نه پاک‌سازی مقدماتی بی‌اهمیت.
پیشثبت چه چیزی را تضمین نمی‌کند؟
پیشثبت تضمین نمی‌کند سؤال مهم، ابزار معتبر یا نمونه نماینده است. یک تحلیل از پیش ثبت‌شده میتواند همچنان بر طراحی ضعیف یا مفروضات نامناسب بنا شده باشد؛ بنابراین داوری روش‌شناختی همچنان ضروری است.
پیشثبت نیز به‌خودی‌خود گزارش کامل ایجاد نمی‌کند. لینک یا شناسه ثبت و توضیح روشن انحراف‌ها به خواننده امکان می‌دهد نسخه ثبت‌شده را با اجرای واقعی مقایسه کند.
نقشه اجرایی
- فرضیه‌ها و سؤال‌های تأییدی را از اکتشافی جدا کن.
- پیامدهای اصلی، تعریف متغیرها و نمره‌گذاری را مشخص کن.
- حجم نمونه، قاعده توقف و قواعد حذف را ثبت کن.
- مدل اصلی و مسیرهای جایگزین از پیش تعریف‌شده را بنویس.
- نسخه پیشثبت را پیش از مشاهده نتایج مرتبط در سامانه زماندار ثبت کن.
- در گزارش نهایی جدول «برنامه اولیه / اجرای واقعی / دلیل تغییر» بساز.
خطاهای رایج
- پیشثبت بسیار کلی که تقریباً هر تحلیل بعدی را پوشش می‌دهد
- ثبت طرح بعد از مشاهده نتیجه بدون افشای دسترسی قبلی
- پنهان‌کردن تحلیل اکتشافی زیر عنوان تأییدی
- فرض اینکه پیشثبت جای ارزیابی کیفیت طراحی را می‌گیرد
- تغییر معیار حذف یا توقف نمونه بعد از دیدن نتیجه
- حذف انحراف‌های موجه از گزارش به‌جای توضیح آن‌ها
چک‌لیست
پرسش‌های متداول
آیا بعد از پیشثبت دیگر اجازه تغییر تحلیل ندارم؟
تغییر میتواند لازم و علمی باشد. نکته این است که آن را شفاف گزارش کنی، دلیلش را توضیح بدهی و با برنامه اولیه یکی نشان ندهی.
آیا تحلیل اکتشافی اعتبار ندارد؟
چرا؛ برای کشف الگو و تولید فرضیه مهم است. فقط قدرت ادعای تأییدی آن با آزمونی که واقعاً از قبل مشخص شده یکسان نیست و باید برچسب مناسب داشته باشد.
اگر داده قبلاً جمعآوری شده باشد میتوان پیشثبت کرد؟
میتوان طرح تحلیل آینده را ثبت کرد، اما باید سطح دسترسی و دانستههای قبلی درباره داده و نتایج را افشا کرد. ارزش پیشثبت به روشن بودن مرز زمانی تصمیم و مشاهده وابسته است.
پیشثبت همان Registered Report است؟
خیر. پیشثبت ثبت زماندار طرح پیش از نتیجه است. Registered Report قالب انتشاری است که معمولاً پروتکل و تحلیل پیش از مشاهده نتایج وارد داوری مرحله اول مجله میشود.
منابع
- Nosek BA, Ebersole CR, DeHaven AC, Mellor DT. The preregistration revolution. Proceedings of the National Academy of Sciences. 2018;115(11):2600–2606. doi:10.1073/pnas.1708274114.
- Wagenmakers EJ, Wetzels R, Borsboom D, van der Maas HLJ, Kievit RA. An Agenda for Purely Confirmatory Research. Perspectives on Psychological Science. 2012;7(6):632–638. doi:10.1177/1745691612463078.