اعتبار یک نظرسنجی چگونه ارزیابی می‌شود؟

معصوم آقازاده*،   4050514051
اعتبار یک نظرسنجی چگونه ارزیابی می‌شود؟

 

 با توجه به اینکه، امروزه نتایج نظرسنجی‌ها بیش از هر زمان دیگری محل مناقشه‌اند، چگونه می‌توان میان یک نظرسنجی معتبر و یک نظرسنجی شبه علمی تمایز گذاشت؟ طی دو دهه گذشته، کاهش تمایل شهروندان به مشارکت در نظرسنجی‌ها به یکی از مهم‌ترین چالش‌های مراکز افکارسنجی در جهان تبدیل شده است. این مسئله، که تقریباً همه مؤسسات معتبر سنجش افکار عمومی را درگیر کرده، موجب شده مراکز نظرسنجی بیش از گذشته بر طراحی علمی نمونه، ارزیابی سوگیری ناشی از عدم پاسخ و استفاده از روش‌های آماری برای حفظ اعتبار داده‌ها تمرکز کنند. از این رو، امروزه کیفیت یک نظرسنجی صرفاً با اندازه نمونه یا نرخ پاسخ سنجیده نمی‌شود، بلکه به مجموعه‌ای از ملاحظات روش‌شناختی وابسته است که اعتبار یافته‌ها را تضمین می‌کند.

  جامعه ایران نیز از این روند جهانی مستثنا نیست، اما تحولات سیاسی، اقتصادی و امنیتی سال‌های اخیر، انجام نظرسنجی را با پیچیدگی‌های بیشتری همراه کرده است. در چنین فضایی، تصمیم شهروندان برای مشارکت در یک نظرسنجی، بیش از گذشته تحت تأثیر میزان اعتماد، احساس امنیت و ارزیابی آنان از شرایط پیرامونی قرار دارد. با وجود چنین بستری، اعتبار داده‌های نظرسنجی بیش از گذشته محل مناقشه قرار می‌گیرد و این اعتبار گاهی بر اساس همسویی یا ناهمسویی آن با انتظارات سیاسی یا اجتماعی داوری می‌شود. بنابراین این پرسش مطرح می‌شود در شرایطی که درصد قابل توجهی از جامعه در نظرسنجی‌ها مشارکت نمی‌کند، بر اساس چه معیارهایی می‌توان درباره اعتبار یک نظرسنجی قضاوت کرد؟ این یادداشت با تکیه بر استانداردهای شناخته‌شده روش‌شناسی پیمایش، می‌کوشد مهم‌ترین معیارهای ارزیابی اعتبار داده‌های افکار عمومی را مرور کند و نشان دهد که اعتماد به یک نظرسنجی، بیش از هر چیز، به کیفیت روش تولید داده‌ها وابسته است، نه به مطلوب یا نامطلوب بودن نتایج آن.

  

اعتبار یک نظرسنجی چگونه ارزیابی می‌شود؟

 در ادبیات معاصر روش‌شناسی پیمایش، اعتبار یک مطالعه صرفاً با اندازه نمونه یا نرخ پاسخ سنجیده نمی‌شود. آنچه امروز در ارزیابی کیفیت داده‌ها اهمیت دارد، کنترل مجموعه‌ای از خطاهای بالقوه در تمام مراحل پژوهش است؛ همان رویکرد خطای کل پیمایش که وایسبرگ (2005) آن را «پارادایم جدید علم پیمایش» می‌نامد. یعنی از طراحی نمونه و گردآوری داده‌ها تا پردازش و تحلیل نتایج. از همین رو، یکی از مهم‌ترین دستاوردهای پژوهش‌های اخیر آن است که پایین بودن نرخ پاسخ، به‌تنهایی نشانه بی‌اعتباری یک نظرسنجی نیست. آنچه اعتبار نتایج را تهدید می‌کند، سوگیری ناشی از عدم پاسخ است؛ یعنی وضعیتی که افرادِ پاسخ‌نداده، از نظر ویژگی‌های مرتبط با موضوع پژوهش، با پاسخ‌دهندگان تفاوت معناداری داشته باشند. بنابراین، این سؤال مطرح می شود که پژوهشگر با چه شواهدی نشان می‌دهد افرادی که پاسخ داده‌اند، همچنان نماینده مناسبی از جامعه هدف هستند؟

بر این اساس، پیش از اعتماد به یک نظرسنجی، این شش پرسش را باید مطرح کرد:

 ۱. آیا همه افراد جامعه هدف، شانس برابری برای حضور در نمونه را داشته‌اند؟ اگر بخشی از جامعه اساساً امکان انتخاب شدن نداشته باشد، حتی افزایش اندازه نمونه نیز این کاستی را جبران نخواهد کرد.

 ۲. آیا پاسخ‌دهندگان نماینده جامعه هدف هستند؟ کاهش نرخ همکاری، زمانی مسئله‌ساز می‌شود که افرادِ پاسخ‌نداده از نظر ویژگی‌های مرتبط با موضوع مطالعه با پاسخ‌دهندگان تفاوت داشته باشند. در چنین شرایطی، با استفاده از روش‌های آماری و ارزیابی سوگیری عدم پاسخ، می‌توان این تفاوت را تا حد امکان کنترل کرد.

 ۳. آیا شیوه گردآوری داده‌ها با موضوع پژوهش تناسب دارد؟ انتخاب میان نظرسنجی حضوری، تلفنی یا سایر شیوه‌ها باید متناسب با موضوع مطالعه، ویژگی‌های جامعه هدف و شرایط اجتماعی انجام شود.

 ۴. آیا داده‌ها پس از گردآوری به‌درستی وزن‌دهی شده‌اند؟ تقریباً همه مراکز معتبر افکارسنجی، داده‌های خام را بر اساس ویژگی‌های جمعیت‌شناختی وزن‌دهی می‌کنند تا ترکیب نمونه به ترکیب واقعی جامعه نزدیک‌تر شود. البته وزن‌دهی زمانی مؤثر است که اطلاعات لازم برای اصلاح تفاوت‌ها وجود داشته باشد و نمی‌تواند همه انواع سوگیری، به‌ویژه سوگیری‌های ناشی از دیدگاه‌های سیاسی را برطرف کند.

 ۵. آیا روش اجرای نظرسنجی به‌صورت شفاف گزارش شده است؟ اعتبار یک نظرسنجی فقط به کیفیت اجرا وابسته نیست، بلکه به میزان شفافیت آن در ارائه اطلاعات مربوط به کل فراینداجرایی تا نحوه تحلیل و فرمول تعدیل داده‌ها نیز بستگی دارد.

 ۶. آیا نتایج متناسب با ظرفیت داده‌ها تفسیر شده‌اند؟ هر نظرسنجی متناسب با هدف، طراحی و اندازه نمونه خود ظرفیت مشخصی برای استنباط دارد. نمونه‌ای که برای برآورد یک شاخص ملی طراحی شده، الزاماً برای گونه‌شناسی‌های پیچیده اجتماعی یا تحلیل‌های تفصیلی درباره گروه‌های کوچک جمعیتی مناسب نیست. بنابراین، یکی از معیارهای مهم اعتبار، تناسب میان ظرفیت واقعی داده‌ها و دامنه ادعاهایی است که بر پایه آنها مطرح می‌شود.

  

نظرسنجی در بستر اجتماعی ایران امروز

 اگرچه کاهش تمایل شهروندان به مشارکت در نظرسنجی‌ها پدیده‌ای جهانی است، اما شرایط اجتماعی هر کشور تعیین می‌کند این مسئله تا چه اندازه بر کیفیت داده‌ها اثر بگذارد. جامعه ایران در سال‌های اخیر، هم‌زمان با تجربه اعتراضات، نوسانات اقتصادی، تحولات منطقه‌ای، جنگ، نوع نگاه به آینده و حساسیت نسبت به موضوعات سیاسی و امنیتی، در موقعیتی قرار گرفته است که رفتار پاسخگویی شهروندان را نیز تحت تأثیر قرار داده است.

 در چنین فضایی، داده‌های نظرسنجی صرفاً محصول یک فرایند آماری نیستند، بلکه در بستر اعتماد اجتماعی تولید می‌شوند. هرچه پاسخگویان نسبت به محرمانه ماندن اطلاعات یا پیامدهای بیان دیدگاه خود اطمینان کمتری داشته باشند، احتمال عدم همکاری یا ارائه پاسخ‌های محافظه‌کارانه افزایش می‌یابد. بنابراین، در موضوعات حساس، مسئله تنها کاهش نرخ پاسخ نیست، بلکه احتمال افزایش سوگیری ناشی از عدم پاسخ و خطاهای اندازه‌گیری نیز بیشتر می‌شود.

 از همین رو، انتخاب شیوه گردآوری داده‌ها اهمیت ویژه‌ای پیدا می‌کند. در تجربه سال‌های اخیر ایران، نظرسنجی‌های تلفنی درباره موضوعات حساس سیاسی و امنیتی با محدودیت‌های بیشتری روبه‌رو بوده‌اند؛ زیرا بخشی از شهروندان به تماس‌های ناشناس پاسخ نمی‌دهند یا در بیان دیدگاه خود احتیاط می‌کنند. به همین دلیل، بسیاری از مراکز حرفه‌ای افکارسنجی برای این‌گونه موضوعات، پیمایش‌های حضوری را ترجیح می‌دهند؛ نه به دلیل برتری ذاتی این روش، بلکه به دلایلی مثل نداشتن مشخصات تماس پاسخگو، امکان ایجاد اعتماد بیشتر میان پرسشگر و پاسخگو را فراهم می‌کند و می‌تواند بخشی از خطاهای ناشی از عدم پاسخ و اندازه‌گیری را کاهش دهد.

  

افکار عمومی و سیاست‌گذاری

 در پایان باید گفت اعتبار یک نظرسنجی را نباید بر اساس مطلوب یا نامطلوب بودن نتایج آن سنجید. آنچه یک نظرسنجی را شایسته اعتماد می‌کند، نه همسویی یافته‌های آن با انتظارات سیاسی یا اجتماعی، بلکه پایبندی به اصول روش‌شناسی، شفافیت در گزارش و امکان ارزیابی مستقل کیفیت داده‌هاست. دفاع از استانداردهای علمی نظرسنجی، در واقع دفاع از امکان شنیدن صدای واقعی جامعه است؛ صدایی که می‌تواند مبنای اصلاح سیاست‌ها، تقویت اعتماد عمومی و کاهش خطاهای تصمیم‌گیری قرار گیرد.

 یکی از آسیب‌های رایج در حوزه نظرسنجی، بهره‌برداری ابزاری از داده‌های افکار عمومی است. گاه نتایج یک نظرسنجی نه برای شناخت دقیق‌تر جامعه، بلکه برای تأیید یک موضع سیاسی یا مشروعیت‌بخشی به تصمیمی از پیش اتخاذشده مورد استفاده قرار می‌گیرد. در چنین شرایطی، داده‌های افکار عمومی از «شواهد علمی» به «ابزار رقابت سیاسی» تنزل پیدا می‌کنند و مرز میان پژوهش علمی و منازعات سیاسی مخدوش می‌شود.

 آسیب دیگر، فراتر رفتن از ظرفیت واقعی داده‌هاست؛ چه در تفسیر نتایج و چه در سنجش مفاهیم. گاه بر پایه نمونه‌هایی که برای برآورد یک شاخص ملی طراحی شده‌اند، گونه‌شناسی‌های اجتماعی ارائه می‌شود، یا مفاهیم چندبعدی علوم اجتماعی مانند سرمایه اجتماعی، انسجام اجتماعی یا امید اجتماعی تنها با یک یا دو پرسش سنجیده می‌شوند و سپس درباره افزایش یا کاهش آنها داوری‌های کلی صورت می‌گیرد. حال آنکه این مفاهیم، در سنت پژوهش‌های اجتماعی، سازه‌هایی پیچیده‌اند که سنجش معتبر آنها مستلزم چارچوب نظری روشن و مجموعه‌ای از شاخص‌ها و گویه‌های معتبر است. به همان اندازه که ضعف در طراحی نمونه می‌تواند به خطا منجر شود، تقلیل مفاهیم و تفسیر فراتر از ظرفیت داده‌ها نیز می‌تواند تصویری نادرست از واقعیت اجتماعی ارائه دهد.

  شایان ذکر است اعتبار نظرسنجی‌ها صرفاً یک مسئله روش‌شناختی نیست؛ بلکه بخشی از کیفیت حکمرانی است. هر اندازه داده‌های افکار عمومی دقیق‌تر، شفاف‌تر و مسئولانه‌تر تولید و تفسیر شوند، احتمال خطای سیاستی کاهش می‌یابد و امکان تصمیم‌گیری مبتنی بر واقعیت، به جای برداشت‌های ذهنی یا منازعات سیاسی، افزایش پیدا می‌کند. بویژه در شرایط بحرانی و مخاطره آمیز، مهم‌ترین کارکرد نظرسنجی، پیش‌بینی آینده نیست؛ کاهش خطای سیاست‌گذار در فهم شرایط حاکم برجامعه است.

 نکته مهم این است که در چنین شرایطی، تقویت جایگاه نظرسنجی‌ها در نظام تصمیم‌گیری، بیش از هر چیز مستلزم اعتماد به نهادهای حرفه‌ای افکارسنجی و پایبندی به استانداردهای علمی است. هرچه مراکز افکارسنجی در طراحی نمونه، انتخاب شیوه مناسب گردآوری داده، وزن‌دهی، انتشار جزئیات روش‌شناسی و بیان محدودیت‌های پژوهش شفاف‌تر عمل کنند، اعتماد جامعه علمی و افکار عمومی نیز افزایش خواهد یافت. در مقابل، هرچه داده‌های افکار عمومی کمتر در معرض بهره‌برداری‌های سیاسی، رسانه‌ای و جناحی قرار گیرند، امکان تبدیل آنها به مبنایی مشترک برای گفت‌وگوهایی کارشناسی و تصمیم‌گیری عقلانی بیشتر خواهد شد. در چنین صورتی، نظرسنجی از یک ابزار آماری صرف، به یکی از ارکان نظام سیاستگذاری، اصلاح سیاست‌ها و تقویت سرمایه اعتماد میان جامعه و نظام حکمرانی تبدیل خواهد شد. همچنانکه خط مشی و سنت ایسپا نیز در تاریخ 25 ساله خود، در راستای کمک به نظام تصمیم‌گیری کشور، مبتنی بر رعایت اسلوب علمی و اصول اخلاقی و پرهیز از هر نوع سوگیری جناحی بوده و خواهد ماند.

* معاون پژوهشی مرکز افکارسنجی دانشحویان ایران (ایسپا)

دیدگاه کاربران


نظراتی كه به تعميق و گسترش بحث كمك كنند، پس از مدت كوتاهی در معرض ملاحظه و قضاوت ديگر بينندگان قرار مي گيرد. نظرات حاوی توهين، افترا، تهمت و نيش به ديگران منتشر نمی شود.

yektanetتریبون

آخرین عناوین