پاسخ کوتاهتقلب در پرسشگری یعنی پرسشگر عمداً از دستورالعمل اجرای پیمایش عدول کند و آن را گزارش ندهد؛ از جعل کامل یک مصاحبه تا پرکردن چند سؤال به‌جای پاسخگو. مطالعات نشان میدهد این کار نادر است، اما حتی تعداد کم مصاحبه‌های جعلیِ شناسایی‌نشده هم میتواند برآوردها را دچار سوگیری کند. راه کنترل آن ترکیب چند نشانه است: مدت مصاحبه، الگوی پاسخ، موقعیت مکانی، صدای ضبط‌شده و تماس مجدد با بخشی از پاسخگویان.
تقلب پرسشگر دقیقاً یعنی چه؟
انجمن آمریکایی پژوهش افکار عمومی (AAPOR) تقلب را «عدول عمدی از دستورالعمل‌ها یا راهنمای طراحی‌شده برای پرسشگر، که پرسشگر آن را گزارش نمی‌دهد و میتواند داده را آلوده کند» تعریف میکند. گزارش کارگروه AAPOR دربارهٔ جعل داده این رفتار را در همهٔ مراحل پیمایش بررسی میکند و چند شکل رایج آن را برمی‌شمارد:
- جعل کامل مصاحبه (در ادبیات انگلیسی curbstoning): پرسشگر بدون دیدن پاسخگو، پرسشنامه را خودش پر میکند.
- کدگذاری نادرست وضعیت: پاسخ‌گوی واجد شرایط را «فاقد شرایط» ثبت میکند تا از مصاحبه معاف شود.
- جعل در سطح سؤال: بخش طولانی یا دشوار پرسشنامه را حدسی پر میکند یا پاسخ فیلترها را طوری ثبت میکند که سؤال‌های بعدی پرسیده نشوند.
به گزارش همین کارگروه، پرسشنامه‌های طولانی و پیچیده، فشار برای رسیدن به سهمیه و کار در مناطقی که پرسشگر در آن احساس ناامنی میکند، خطر تقلب را بالا می‌برند. پس کنترل تقلب فقط «گرفتن متخلف» نیست؛ طراحی پروژه هم بخشی از آن است.
تقلب چقدر رایج است و چرا مهم است؟
پژوهشگران مؤسسهٔ IAB آلمان در بررسی یک پیمایش بزرگ می‌نویسند شواهد تجربی نشان میدهد تقلب عمدی پرسشگر در پیمایش‌ها «رخدادی نادر» است؛ اما همان مقدار کمِ موارد شناسایی‌نشده هم میتواند کیفیت داده را پایین بیاورد و برآوردها را دچار سوگیری کند. گزارش AAPOR هم یادآوری میکند که دادهٔ جعلی هم برآورد را منحرف میکند و هم دقت آن را کاهش میدهد.
در تحقیقات بازار این یعنی تصمیم کارفرما، مثلاً قیمت‌گذاری یا انتخاب بازار هدف، روی داده‌ای گرفته میشود که بخشی از آن در میدان تولید نشده است. اعتبار شرکت تحقیقاتی هم وقتی آسیب می‌بیند که کارفرما پیش از خود شرکت متوجه مشکل شود.
۸ نشانهٔ هشدار مصاحبهٔ جعلی
هیچ نشانه‌ای به‌تنهایی اثبات تقلب نیست. پیمایش اجتماعی اروپا (ESS) به نقل از ادبیات این حوزه یادآوری میکند که روش‌های آماری فقط موارد «محتمل‌تر» را نشان می‌دهند و هیچ روشی دقت کامل ندارد. پس این نشانه‌ها را فهرست بررسی بدانید، نه حکم:
۱. مدت مصاحبهٔ غیرعادی
مصاحبه‌ای که بسیار کوتاه‌تر از میانگین پروژه تمام شده، احتمالاً بخش‌هایی از آن خوانده نشده است. ESS سرعت پاسخ به سؤال‌ها، بلوک‌ها و کل پرسشنامه را نشانهٔ «سرعت‌زدگی» یا جعل داده میداند.
۲. فاصلهٔ کوتاه بین دو مصاحبه
اگر پرسشگری در پروژهٔ خانه‌به‌خانه دو مصاحبه را با فاصلهٔ چند دقیقه ثبت کرده، رفت‌وآمد بین دو آدرس در آن زمان ممکن نبوده است. «فاصلهٔ زمانی بین مصاحبهها» در فهرست شاخص‌های ESS آمده است.
۳. هجوم مصاحبهها نزدیک ضرب‌الاجل یا در ساعت نامعمول
افزایش ناگهانی تعداد مصاحبهها در روزهای آخر، یا ثبت مصاحبه در نیمه‌شب، از دیگر شاخص‌های پارادادهٔ ESS است.
۴. الگوی پاسخ یکنواخت
انتخاب گزینهٔ یکسان برای همهٔ گویه‌های یک جدول (straightlining) یا الگوهای تکراری، در تحلیل‌های کیفیت دادهٔ ESS بررسی میشود. پژوهش IAB هم نشان داد پرسشگرِ متقلبِ تأییدشده، در سهم پاسخ‌های «گزینهٔ میانی» واریانس بسیار کمتری از بقیه داشت.
۵. مسیرهای کوتاه در پرسشنامه
اگر پاسخگویان یک پرسشگر بیش از دیگران در فیلترها «خیر» گفته‌اند و سؤال‌های بعدی را رد کرده‌اند، ممکن است پرسشگر برای کوتاه‌کردن مصاحبه چنین کرده باشد.
۶. پاسخ‌های تکراری یا تقریباً تکراری
ESS پس از هر دور، پرسشنامه‌های نیمه‌تکراری را بررسی میکند. در دور هشتم این پیمایش، بر پایهٔ شواهد ترکیبی، همهٔ مصاحبه‌های پرسشگرانی که موارد مشکوک داشتند در سه کشور حذف شد.
۷. موقعیت مکانی ناهمخوان
وقتی موقعیت GPS هر مصاحبه ثبت شود، فاصلهٔ آن با آدرس یا محدودهٔ تعیین‌شده قابل محاسبه است. گزارش AAPOR می‌گوید داده‌های GPS تأیید می‌کنند پرسشگر در زمانی مشخص در مکانی مشخص بوده است.
۸. صدای ضبط‌شدهٔ مشکوک
به گفتهٔ AAPOR، شنوندگان فایل‌های صوتی به این موارد توجه می‌کنند: فایل بدون صدای انسان با صدای کلیک یا محیط، شنیده‌شدن صدای پرسشگر بدون صدای پاسخگو، پاسخ‌های بیش از حد سریع، و شنیده‌شدن صدای یک پاسخگو در چند مصاحبه.
یوچک فیلد صدا، عکس، موقعیت و زمان‌بندی هر مصاحبه را ثبت میکند و هوش مصنوعی موارد مشکوک را پیش از تحویل داده پرچم می‌زند.
روش‌های کنترل: ترکیب پیشگیری و تشخیص
تماس مجدد (Back-check)
در ESS تماس مجدد با ۱۰٪ پاسخگویان و ۵٪ موارد فاقد شرایط الزامی بوده است. در تماس مجدد بررسی میشود که مصاحبه واقعاً انجام شده، همهٔ سؤال‌ها پرسیده شده و وضعیت مصاحبه درست ثبت شده است. AAPOR توصیه میکند پرسشگران بدانند هر لحظه بخشی از کارشان ممکن است بازبینی شود؛ همین آگاهی خودش بازدارنده است.
ضبط صدا با رضایت پاسخگو
در روشی که AAPOR با نام CARI توصیف میکند، معمولاً کل مصاحبه یا سؤال‌های منتخب ضبط میشود، پس از آنکه به پاسخگو گفته شد بخشی از مصاحبه برای کنترل کیفیت ضبط میشود و او رضایت داد. پاسخگو هر زمان حق دارد ضبط را متوقف کند. ESS گوش‌دادن به همهٔ فایل‌ها را بسیار زمان‌بر میداند و پیش‌بینی میکند تحلیل صدا خودکار شود و فقط فایل‌های دارای نشانهٔ تقلب شنیده شوند.
GPS و محدودهٔ جغرافیایی
AAPOR از «حصار جغرافیایی» (geofencing) بهعنوان ابزاری با قدرت بازدارندگی بالا نام می‌برد: مدیر پروژه محدوده‌ای دور هر نمونه تعریف میکند و اگر پرسشگر هنگام شروع مصاحبه بیرون از آن باشد، هشدار داده میشود.
پایش پارادادهٔ هم‌زمان با میدان
مهم‌ترین درس گزارش ESS این است که بررسی‌ها باید در حین اجرای میدان انجام شود، نه پس از تحویل داده؛ تا هنوز بتوان پرسشگر را بازآموزی کرد یا مصاحبه را تکرار کرد. داشبوردهایی که مدت مصاحبه و دیگر شاخص‌ها را روزانه نشان می‌دهند، به گفتهٔ AAPOR هم تشخیص و هم پیشگیری را ممکن می‌کنند.
یک فرایند ساده برای تیم کنترل کیفیت
- پیش از میدان، به پرسشگران بگویید چه چیزهایی ثبت و بررسی میشود؛ بازدارندگی از آموزش شروع میشود.
- برای هر پروژه آستانه‌های مدت مصاحبه و فاصلهٔ بین مصاحبهها را تعیین کنید.
- هر روز مصاحبه‌های خارج از آستانه، دارای موقعیت ناهمخوان یا الگوی یکنواخت را جدا کنید.
- برای موارد مشکوک صدا را بشنوید یا با پاسخگو تماس بگیرید؛ فقط بر پایهٔ یک نشانه حکم ندهید.
- مصاحبه‌های رد‌شده را برای اصلاح یا تکرار برگردانید و سابقهٔ تصمیم را نگه دارید.
پرسش‌های پرتکرار
آیا میتوان تقلب را با یک شاخص قطعی تشخیص داد؟
خیر. ESS به نقل از پژوهشهای این حوزه یادآوری میکند که هیچ روشی دقت کامل ندارد؛ به همین دلیل باید چند نشانه را کنار هم دید و برای موارد مشکوک تماس مجدد یا شنیدن صدا را اضافه کرد.
ضبط صدای مصاحبه بدون اطلاع پاسخگو مجاز است؟
در روشی که AAPOR توصیف میکند، پیش از ضبط به پاسخگو اطلاع داده میشود و او رضایت میدهد و میتواند ضبط را متوقف کند. کد بینالمللی ICC/ESOMAR هم اطلاعرسانی شفاف دربارهٔ ابزارهای ردیابی را پیش از جمعآوری داده الزامی میداند.
چند درصد مصاحبهها را باید با تماس مجدد بررسی کرد؟
عدد ثابتی برای همهٔ پروژهها وجود ندارد. بهعنوان نمونه، ESS تماس مجدد با ۱۰٪ پاسخگویان را الزامی کرده بود. هرچه پایش خودکار دقیقتر باشد، تماس مجدد را میتوان روی موارد مشکوک متمرکز کرد.
منابع
- AAPOR / American Statistical Association (2020). Falsification in Surveys — Report of the Task Force on Data Falsification. aapor.org
- European Social Survey ERIC. Data falsification in the ESS. www.europeansocialsurvey.org
- Kosyakova, Olbrich, Sakshaug & Schwanhäuser (2019). Identification of Interviewer Falsification in the IAB-BAMF-SOEP Survey of Refugees in Germany. FDZ-Methodenreport 02/2019. doku.iab.de
- ICC/ESOMAR (2025). International Code on Market, Opinion and Social Research and Data Analytics. community.esomar.org