چرا فقط باید با 5 کاربر آزمایش کنید

خلاصه: آزمایشات قابلیت استفاده دقیق هدر دادن منابع است. بهترین نتیجه از آزمایش بیش از 5 کاربر حاصل می شود و به همان تعداد تست های کوچک که می توانید انجام دهید ، انجام می شود.

توسط Jakob Nielsen

در 2000-03-18 مارس 2000

مباحث:

• آزمایش کاربر آزمایش کاربر

این مقاله را به اشتراک بگذارید:

برخی فکر می کنند قابلیت استفاده بسیار پرهزینه و پیچیده است و آزمایشات کاربر باید برای پروژه طراحی نادر وب با بودجه عظیم و یک برنامه زمانی اسراف محفوظ باشد. درست نیست. آزمایشات قابلیت استفاده دقیق هدر دادن منابع است. بهترین نتیجه از آزمایش بیش از 5 کاربر حاصل می شود و به همان تعداد تست های کوچک که می توانید انجام دهید ، انجام می شود.

در تحقیقات قبلی ، من و تام لاندوئر نشان دادیم که تعداد مشکلات قابلیت استفاده در یک تست قابلیت استفاده با کاربران N وجود دارد:

جایی که n تعداد کل مشکلات قابلیت استفاده در طراحی است و L نسبت مشکلات قابلیت استفاده در هنگام آزمایش یک کاربر واحد است. ارزش معمولی L 31 ٪ است ، که به طور متوسط در تعداد زیادی از پروژه هایی که ما مطالعه کردیم. ترسیم منحنی برای L = 31 ٪ نتیجه زیر را می دهد:

جالب ترین حقیقت منحنی این است که کاربران صفر بینش صفر می دهند.

به محض اینکه داده ها را از یک کاربر آزمایشی جمع می کنید ، بینش شما شلیک می کند و تقریباً یک سوم از همه را یاد گرفته اید که در مورد قابلیت استفاده از طراحی بدانید. تفاوت بین صفر و حتی کمی از داده ها حیرت انگیز است.

هنگامی که کاربر دوم را آزمایش می کنید ، خواهید فهمید که این شخص برخی از موارد مشابه کاربر اول را انجام می دهد ، بنابراین در آنچه یاد می گیرید همپوشانی وجود دارد. مردم قطعاً متفاوت هستند ، بنابراین چیز جدیدی نیز وجود خواهد داشت که کاربر دوم انجام می دهد که شما با کاربر اول مشاهده نکردید. بنابراین کاربر دوم مقداری بینش جدید اضافه می کند ، اما تقریباً به اندازه کاربر اول نیست.

کاربر سوم کارهایی را انجام می دهد که قبلاً با کاربر اول یا با کاربر دوم و حتی برخی از مواردی که قبلاً دو بار دیده اید مشاهده کرده اید. به علاوه ، البته ، کاربر سوم مقدار کمی از داده های جدید تولید می کند ، حتی اگر نه به اندازه کاربر اول و دوم.

هرچه کاربران بیشتری را اضافه می کنید ، کمتر و کمتر یاد می گیرید زیرا دوباره و دوباره همین موارد را می بینید. نیازی به رعایت همان چیزها چند بار دیگر وجود ندارد ، و شما بسیار انگیزه خواهید داشت که به صفحه نقاشی برگردید و سایت را دوباره طراحی کنید تا مشکلات قابلیت استفاده را از بین ببرید.

بعد از پنجمین کاربر ، شما با مشاهده همان یافته ها به طور مکرر ، اما یاد نمی گیرید که بسیار جدید نیستید ، وقت خود را هدر می دهید.

طراحی تکراری

منحنی به وضوح نشان می دهد که شما باید حداقل با 15 کاربر آزمایش کنید تا تمام مشکلات قابلیت استفاده در طراحی را کشف کنید. بنابراین چرا توصیه می کنم با تعداد بسیار کمتری از کاربران آزمایش کنید؟

دلیل اصلی این است که بهتر است به جای دمیدن همه چیز در یک مطالعه واحد و دقیق ، بودجه خود را برای آزمایش کاربر در بسیاری از تست های کوچک توزیع کنید. بگذارید بگوییم که شما بودجه لازم برای استخدام 15 مشتری نماینده را دارید و از آنها استفاده می کنید. عالی. این بودجه را در 3 مطالعه با 5 کاربر هرکدام صرف کنید!

شما می خواهید چندین آزمایش را انجام دهید زیرا هدف واقعی مهندسی قابلیت استفاده بهبود طراحی و نه فقط مستند کردن نقاط ضعف آن است. پس از اولین مطالعه با پنج شرکت کننده 85 ٪ از مشکلات قابلیت استفاده را پیدا کرده است ، شما می خواهید این مشکلات را در یک طراحی مجدد برطرف کنید.

پس از ایجاد طرح جدید ، باید دوباره تست کنید. حتی اگر من گفتم که طراحی مجدد باید مشکلات موجود در مطالعه اول را برطرف کند ، حقیقت این است که شما فکر می کنید که طراحی جدید بر مشکلات غلبه می کند. اما از آنجا که هیچ کس نمی تواند رابط کاربری کامل را طراحی کند ، هیچ تضمینی وجود ندارد که طرح جدید در واقع مشکلات را برطرف کند. آزمایش دوم کشف خواهد کرد که آیا اصلاحات کار کرده است یا اینکه آیا آنها این کار را نکرده اند. همچنین ، در معرفی یک طرح جدید ، همیشه خطر معرفی یک مشکل قابلیت استفاده جدید وجود دارد ، حتی اگر قدیمی برطرف شود.

همچنین ، مطالعه دوم با 5 کاربر بیشتر 15 ٪ از مشکلات اصلی قابلیت استفاده را که در دور اول آزمایش یافت نشد ، کشف می کند.(هنوز 2 ٪ از مشکلات اصلی باقی مانده است - آنها باید منتظر بمانند تا مطالعه سوم مشخص شود.)

سرانجام ، مطالعه دوم قادر خواهد بود تا در مورد قابلیت استفاده از ساختار اساسی سایت ، ارزیابی موضوعاتی مانند معماری اطلاعات ، جریان کار و مطابقت با نیازهای کاربر را بررسی کند. این موضوعات مهم اغلب در مطالعات اولیه مبهم است که کاربران در اثر مشکلات قابلیت استفاده در سطح سطح احمقانه که مانع از حفر آنها در سایت می شود ، تحت تأثیر قرار می گیرند.

بنابراین مطالعه دوم هم به عنوان تضمین کیفیت نتیجه مطالعه اول عمل می کند و هم به ارائه بینش های عمیق تر کمک می کند. مطالعه دوم همیشه به لیست جدیدی (اما کوچکتر) از مشکلات قابلیت استفاده برای رفع آنها در طراحی مجدد منجر می شود. و همین بینش در مورد این طراحی مجدد صدق می کند: همه اصلاحات کار نمی کنند. برخی از مسائل عمیق تر پس از تمیز کردن رابط آشکار می شوند. بنابراین، مطالعه سوم نیز مورد نیاز است.

تجربه کاربر نهایی با 3 مطالعه با هر 5 کاربر بسیار بیشتر از یک مطالعه هیولایی منفرد با 15 کاربر بهبود یافته است.

چرا با یک کاربر تست نمی کنید؟

ممکن است فکر کنید که 15 مطالعه با یک کاربر حتی بهتر از 3 مطالعه با 5 کاربر است. منحنی نشان می دهد که ما از کاربر اول خیلی بیشتر از هر کاربر بعدی یاد می گیریم، پس چرا ادامه دهیم؟دو دلیل:

• همیشه خطر گمراه شدن توسط رفتار جعلی یک فرد مجرد وجود دارد که ممکن است اعمال خاصی را به طور تصادفی یا به روشی غیرنماینده انجام دهد. حتی 3 کاربر برای دریافت ایده ای از تنوع در رفتار کاربر و بینش در مورد منحصر به فرد بودن و آنچه که می توان تعمیم داد کافی است.
• تجزیه و تحلیل هزینه و فایده تست کاربر، بسته به سبک آزمایش، نسبت بهینه را در حدود 3 یا 5 کاربر ارائه می دهد. همیشه یک هزینه اولیه ثابت در ارتباط با برنامه ریزی و اجرای یک مطالعه وجود دارد: بهتر است این هزینه راه اندازی را در میان یافته های چندین کاربر کاهش دهید.

چه زمانی کاربران بیشتری را آزمایش کنیم

هنگامی که یک وب سایت دارای چندین گروه کاملاً متمایز از کاربران است، باید کاربران بیشتری را آزمایش کنید. این فرمول فقط برای کاربران قابل مقایسه ای که از سایت به روش های تقریباً مشابهی استفاده خواهند کرد صادق است.

به عنوان مثال، اگر سایتی دارید که هم فرزندان و هم والدین از آن استفاده می کنند، در این صورت رفتار دو گروه از کاربران به اندازه کافی متفاوت خواهد بود که آزمایش با افراد هر دو گروه ضروری می شود. همین امر برای سیستمی که هدف آن ارتباط نمایندگان خرید با کارکنان فروش است صادق است.

حتی زمانی که گروه های کاربران بسیار متفاوت باشند، باز هم شباهت های زیادی بین مشاهدات دو گروه وجود خواهد داشت. بالاخره همه کاربران انسان هستند. همچنین، بسیاری از مشکلات قابلیت استفاده به روش اساسی تعامل افراد با وب و تأثیر سایر سایت ها بر رفتار کاربر مربوط می شود.

در آزمایش چندین گروه از کاربران متفاوت ، نیازی نیست که تعداد زیادی از اعضای هر گروه را همانطور که می خواهید در یک آزمایش واحد از یک گروه واحد از کاربران قرار دهید. همپوشانی بین مشاهدات نتیجه بهتری از آزمایش تعداد کمتری از افراد در هر گروه را تضمین می کند. توصیه می کنم:

• 3-4 کاربر از هر گروه در صورت تست دو گروه از کاربران
• 3 کاربر از هر گروه در صورت تست سه یا چند گروه از کاربران (شما همیشه حداقل 3 کاربر می خواهید تا اطمینان حاصل کنند که تنوع رفتار را در گروه پوشش داده اید)

ارجاع

Nielsen ، Jakob و Landauer ، Thomas K: "یک مدل ریاضی از یافتن مشکلات قابلیت استفاده" ، مجموعه مقالات کنفرانس ACM Interchi'93 (آمستردام ، هلند ، 24-29 آوریل 1993) ، صص 206-213.

مقالات پیگیری

• تجزیه و تحلیل جدیدتر از مسئله مورد بحث در این مقاله: چند کاربر آزمون در یک مطالعه قابلیت استفاده؟: تست 20 کاربر: 15 کاربر را آزمایش کنید

• اشتراک گذاری:

• این مقاله را به اشتراک بگذارید: ||

درباره نویسنده

Jakob Nielsen ، دکتری ، مدافع کاربر و مدیر گروه نیلسن نورمن است که وی با دکتر دونالد A. نورمن (VP سابق تحقیقات در اپل رایانه) تأسیس کرد. دکتر نیلسن جنبش "مهندسی قابلیت استفاده تخفیف" را برای پیشرفت های سریع و ارزان رابط های کاربر ایجاد کرد و چندین روش قابلیت استفاده از جمله ارزیابی اکتشافی را اختراع کرده است. وی دارای 79 حق ثبت اختراع ایالات متحده است ، عمدتاً در مورد روشهای ساده تر استفاده از اینترنت.

در خبرنامه نامه الکترونیکی Alertbox مشترک ما مشترک شوید:

آخرین مقالات در مورد قابلیت استفاده رابط ، طراحی وب سایت و تحقیقات UX از گروه نیلسن نورمن.