本文是通过阅读相关参考文章后,将文章整体架构重新梳理并结合自身的感悟而写成,主要介绍用户研究中常用的问卷法,其使用的场景以及问卷法的具体实施方法(非原创)。
一、问卷法的适用场景
调研方法的选择对调研目标的达成影响很大,使用错误的调研方法很可能会得不到想要的答案,所以选择合适的调研方法尤为重要。那么问卷法适合什么样的场景,而对于哪些情况又不适合呢?
适用于:调查用户的使用目的、态度和观点,例如:
1. 在产品进行重要改进之前,使用问卷让用户评估现阶段产品的满意度,以便后续改进设计;
2. 先定性研究(如访谈、焦点小组等)得出结论,再使用问卷去验证先前的结论;
3. 通过制定一些基本的客观题目(如手机使用习惯、经历等问题),研究现有的用户构成,用于筛选合适的目标用户进行深入访谈。
4. 价值观调查,安排在大型市场营销活动之前,目的是确定产品描述和促销方案。
不适合:探索用户新的、模糊的需求
二、问卷调研的实施:
1. 明确目标及受众
首先需要明确调研目标是什么,此次调研的目标用户是谁,然后结合以上问卷法的适用性原则,确定问卷法的实施范围。
2. 进行日程安排
确定使用问卷法后,开始进行日程安排,举例如下:
3. 问题设置:
(1)头脑风暴
在确定使用问卷调研的方法后,需要开始头脑风暴提出的问题了,为了问题可以更好地契合调研目标,我们需要了解目标的类型和问题的类型:
A. 目标类型
目标类型分为描述性目标和探索性目标,描述性目标往往是建立受众的背景资料,通常通过相对独立的问题可以达成。但是探索性目标往往需要通过一系列相关联的问题才能得意实现。
B. 问题类型
问题类型主要分为三种,分别是特征类型、行为类别和态度类别:
a. 特征类别:描述用户是谁,他的硬件和软件环境如何?
人口统计学:了解调查对象的概况,年龄职业?
技术问题:用户拥有的技术情况和相关经验,他们用什么手机?在管理网上隐私设置方面有多熟练?
b. 行为类别:刻画用户的行为表现。
技术运用:如何使用您关心的技术,他们每周上网频率是多少?
产品使用:什么产品功能是用户想使用的?
竞争对手:用户都访问什么其他网站?
c. 态度类别:探究用户的想法和信念。
满意度:他们喜欢您的产品吗?我们的产品是否具备他们想要的功能?
偏好:您的产品最吸引他们的是什么?
希望:他们想要什么?他们觉得缺少了些什么功能?
特征数据最为稳定,不会经常变化,可研究价值较低。行为数据和态度数据对于研究较为有价值,但会容易因时间变化而变化,因此条件允许的情况下最好隔一段时间进行一次调查,提高研究的准确性。
(2)制作问题列表
头脑风暴结束后,我们需要制作一份问题列表,问题的答案选项应该要具体、详尽且相互排斥。
问题列表如下图:
就这样问题设置结束了,下面就要开始进行问卷的设计了。
4. 问卷设计
(1)问卷结构
典型的问卷主要分为导言和正文两大块,而正文部分又可以细分为开头、中间和结尾部分:
导言:导言是整份问卷的全局说明,所以在问卷调查正式开始前,需要将此次调查的目的、调查时间、以及调查是否匿名等方式加以说明,如果有奖励也请表明,可以提前给受访者一个心理准备。
正文:
开头:开头的问题不应该太难,选择容易回答的问题,可减少问卷跳出率。
中间:可以采取受访者感兴趣与不感兴趣的问题来交替提问,这样不会让受访者感到无趣而终止填写。
结尾:一般是提问人口统计学相关问题和开放式问题,但开放性问题不宜太多。同时收集受访者的联系方式,对后续跟进研究有所帮助。
(2)问题设计原则
A. 问题简洁和明确的需要相互平衡:
您使用XXX的历史多久?—— 简洁
您第一次使用XXX是什么时候?—— 简洁、明确
您第一次使用XXX(不一定是目前最常用的这个)是什么时候?——稍微牺牲了“简洁”,但是更“明确”!
B. 问题态度中立、无诱导性
您对目前常用的XX满意吗?—— 存在诱导性
您对目前常用XX的满意程度为?—— 态度中立
C. 选项互斥
您平时上网较常浏览的内容为?
A.产品经理
B.产品运营
C.交互设计
D.用户运营
……
B选项与D选项存在着重叠 于是,删除D选项
C. 选项包含所有的可能
可以设置【其它________】选项,以确保用户始终可以作出选择;同时,选择【其它_______】选项的比例高低也反映了选项设置是否全面。
D. 选项表述易于用户理解
询问用户使用的手机操作系统时,选项“iOS(iPhone)、symbian(塞班)”就比“iOS、symbian”更容易理解,虽然前一种表达貌似不伦不类。
E.选项尽量具体,例:
您最近用了多长时间在XXX网上购物?( 错 )
A. 一些、B. 很多、C. 每天
您最近用了多长时间在XXX网上购物?( 对 )
A. 没有、B. 0-1小时、C. 2-3小时…
F. 选项表述态度中立、无诱导性
选项“时事政治”改为“时事新闻”;“愤青”改为“热衷点评时政的普通人”
G. 选项随机顺序呈现
选项应该随机顺序呈现给答题者,这样可以排除首尾选项或中间选项更易被选择的倾向。
H. 一个问题中不要包含多个问题,如果需要请拆分
您是否发现您会因为网页的加载速度慢而沮丧?( 错 )
您是否会因为网页的某些性能而沮丧?( 对 )
如果是,以下哪方面的网页性能让你沮丧?
A. 页面长度、B. 加载时间、C. 图片尺寸…
I. 问题避免极端化
您每次上网都会浏览XXX APP吗?( 错 )
你多长时间访问一次去XXX APP?( 对 )
J. 创建后续跟进问题
留下您的手机号码,后续会派发优惠券到您的账号中。
K. 包含退出选项
“以上都不是”、“不知道”、“没有答案”、“其他”。
5. 问卷执行
执行问卷的时候也不是把问卷投放到线上就完事,需要选定投放的样本、途径、还要考虑降低投放期间出现的一些偏差。
(1)确定调查样本和数量
为了得到大量的样本,且希望数据质量较高,问卷本身就会受到限制——题量要偏少。实际工作中,将问卷总题目数控制在25题之内,平均答题时间不超过300秒(来自《用户研究之问卷调查法》)。
控制好样本的数量,以下是参考《洞察用户体验》给出的人口差异与样本量的关系:
假设标准误差5%可信度95%,正常的人口差异:
1000人口=150样本量
10000人口=300样本量
100000人口=800样本量
(2)尽量避免偏差
问卷里的偏差在所难免,以下偏差需要考虑在内:
抽样偏差:样本与目标受众偏差,例如:回答闪电送问卷的都是90%是女性用户;
不回复偏差:有一部分人总是忽视您的邀请,例如:没有注意到问卷banner 的用户;
时间偏差:邀请的人参与调研时间会影响回答方式。例如:想知道是否喜欢送礼物给父母,在父母亲节前,答案可能不一样;
持续性偏差:有些用户持续一周都在加班没时间访问XXX APP,在进行调查的时候可能会错过这部分用户;
邀请性偏差:例如优惠券力度不够,可能会损失这部分“势利”的用户;
自主选择偏差:有些人就是不想做问卷,或者就是图优惠券随便填写问卷;
呈现性偏差:问卷的外观、长度、问题设置可能会让部分用户拒绝填写;
期望性偏差:用户可能填写问卷时发现与自己自身情况部分而拒绝填写问卷。
(3)选择适合的邀请方式
日常问卷的活动中可以考虑采取以下的邀请用户方式:
邀请链接(BANNER、微提示):优点成本低,不唐突/缺点是严重的自主选择性偏差。需要检测页面浏览率(pv)跟问卷填写率,算出回复率。如果回复率低,就不具有代表性。
电子邮件/短信:联系到的都是老用户。
打断式邀请:在用户浏览网页时候打断用户,让用户注意到问卷,为用户编号,根据编号抽取,确保样本随机性。
电话、面对面和标准信函调查。
6. 问卷分析
收集到问卷结果后我们可以着手进行问卷分析,并且分析结果。
(1)计算(年龄、收入)
平均数、众数、中位数检测是否受极端数值影响?
标准的是正态分布状态,若出现双峰分布(众数与平均值相差大),需要进一步分析。
(2)比较
交叉制表:通过两个问题的答案合成一份表格,发现更有针对性的问题,例如:
问题1:您看美妆类视频的频率是?
问题2:您通常喜欢看哪中类型的美妆视频?
通过交叉制表的方法,我们可以得出结论:单个商品推荐对于经常看和偶尔看的用户来说吸引力差不多,化妆教程的话,对于偶尔看的人吸引力更大。
(3)整合
有时候问题里某些选项填写的数量远远少于其他选项的数量,我们可以把它们看作一个整体,从而减少干扰,例如:
问题:您的收入是多少?
这部分可以组合成一个大组8000-20000的人的占比
(4)总结误区
有时候我们总结分析结果的时候会有一些误区,应该尽量避免:
两件事情的发生时间相当接近并不足以说明两者有因果关系 :有一群人都很喜欢一个产品并经常会用,并不足以表明喜欢产品能让人更多使用它,也不足以表明频繁使用能让人更喜欢它。例如:微信、公司的邮件。
不细分人口子群 :有时看似简单的趋势,实际上是多个不同用户人口趋势共同的结果。例如:问卷一半满意一半不满意,不代表这个产品做的中等,要看回答的分布情况——即什么年龄群的人会觉得满意,什么觉得不满意,是否主要的目标用户都觉得不满意?可以利用交叉分析。
用事实混淆观点 :问卷调查的结果通常知识用户的观点,而不是事实。有关行为的问题基本都不能预测实际行动,人们诚实地认为他们可以预测自己要如何,但是他们心理状态和面对心理状态的恐惧使其真正遇到这些情况时不那么做。
(5)解释调查数据的时候必须考虑以下几点
人们什么都想要,问卷不能确定普遍认证的特性组合,但是能够告诉您人们如何确定特性的优先级别和看重哪些特性。
人们会夸大其词,想要表现理想中的自己。
人们即使对答案没有强烈的感觉,也会选择一个,所以要设置退出项。
人们总会爱猜测调查的意图,不提引导性的问题。 例如:你赞成在XXX APP卖成人用品吗?
人们会撒谎。
7. 后续研究
如果想了解用户的价值观及其原因,访谈(知道背后的原因)、焦点小组和实地研究(了解用户的行为)都是不错的工具。
跟踪调查 :定期以相同方式调查,可以跟踪了解产品用户的变化。
精化调查 :如果已经确定用几个核心特点来定义用户群,就可以进行更多的调查,提出更多问题来加深了解。
前/后调查 :改版前后做相同的问卷调查,可以揭示出用户观点和用户人口构成的变化。
参考文章
1. 5大步骤做好一次问卷调查,作者:阿京Allen,链接:http://www.woshipm.com/user-research/1086980.html,关键词:定量、低成本、适用场景、步骤、问卷设计、样本量
摘要:调查问卷法是一种常见的定量研究方法,因为其成本低、操作性强,所以被广泛使用。本文主要讲述了问卷调查的适用场景,以及做一次问卷调查的所需的步骤,同时详细阐述了问卷调查各个环节需要注意的事项。
2. 问卷法在用户研究中的应用,作者:小释界,链接:http://www.woshipm.com/user-research/710242.html,关键词:使用场景、日程安排、问卷设计、实施、样本大小
摘要:文章主要从what,why,when,how四个角度去阐述什么事调研问卷法,为什么使用调研问卷法,什么场景下使用,以及如何落实调研问卷法。
3. 名称:用户研究之问卷调查法(全总结),作者:抖音小编,链接:http://www.woshipm.com/user-research/703704.html
摘要:文章总结了问卷调查设计的一些细节以及主要设计内容,分享给大家,希望给大家工作带来帮助。