另一方面，调查问卷或者说任何一种样本调查的方法均存在缺陷。问题之一就是答案的可靠性。在一大群人中，如果我问，请指出这是一个长句还是一个短句。每一名被调查者只能选择“长”或者“短”这两个答案中的一个。55%的人可能回答“长”，同时，就会有45%的人回答“短”。因为这是一个既定选择问题，这个问题会迫使那些认为既不长也不短的人去选择这两个极端选项中的一个。这种方法可以用来清除中间派或者判断人们的倾向。但是，如果明天再问一次，他们可能会选择相反的答案，因为有很多人并不确定。
另一个问题，通过调查问卷得出的结论可能是无效的。在上面的例子中，我可能会得出这样一个结论：大多数人认为有17个单词的句子是长句。但是，没有考虑调查对象样本人数是否足够多，55%和45%之间是否存在很大的差异，并且也没有另外17个单词组成的句子做对比，因此，上述结论有可能是完全无效的。更进一步说，问卷调查并没有让人理解什么情况下的长才是真正的长。
问卷调查的许多问题都可以通过有经验的专家和合理的问卷设计来解决。然而，即使是最好的专家和最优秀的问卷设计也不敢保证从这些所谓的“量化研究”中得出的结论是最终的结果。
通常情况下，调查研究有助于判断。依据调查研究的类型不同，有的研究可能对形成判断很有帮助，有的却微乎其微。这通常也会影响判断力的强弱。当然，这绝不是对调查研究的一种污蔑。但是，从我的调查研究生涯中所学到的最重要一课可以归纳为一个词：处处小心。