逆にいえば、どれだけ立派な目的があり、どれだけ沢山データが出ても、上記のような流れで考察が機械的に導き出せない状況であるならば、実験者がよほど未熟な場合を除き、目的、取得すべきデータの測定計画の少なくとも片方を修正せねばならないということになる。考察が出来ない理由としては、得られた結果が当初の予想のいずれをも支持しているとも反証しているとも言い難い場合（非常によくある）か、あるいは計画段階の予想を大きくはずれる結果となったか、実験の計画がほとんどまともに行われていなかったかである。このようなケースは、考察が難しいというよりも、実験計画自体に問題があったと考えた方が良い。得られた結果が当初の予想のいずれをも支持しているとも反証しているとも言い難い場合というのは、得られた結果の一部、あるいは全部が当初予想したモデルのいずれとの関係も微妙、つまりポジティブな結果ともネガティブな結果とも言い難いことである。得られた結果が当初の予想のいずれをも支持しているとも反証しているとも言い難い場合はよくあり、したがってリサーチクエスチョンを思い付いた直後に本式のデータを取ろうと試みることは賢くない。通常は、いくつものリサーチクエスチョンをもち、どういうデータが面白いのかをよく熟考した上で、際立った特徴のあるデータが取得される条件等に関する辺りをつけるための「予備実験」や「基礎検討」をしつこく行う必要がある。「予備実験」や「基礎検討」に関しては、必ずしも「実験計画法」が理想とする「全盲」な実験を行う必要はない。そのようなことをすれば、逆に何を行っているのか分からなくなる場合がある。実験計画法が理想とする「全盲」な実験は、「実証実験」の際に行えばよい。このときには、既に研究の勝負は終わった後である。