Вместе с тем понятие простоты не является однозначным. Можно говорить о простоте допущений, лежащих в основе теоретического обобщения, о независимости друг от друга таких допущений. Но простота может пониматься и как удобство манипулирования, лёгкость изучения и т.д. Не очевидно также, что стремление обойтись меньшим числом посылок, взятое само по себе, повышает надёжность выводимого из них заключения.

«Казалось бы, разумно искать простейшее решение, – пишет логик и философ У.Куайн. – Но это предполагаемое свойство простоты намного легче почувствовать, чем описать». И тем не менее, продолжает он, «действующие нормы простоты, как бы их ни было трудно сформулировать, играют все более важную роль. В компетенцию учёного входит обобщение и экстраполяция образцовых данных и, следовательно, постижение законов, покрывающих больше явлений, чем было учтено; и простота в его понимании как раз и есть то, что служит основанием для экстраполяции. Простота относится к сущности статистического вывода. Если данные учёного представлены в виде точек графа, а закон должен быть представлен в виде кривой, проходящей через эти точки, то он чертит самую плавную, самую простую кривую, какую только может. Он даже немного воздействует на точки, чтобы упростить задачу, оправдываясь неточностью измерений. Если он может получить более простую кривую, вообще опустив некоторые точки, он старается объяснить их особым образом… Чем бы ни была простота, она не просто увлечение».

Ещё одним общим принципом, часто используемым при оценке выдвигаемых предположений, является так называемый принцип привычности. Он рекомендует избегать неоправданных новаций и стараться, насколько это возможно, объяснять новые явления с помощью известных законов. «Польза принципа привычности для непрерывной активности творческого воображения, – пишет У.Куайн, – является своего рода парадоксом. Консерватизм, предпочтение унаследованной или выработанной концептуальной схемы своей собственной проделанной работе является одновременно и защитной реакцией лени, и стратегией открытия». Если, однако, простота и консерватизм дают противоположные рекомендации, предпочтение должно быть отдано простоте.