Фигня полная, не от потенции, а от временных затрат на обеспечение комфортного условия жизни.
Время есть и деньги - развлекавшийся (допустим резьбой по дереву, марки собираешь, ножи делаешь, ну и т.д).
Нету денег и времени - пашешь как папа Карло за кусок хлеба.
У кого развлекуха деньги - тот пашет ради количества денег.
Если комфортные условия жизни и время есть, стресса нет, то и с сексом проблем нет. А если заморочен только хлебом насущным, то и не до плотских утех, все силы (физические и моральные) на борьбу за существование уходят.