Эпидемий и неурожаев для этого было недостаточно.
Кроме того, войны препятствовали развитию стабильной экономики, и как следствие - поискам лекарств против инфекций, средств повышающих плодородность почвы и т.д.

"сознательное ограничение рождаемости, но на это слишком у многих не хватает мозгов"
Не, хомосапиенсы в основной своей массе это не потянут.