Что плохого в Lazy Loading?

Плюсы слышал, знаю, а что на счёт недостатков паттерна?

Ну, из недостатков можно явно выделить то, что при первом обращении к объекту случается небольшая задержка, посколько нужно время для создания объекта...

Казалось бы, этот недостаток вовсе и не такой и недостаток, но к примеру в игровой индустрии каждая такая задержка при создании нового объекта займёт порядочно времени и в результате игра будет очень сильно виснуть. Ну и нельзя явно указать порядок инициализируемых объектов, это тоже недостаток в некоторых случаях.