Деякі з більш «матеріалістичних» причин відмови від відновлення включають необхідність залишити ферми та інші форми життєзабезпечення праці для роботи в храмі, те, чого багато людей не відчували б здатними чи бажаючими зробити, особливо у важкі часи.

Невдача відновити Храм була приписують землетрусу в Галілеї 363 р. н. е. і власному двоїстому ставленню євреїв до проекту. Можливий саботаж, як і випадкова пожежа.

Ездра 5–6 розповідає історію про те, як євреї знову отримали дозвіл продовжувати відбудову храму в Єрусалимі після самаритяни успішно зупинив будівельний проект.

У цьому його переконали його чиновники існувала загроза безпеці його царства. Тому він наказав припинити проект. Питання безпеки належать до повноважень (або «сфери») короля. Отже, євреї підкорилися цивільній владі, припинивши роботу над храмом.

Хоча Храм тут згадується як єдина інституція, важливо зазначити, що Єрусалимський храм був відбудований не менше трьох разів в античності. Перший був зведений за Соломона, як дуже докладно описано в 1 Царів 5-6, приблизно в 10 столітті до нашої ери.