Сугимото-дэра считается первым храмом, который был построен в Камакуре. Год его основания – 734-й. Инициативу создания храма приписывают Комё – супруге императора Сёму, которая распорядилась основать храм и тем самым умиротворить жителей разоренных восточных областей страны. В качестве священника-основателя пригласили священника Гёки.
Ранее Кадзан назначил Сугимото-дэра первым пунктом в паломническом «маршруте» Бандо, который проходил по 33 святым местам региона Канто. В подобном «маршруте» по 33 святилищам Камакуры храм Сугимото-дэра был четвертой остановкой. Три статуи богини Каннон не пострадали при пожаре, произошедшем в 1189 году. Их спас человек по имени Дзёдай-Бо и положил у подножия высокого кедра. Этот случай и дал название храму (Сугимото-дэра переводится как «Храм у основания кедра»), а также добавил популярности среди паломников. Позднее историю немного изменили, исключив спасителя, а статуи будто бы были спасены чудесным образом.
