往古は真言宗の道場であったが、天正年中、美作国大庭郡の人、願誉行善上人が富士山に練行し霊告を蒙り弥陀三尊を感得し、当所に来りて専称念仏して住し浄土宗として開山した。 山号を昆沙門山と号したのは、この地に古くから昆沙門堂があったことに起因する。