古くは正受院と称していた。文亀2年（1502）火災で焼失し、仏像だけが残った。永正8年（1511）伊豫の人、頓誉上人1寺を建立、当山の中興の開山とする。慶長9年（1604）火災で焼失、慶長11年（1606）地の領主吉井相模守が大檀那となって再建、その法名、快念居士を取って快念寺と称するに至った。 宝永6年（1709）本堂大修理で茅葺きが瓦葺きになった。 文化7年（1810）庫裡、文政6年（1823）本堂改築。 昭和44年（1969）庫裡改築昭和57年（1982）本堂大修理、境内整備、裏山削り取り。