源頼朝の死後、長子・頼家が将軍となったが、御家人の不満や北条氏との対立によって、当寺に幽閉され、やがて暗殺された。
その後、将軍を継いだ実朝は政務を好まず、政治の実際は北条政子と北条氏の手によって行われるようになった。