徳川氏祖先の寺とされる長楽寺境内に三代将軍家光の代に造られた。
拝殿は二代秀忠により日光に創建された社殿を移築したものである。
江戸時代、天皇や幕府の使いが参向する時だけ使われたこの門はそれ以外開かれなかったので、「あかずの門」と呼ばれている。
