起源は、平安初期、慈覚大師の遺命を受け、泰山府君(赤山明神)をまつったのことに始まる。比叡山延暦寺の別院。
泰山府君(赤山明神)は中国では方位の神とされており、ここ赤山禅院も、御所の鬼門封じの役目を果 たしている。
秋は楓の参道が美しい。