距今1,500年前左右，屯門有座海拔500多米的高山，據說山上蒼松翠杉連綿不斷，氣象萬千，是修道的好地方。後來，果然來了一位不知姓名的奇僧住錫，但見他行藏莫測，渡河時乘坐大木杯，時人便稱他為杯渡禪師，為紀念此事，更將這片山清水靈的聖地命名杯渡山，又在山上建立杯渡寺。原來這就是香港第一間佛寺的由來，昔日的杯渡寺，正是今天三大古剎之首──青山寺的前身。