望海禅寺建在祖山山腰，它背西面东，三面环绕高山，一面通向画廊谷，站在寺院里透过画廊谷能够东望渤海，所以古人把这座寺院叫作"望海寺"，2009年复建完工后更名为"望海禅寺"。
据清代《临榆县志》记载，望海禅寺始建于金代大定年间，也就是公元1161至1189年间，由比丘张三峰创建，至今已有800多年的历史。到了明代曾经进行三次重修，第一次是在天顺年间，也就是公元1457至1464年间，由僧人张净朗重修；第二次是在正德四年，就是1509年，由僧人李道敏重修；第三次是在崇祯元年，就是公元1628年，由僧人云祥重修。到了清代康熙四十五年，就是公元1706年，由僧人庄福再度重修。清代中期以后，无人修繕，废砖烂瓦散落林间，人们都叫它"砖庙"。
望海禅寺不仅人文景观很好，周围的自然景观也非常优美，素有"环寺八景"之称，它们分别是：渤海船影，醉卧刘伶，龟兔赛跑，和合二仙，天女云床，秀才看榜，万壑松涛，神龟探海。一个栩栩如生，活灵活现，把望海禅寺衬托得更加雄伟壮观，大有深山藏古寺的味道。
天王殿铜匾上铸有"望海禅寺"四个大字，上款是："徐汉有合家敬立"。下款为："岁次戊子冬日马世晓瑾书"。戊子冬日指2008年冬天；马世晓先生为中国书协理事、浙江大学教授。
门口的铜匾上铸有"伽蓝殿"三个篆字，落款为"叶特烈敬尚"， 叶特烈先生是杭州人，中国美术学院诸乐山教授的学生。
门口铜匾上铸有"观音殿"三个大字，落款为"戊子冬月崔自默"。崔自默先生是北京人，著名画家范曾先生的弟子。
