今までに何度か登った弘浪山山上には高山寺跡があり伽藍跡に高さ凡そ30m程・目通り6m程の大イチョウが立つ。南北朝期以降南朝方の砦として、足利尊氏の武将で丹波守護になった仁木頼章や、其の守護代の在地土豪：荻野朝忠も南朝に付いて此処に拠り、「太平記」にも後醍醐天皇の挙兵には千種忠顕に従って六波羅に幕府を攻めたが敗れ、児島高徳・在地の荻野朝忠や本庄氏らが（旧）高山寺に拠ったことが記されている。