戦国時代、北近江を支配した京極氏は、交通の便がよく軍事的にも都合の良かった伊吹山麓に館を建てました。その遺構が伊吹神社境内に残っています。京極氏の屋敷があったとされる場所には庭園跡があり、池跡や「虎石」と呼ばれる巨石などが見られます。弥高寺は伊吹山四大護国寺の一つで、戦国時代には城郭としての役割も果たしました。国の史跡になっています。