位於橫山城山腳下的觀音寺是歷史上秀吉和石田三成會面的地方，現在是一條登山步道。橫山城的建造年代不詳，但曾是京極氏的分城。 1517 年（永正 14 年），該城被淺井亮政攻陷，之後，1564 年（永樂 4 年），小谷城主淺井長政以小野木重俊為軍師重建了該城。在安內川之戰中，織田軍和德川軍攻打橫山城，並任命木下藤吉郎秀吉為城主。 1573 年，信長攻入小谷城，淺井氏被滅。如今，橫山城遺址包括主城樓遺跡、空護城河和土城，在周邊地區還發現了相關的防禦工事遺跡。