飛騨高山は、江戸幕府の天領でしたが、日枝神社や櫻山八幡宮の祭礼を許されたことから、祭屋台の構造や装飾も華美なものとなったと考えられています。現存する高山祭の屋台は、２３基あり、氏子である各町内の屋台組が、今も保存に努めています。

明治40年に建築され、国の重要文化財に指定されています。吉島家の建物は、その隅々まで神経のゆきとどいた、繊細さと女性的な美しさのある建物といわれています。大黒柱を中心に、梁と束（短い柱）によって構成される吹抜は、高窓からの光線をたくみに室内に取り入れ、柱や鏡戸の木目を美しく見せています。

1510年頃に、高山外記によって城が築かれたといわれ、その後、天正16年（1588）から元禄5年（1692）までは金森家代々の居城とされたところです。山城としては、「日本国中に５つとない見事な城」とうたわれたものの江戸幕府の直轄地となり、1695年に取り壊され、当時の面影を、わずかに残る石垣等に偲ぶことができます。現在、名城と謳われた高山城跡は、市民が親しむ公園となっています。

七重塔を建立した、棟梁の寸法違いを、棟梁の娘の機転で解決したのですが、素人の娘が出したアイデアでできあがったという事が世間に知れるのを恐れ殺害してしまい、亡骸を塔の近くに埋め、銀杏を植えた。という昔話が伝わっています。この銀杏はある秋の日に、まれにドカッと落葉することがあるそうで、高山では、その冬は大雪になるという言い伝えもあります。