V obci stojí renesanční zámek z doby kolem roku 1580. Náležel Zárubovým z Hustiřan, u nichž byl hostem Komenský v letech 1627 – 1628 před odchodem do polského Lešna. V Horní Branné se Komenský poprvé setkal s Kristinou Poniatowskou. Jeho pobyt zde připomíná Památník J. A. Komenského.