Objekt je nad úrovní terénu renesanční novostavbou někde z konce 16.století. Sklepy pod bodovou jsou středověké, patřily patrně ještě roubenému stavení, které s největší pravděpodobnosti nepředstupovalo do náměstí. Dům byl výrazně klasicistně přestavěn po požáru města roku 1797. V roce 1940 byla do podkroví vestavěna obytná jednotka
K tomuto domu se váže příběh, který se týká sporu měšťanů z Frýdlantu a Kateřiny z Redernů o práva várečná. Dle lidového podání se uvádí, že dům byl vystavěn ve zlém úmyslu Kateřinou z Redernů, tak aby vyčníval daleko z řady domů dopředu, aby hrubě porušil čtverec frýdlantského náměstí. Tohoto násilného přestoupení jednotné stavební linie by bývala šlechtična Kateřina z Redernů byla schopna, neboť byla náležitě známa její nenávist proti Frýdlantským. Je těžké zpětně určit přesné stavební rozměry tohoto domu před více než 300 lety, když v letech 1606, 1634, 1797 dům úplně vyhořel. Dům náležel panu Kryštofu Zestermannovi, který byl s malým přerušením mezi léty 1598-1615 purkmistrem města. Zemřel 24. ledna 1615 ve vězení frýdlantského zámku, jako jedna z obětí násilného smýšlení Kateřiny. Jeho synu bylo odňato právo dědičné na dům, dům byl posléze převzat hraběnkou Kateřinou do nucené správy. Tehdy prý hledala hraběnka ve vlastnictví města Frýdlantu prodejnu pro panské pivo. Před dům Zestermannův dala vystaviti přístavbu, sahající daleko do náměstí a ta byla zařízena jako hraběcí výčepna. Původní Zestermannův dům ležel ve správné stavební linii…Tolik jeden z příběhů o osudu domu Na panské zvůli.
Mapa
Frýdlant