Dříve se dům v Seminářské ulici nazýval U Panny Marie (nebo "U Naší milé Paní"). Jeho poloha v nepravidelné křivolaké uličce dokazuje velmi starý původ domu podle urbanistické struktury středověkého města, pro niž jsou typické právě křivé uličky lemované na sebe natěsnanými domy na úzkých dlouhých parcelách. Přesto je stavební historie domu nejasná, víme jen, že vznikl dodatečným rozdělením většího sousedního objektu.
Dnešní podoba exteriéru i interiéru je výsledkem novodobé úpravy pozdně klasicistní fasády. Nejstarší část domu představuje gotický sklep s nezvykle masivní zdí, kde se taktéž zachoval zbytek kamenné, nepochybně středověké klenby. Do roku 1433 byl dům součástí sousedního čp.175, s nímž pravděpodobně souvisely sklepní prostory. Asi až v 17. nebo na samém počátku 18. století, došlo k úplnému osamostatnění a další přestavbě. Tehdy byl objekt zvýšen o 3. patro. Vstup do domu rámuje pískovcový barokní stuhový portál s nadsvětlíkem.