
Palác vystavěl pro Maxmiliána hraběte Desfourse na konci 18. století architekt Ignác Palliardi. Na jeho místě stávaly tři středověké domy. Jeden z nich, zvaný U Salátů, na začátku 18. století patřil sochařské rodině Brokoffů. První majitel palác prodal roku 1795 Anně Wimmerové, manželce zbohatlíka a mecenáše Jakuba Wimmera. V roce 1800 hostili Wimmerové ve svém paláci ruského vojevůdce Alexandra Vasiljeviče Suvorova, velitele protinapoleonské koalice rusko-rakouských vojsk. Synové Jakuba Wimmera palác prodali Ignáci Kolbemu. Jeho syn Ferdinand nechal v roce 1852 zvýšit levé křídlo objektu a po roce 1864 přistavěl jedno patro celému objektu. Po smrti Ferdinanda Kolbeho získala palác manželka pražského průmyslníka Rosa Porgesová. Porgesové z Portheimu vlastnili palác do druhé světové války. Po ní se dům stal majetkem Pražské plynárny v Michli. Ta nechala palác koncem 90. let 20. století zrekonstruovat a zpřístupnit jeho nádvoří veřejnosti.