À l'origine, il y avait trois maisons sur le terrain, jusqu'à ce qu'Emanuel Teles de Silva, conseiller de l'impératrice Marie-Thérèse, qui était venu à la cour viennoise de Lisbonne vers 1720, fit construire un palais sur la propriété de la maison numéro 9 en 1745. Un peu plus tard, c'est devenu la résidence du prince Charles-Alexandre de Lorraine, gouverneur général des Pays-Bas autrichiens. La famille Silva a construit un nouveau palais juste à côté au numéro 11.
Le roi Georges V de Hanovre, 2e duc de Cumberland, est venu après la guerre austro-prussienne, en 1866, fuyant à Vienne. Ici, il a acquis les deux bâtiments en 1868. De plus, il a acheté la maison du chasseur impérial au numéro 13 qui est transformée en résidence en exil. En 1878, le roi aveugle George V mourut à Paris et fut enterré à Londres. Son fils Ernest-Auguste de Hanovre, 3e duc de Cumberland, fit construire, déjà avant la mort de son père, le vaste château de Cumberland à Gmunden comme sa résidence en exil dans le style néogothique alors à la mode.
À l'extrémité est du palais Cumberland, Marie-Thérèse fit construire la caserne de Penzing comme caserne de cavalerie en 1758. Cette caserne a été démolie en 1839/1840. L'ancien terrain de parade de la caserne formait le jardin du palais après 1841.
Après la fin de la Première Guerre mondiale et l'effondrement de la monarchie des Habsbourg, l'ambassade de la République tchécoslovaque a emménagé dans le bâtiment au numéro 11–13 en 1921. Aujourd'hui, l'ambassade de la République tchèque se trouve ici. En 1940, le Séminaire Max Reinhardt, la célèbre école de théâtre, s'installe dans la partie du palais au numéro 9.
