Ehemals war es wohl eines der schönsten Fachwerkhäuser der Stadt. Einige Quellen schreiben gar, dass es bis zu seiner Zerstörung am 26. Juli 1944 das prächtigste Fachwerkhaus Stuttgarts gewesen sei. Die Ursprünge des ehemaligen Gasthauses und späteren Cafés 'König von England' gehen bis ins 16. Jahrhundert zurück.
Im Jahr 1798 wurde es durch den damaligen herzoglichen Oberbaudirektor Reinhard Ferdinand Heinrich Fischer, seit 1775 zudem Professor für Baukunst an der Akademie der Hohen Carlsschule, zum Gasthof umgebaut. Vor allem die Innengestaltung und da ganz besonders der Saal im 2. Obergeschoss waren geprägt vom Klassizismus.
Die kulturgeschichtliche Bedeutung des 'König von England' steht in enger Verbindung mit der Ende des 17. Jahrhunderts aufkommenden Caféhaus-Kultur. Nachdem in Hamburg 1687, in Leipzig 1694 und in Bremen 1697 die ersten Caféhäuser in Deutschland eröffnet wurden, zog Stuttgart 1712 mit dem Café im Haus 'König von England' nach. In prachtvoller Umgebung von Altem Schloss, Stiftskirche, Fruchtkasten, Prinzenbau und Alter Kanzlei entstand Stuttgarts erstes Café.
Nach dem Krieg wurde unter Leitung des Architekten Karl Gonser in den Jahren 1954 bis 1956 auf dem alten Grundriss der heute noch vorhandene Bau als Laden- und Büroneubau errichtet. Durch seine eher zurückhaltende Fassadengestaltung aus Travertin fügt sich der Bau städtebaulich auf bemerkenswerte Weise in seine Umgebung ein. Aufgelockert wird die gleichförmige, schlicht gehaltene Fassade durch den asymmetrisch angeordneten Erker.
Typisch für jene Zeit sind sicherlich die Mosaiksteinchen, welche die Decken des Baus zieren. Diese kann man bei genauer Betrachtung z.B. an der Deckenkante, sowie der Deckenunterseite oberhalb der Arkadenstützen im Außenbereich entdecken.
Der Erweiterungsbau längs der Kirchstraße ist ebenfalls unter Gonser's Planung in den Jahren 1960/61 entstanden.
Heute befinden sich in der Erdgeschossebene verschiedene Geschäfte. Die oberen Etagen werden vom Ministerium für Finanzen und Wirtschaft Baden-Württemberg genutzt.