Razumovsky invirtió una gran cantidad de dinero -todo suyo- en la construcción de una suntuosa nueva embajada en las afueras de la muralla de la ciudad, en Landstrasse, en un alto del Danubio, de estilo neoclásico. La llenó de obras de arte antiguas y modernas.

Organizó para la celebración de la nochevieja de 1814 un baile con el zar Alejandro I de Rusia como invitado de honor. Entonces celebraba la exitosa conclusión del congreso de Viena -en el que fue ascendido de conde a príncipe- después de la derrota de los aliados de Napoleón en la batalla de Leipzig. Probablemente Beethoven fue el único invitado importante que no asistió. Para acomodar a todos sus invitados, Razumovsky tenía una extensión temporal construida sobre el palacio, calentado con unas tuberías del edificio principal. A cierta hora de la mañana -después de que todos se habían marchado- se inició un fuego en las tuberías. Rápidamente llegó al piso principal. Razumovsky unió fuerzas para apagar el incendio, pero poco pudo hacer. Muchos de las habitaciones del palacio quedaron destruidas, junto con muchas de las esculturas neoclásicas que coleccionaba. En su lucha con el fuego, la vista de Razumovsky quedó dañada. Sin embargo, su espíritu fue el que quedó perceptiblemente más quebrado. Lo encontraron a la débil luz del amanecer vagando entre las ruinas de su antes espléndido palacio.