NPÚ by v objektu chtěl ve spolupráci s ministerstvem kultury provozovat vzdělávací centrum a sídlit by v něm měl i Pražský filharmonický sbor a další příspěvkové organizace zřizované ministerstvem kultury. V Invalidovně by mohly být i výstavní prostory.

Objekt byl postaven v letech 1731 až 1737 jako útulek pro válečné vysloužilce. Stavitelům byla vzorem podobná budova v Paříži. Plány na stavbu vypracoval slavný stavitel Kilián Ignác Dientzenhofer v roce 1730, pro nedostatek financí se z návrhu realizovala jen devítina. K ubytování válečných invalidů budova sloužila do roku 1935. Donedávna v budově působil Vojenský ústřední archiv, který se přestěhoval do objektu v areálu kasáren v Praze-Ruzyni. Ministerstvo obrany pak převedlo Invalidovnu na základě usnesení vlády na ÚZSVM.