Budova obklopující nádvoří je nejmladší stavbou v celém areálu. Byla vystavěna v první polovině 18. století v éře posledních Piccolominiů. Stavba v minulosti sloužila pro správu náchodského panství - zde se nacházely kanceláře a byty úředníků.