Строительство здания, в котором впоследствии находились покои Святителя, было начато в 1705 году при митрополите Иустине и закончено 1707 году. В новом помещении митрополит разместил архиерейские кельи и в них открыл небольшую домовую церковь в честь Преподобных Антония и Феодосия Печерских. Ко времени открытия мощей Свт. Иоасафа в 1911 году, покои, кроме внутренней отделки, сохранились в неизменном виде. Этому способствовало то обстоятельство, что когда покои оказывались тесными, то их расширяли не переделками, а пристройками с юга, где постепенно и построился архиерейский дом, вплотную примыкавший к ним.
В святительских покоях было семь комнат. Парадная лестница была украшена замечательными лепными украшениями. Потолок и откосы зала были расписаны картинами из жизни Святителя. Из зала через гостиную входили в небольшую церковь им. Святителя Иоасафа и Преподобных Антония и Феодосия Печерских, освященную 15 апреля 1914 года. В боковых комнатах хранились грамоты с собственноручными подписями святителя Иоасафа. Покои посещало множество людей. В отдельные дни, особенно летом, через них проходило до шести тысяч человек.