Здание конного двора носит на себе следы двух строительных периодов. Обрамления окон его нижней части, и окружающая их рустовка, выполнены в обычных классических формах, тогда как второй этаж имеет стрельчатые готические проемы. В этом сказалось желание придать архитектуре дух средневековья, как его понимали сторонники романтического направления в тогдашнем русском искусстве. Полагают, что прежде здание имело внизу проезд и завершалось высокой башней сложного силуэта, а с обоих боков к нему примыкали одноэтажные пристройки.