Музейный комплекс сохранил типичный облик городской купеческой усадьбы конца XIX века: двухэтажный кирпичный дом, построенный в 1886 году отцом художника, Михаилом Сафроновичем. В нём Александр Герасимов провел свои детские и юношеские годы, здесь жил со своей семьей после революции, с 1918 по 1925 год.
Во дворе усадьбы сохранились хозяйственные постройки: каретный сарай, погреб и амбар, приспособленный в 30-х годах под мастерскую. От дома к мастерской ведет вымощенная булыжным камнем дорожка. Слева находится выставочный зал, построенный в 1981 году, к 100-летию со Дня рождения А.М.Герасимова. В его стенах находится самая большая коллекция произведений художника в нашей стране.