Семья художника Александра Герасимова обосновалась в городе Козлове во второй половине XIX века. Родители художника Михаил Сафронович и Евдокия Яковлевна были родом из крепостных крестьян.

Отец Михаил Сафронович пробовал себя в разных видах деятельности: был арендатором барских садов, лошадником и лабазником. В 30 лет он стал прасолом — завел собственную торговлю лошадьми и быками, — хотя такое занятие мало подходило ему по складу характера. Чтобы быть успешным дельцом, нужно было обладать известной долей алчности и непреклонности, а мягкий добросердечный Михаил Сафронович, не умея настоять на своем, иногда терял значительную прибыль.

В 1886 году Михаил Сафронович купил участок земли рядом с Боголюбским собором и построил для своей семьи дом. Лебедянская улица, на которой он был расположен, слыла одной из самых красивых и ухоженных в Козлове. Здесь стояли кирпичные дома с каменными заборами и массивными воротами, проезжая часть была вымощена булыжником и всегда содержалась в идеальном порядке. Портрет матери и отца отличаются непринужденностью поз, выразительностью мысли и чувства, жизненной правдивостью.

Александру Герасимову нравилось приезжать к родителям в первые дни лета, на Троицу, когда цвели пионы, ирис, персидская сирень. Художник любил писать эти цветы. Семья была очень гостеприимной и хлебосольной. Когда Александр Михайлович навещал родительский дом на Масленицу, на столе было много угощений. Герасимов очень любил обеды у родителей. Готовила всегда сестра художника Александра Михайловна. Запекались окорока, гуси, тушилось мясо и многое другое. В Козлове Александр Михайлович Герасимов провел годы от рождения до отъезда в Московское училище живописи, ваяния и зодчества (1881–1903) и еще несколько лет после Октябрьской революции (1918–1925).