В 1919 году вернулся на родину. Здесь активно занимался организаторской деятельностью. Григорьев работал на износ, не жалея себя, в напряженной общественной, творческой, организаторской атмосфере: помогал советом, изыскивал материальные средства, организовывал выставки. При его участии в Козьмодемьянске появились декоративно-художественная мастерская и художественная школа. Именно в это время был создан музей, который стал первым музеем, открывшемся в Поволжье в трудные послереволюционные годы. 

В 1920-е годы Григорьев работает в Москве, выступает одним из основателей Ассоциация художников революционной России. Много занимается административной работой, принимает участие в выставках. 

Картина «Сирень. На веранде» создана в сложный период жизни художника. Она написана в Тарусе незадолго до ареста и последующей многолетней ссылки в лагеря. В 1938 году по обвинению в антисоветской деятельности он был осужден и последующие восемь лет провел в Казахстане. Григорьев знал многих государственных деятелей Советского Союза, в том числе Маршала Советского Союза Климента Ворошилова. Попав под репрессии, он писал ему с просьбой о пересмотре своего дела, но никаких результатов это не принесло. 

После освобождения в 1946 году ярлык «враг народа» не был снят. Ему нельзя было жить в Москве, и он вернулся в Тарусу. Несколько лет жил там, в своём доме, полуразрушенном немцами, зарабатывал тем, что писал вывески для закусочных и кафе. В 1954 году был реабилитирован. Похоронен на Новодевичьем кладбище в Москве.