В середине XIX века казенное село Клушино было по количеству дворов (146) крупнейшим, а по численности жителей (901) вторым сельским населенным пунктом Смоленской губернии. В начале XX века Клушино оставалось самым большим селом Гжатского уезда (143 двора, 795 жителей на 1904 год). На его территории находились церковь, церковно-приходское училище, фельдшерский пункт, две чайные лавки, две ветряные мельницы, кузница. Ежегодно здесь проводились три ярмарки.

Вскоре после Октябрьской революции была установлена советская власть. Ее организатором в Клушине стал местный уроженец, коммунист Иван Семёнович Сушкин, занимавший должность военного комиссара Пречистенского волисполкома. В октябре 1918 года в Гжатском уезде вспыхнул «эсеро-кулацкий» мятеж, сопровождавшийся разгромом волисполкомов, расхищением ценностей, захватом оружия, арестами советского и партийного актива. 19 ноября мятежники вошли в Клушино, арестовали Сушкина и публично расстреляли его. Перед казнью ему предложили публично покаяться и отречься от принадлежности к большевикам, на что Сушкин сказал: «Я честно выполнял свой долг перед народом, я был коммунистом – им и умру…» В 1930 году его именем назовут местный колхоз.

Жизнь молодой семьи Гагариных проходила в нелегких крестьянских трудах. Кроме того, Алексей Иванович, числившийся «бедняком», частенько подрабатывал на стороне: «живые» деньги были необходимы для становления собственного хозяйства. В архиве сохранился его «Трудовой список» за 1921–1928 годы. Первая запись свидетельствует о том, что еще до женитьбы Алексей Гагарин успел поработать «по ведомству почтовой связи» почтальоном в Клушине – с 1 апреля 1921 года по 1 июня 1922 года. Затем он некоторое время работал по договорам (от двух недель до полугода) милиционером на охране разных объектов: в Гжатской городской ведомственной милиции – в 1925–1927 годах, в Пречистенской волостной милиции – с января по апрель 1928 года. Впрочем, эта служба осталась лишь эпизодом в трудовой биографии Алексея Ивановича, ведь главным делом его жизни было плотницкое ремесло.

Первый сын, названный Валентином, родился 30 июля 1925 года. Почти через два года, 6 июня 1927 года, появилась на свет дочь Зоя. В 1933 году, на время коллективизации, у Гагариных было крепкое хозяйство: лошадь, корова, бык, несколько овец и поросят, гуси, куры. По словам Анны Тимофеевны, «в колхоз пришли не с пустыми руками, не меньше других принесли».

Алексей Иванович, по словам старшего сына, сначала не хотел вступать в колхоз, но его хороший друг, председатель сельсовета Василий Дмитриевич Воронин из деревни Затворово, посоветовал: «Не хочешь быть раскулаченным – вступай, иначе могут сослать неизвестно куда…» После этих разговоров глава семьи Гагариных решился стать колхозником.

Вначале Клушино было разделено на несколько колхозов, которые в народе называли «четвертями». На территории одного из них, получившего название «Ударник», и оказалась семья Гагариных. В «Ударнике» был свой колесный трактор; работал на нем, как вспоминают старожилы, передовой механизатор Александр Михайлов. Общих скотных дворов тогда еще не строили, поэтому скот по-прежнему возвращался к своим хозяевам. На колхозных полях выращивали картофель, гречиху, горох, рожь, пшеницу (яровую и озимую), сажали иногда турнепс.

Мать будущего космонавта поначалу была занята на полеводстве вместе с другими местными женщинами (чаще с Анной Беловой и Прасковьей Бирюковой). Они соревновались друг с другом, но Анну Тимофеевну, говорят, трудно было обогнать: вспахивала она, как правило, 1 гектар 5 соток, а иногда и 1 гектар 20 соток.

Работая в колхозе, отец будущего космонавта часто помогал владельцу ветряной мельницы по фамилии Мигин ремонтировать ее, а затем тот научил Алексея Ивановича молоть.