Впрочем, детей с каждым разом становилось все меньше, и Толстой не знал, чему это приписать – их собственному нежеланию или боязни родителей. Хотя революция была задушена, глухое недовольство крестьян помещиками тлело, мятежи уступили место отдельным проявлениям жестокости. Брата Софьи Андреевны Вячеслава Берса, главного инженера комиссии по организации земляных работ в Гавани под Петербургом, убили безработные, он же защищал их интересы и хлопотал о работе для них. В имении сына Толстых Михаила крестьяне сожгли инструментальные сараи; хозяйственные постройки сгорели и в имении Сухотиных, и тоже подозревали поджог; у соседей Звегинцевых двое подозрительных людей убили кучера и охотника, которых хозяева послали спросить у незнакомцев паспорта. Да и в самой Ясной воровали капусту, стреляли однажды в ночного сторожа, срубили и увезли сто двадцать девять дубов. По совету сына Андрея графиня обратилась к тульскому губернатору. Прислали полицейских, задержали нескольких крестьян. Губернатор рад был случаю раздуть это дело и оставил «стражников» в имении и даже в доме: так апостол ненасилия оказался под защитой людей в мундирах. Ситуация была тем более неприятной, что ни в одном из поместий губернии ничего подобного не было, противники толстовства могли торжествовать. Свое негодование Лев Николаевич высказывал жене, спрашивая, неужели та не понимает, что ему невыносимы аресты крестьян и присутствие полицейских в доме, что все это настоящий ад, что не было в его жизни положения хуже. Софья Андреевна спокойно возражала, что не хочет, чтобы кто-нибудь из близких был убит.

Жены и родители задержанных просили барина вмешаться и обратиться к губернатору. Толстой не мог объяснить им, что все сделано без его ведома, что, следуя своим идеалам, давно уступил все владения жене и детям и ему больше не принадлежит Ясная Поляна, а значит, и ничего не может сделать для несчастных. «Они не могут допустить того, чтобы я – особенно живя здесь – не был бы хозяин, и потому все приписывают мне. Это тяжело, и очень, но хорошо, потому что, делая невозможным доброе обо мне мнение людей, загоняет меня в ту область, где мнение людей ничего не весит», – рассуждает он в дневнике седьмого сентября 1907 года. И делает в записной книжке пометку о том, что прибыл губернатор, что все это «и отвратительно и жалко». Теперь в передней, по словам Саши, «пахло мужским потом и махоркой» – здесь обосновались «стражники».

Дочь умоляла Софью Андреевну отправить их обратно, простить мужиков, подумать об отце – мать оставалась непреклонна. Тогда Толстой написал губернатору и отправил к нему Сашу. Тот выслушал ее, пробежал глазами письмо Льва Николаевича и ответил: «Ваша матушка графиня просила меня об ограждении безопасности Ясной Поляны и вашей семьи, и я только исполняю ее просьбу». И показал письмо графини с просьбой о помощи любой ценой. Вернувшись домой, дочь со слезами на глазах побежала к матери и заявила, что лучше пусть пропадает все, вся Ясная, но нельзя ставить отца в подобную ситуацию. Софья Андреевна твердила свое: говорила, что хорошо знает – Саше безразлично, спалят Ясную или нет, а у нее дети, о которых она должна думать.

Полицейские задержались в имении на два года, Толстой страдал от их присутствия, как от самых страшных угрызений совести. «Если бы я слышал про себя со стороны, – про человека, живущего в роскоши, со стражниками, отбивающего все, что может, у крестьян, сажающего их в острог и исповедующего и проповедующего христианство и дающего пятачки, и для всех своих гнусных дел прячущегося за милой женой, – я бы не усомнился назвать его мерзавцем». Но наряду с этим делится с Поповым в письме от семнадцатого января 1907 года: «…но все-таки со всем желанием поступить соответственно кажущихся высших требований, не могу этого сделать, и не потому, что жалею вкусную пищу, мягкую постель, верховую лошадь, а по другим причинам – не могу сделать горе, несчастие, вызвать раздражение, зло в женщине, которая в своем сознании исполняет все выпавшие на ее долю, как жены, вследствие связи со мной обязанности, и исполняет вполне сообразно своему идеалу, хорошо».