Они были выстроены дедом Толстого, князем Н. С. Волконским. Когда-то между башнями были укреплены железные ворота, но при Толстом их уже не было. Внутри башни полые, в них укрывались от непогоды сторожа. Налево от входа — небольшой домик, называемый «каменкой». Здесь жил садовник. В 1890-е годы в «каменке» была школа для крестьянских детей, в которой преподавали старшие дочери Толстого — Татьяна Львовна и Мария Львовна.