Возникновение населенного пункта под названием Полотняный завод связывают с созданием парусно-полотняного завода в Калужской области. Произошло это в 1718 году, а чуть позже в этих местах появились бумажная мануфактура и мельница. Владели этими предприятиями купцы, выстроившие вблизи заводских цехов собственные усадьбы. Одним из них был Афанасий Гончаров – прапрадед Н.Н. Гончаровой, супруги А.С. Пушкина.

В усадьбе Гончаровых останавливалась Екатерина Великая, а в 1812 году тут устроил свой штаб фельдмаршал Кутузов. Поместье дважды посетил А.С. Пушкин, а в середине XIX века здесь гостил Н.В. Гоголь. В 1999 году, к 200-летию со дня рождения Пушкина, на территории имения был создан музей-усадьба. Комплекс включает старинные постройки, пейзажный парк с сетью прудов, кафе и отель. Здесь проводятся экскурсии, выставки и костюмированные балы.