Дом предназначался для супружеской четы художника В. Д. Поленова и Н. В. Якунчиковой. Первоначально служил мастерской Поленову. Во время Первой мировой войны здесь размещался лазарет для слепых. Затем часть помещений служила жильем, а в остальной часть использовалась под столовую дома отдыха.