Каменный трехэтажный доходный дом, построенный до 1889 году, принадлежал наследникам мещанина Рукавишникова.
К 1910 году дом перешел в собственность фабриканта Хаима Пейсаховича (Харитона Павловича) Полякова (1849–1941).
Сюда он перевел свое кондитерское заведение, превратившееся в фабрику. Это было первое кондитерское предприятие в Екатеринбурге. В здании работали бакалейный, табачный и колониальный магазины. Поляков также сдавал помещения под магазины акционерному обществу «Кровля».
Для успешного ведения бизнеса Поляков и двое его сыновей, Эммануил и Абрам, приняли лютеранство, из-за чего дети Полякова были вынуждены пройти через унизительную процедуру «усыновления». Тем не менее, Поляков не терял связи с общиной, даже существует версия, что он был хранителем еврейской кассы.
Сын фабриканта Михаил и дочь Дина были членами социал-революционной партии. Возможно, что в 1905 годув доме Полякова останавливался Яков Свердлов. Михаил Поляков в годы революции и гражданской войны сделал блистательную политическую карьеру. С 1921 года занимал должность главы Крымского ревкома, т.е. фактически был главой красного Крыма. Репрессирован и расстрелян в 1939 году.
Национализированная фабрика Полякова в советское время вошла в состав знаменитой фабрики «Конфи».
