Как и всякая историческая постройка, неоднократно менявшая владельцев и перестраивавшаяся, эта городская усадьба, основанная в начале XVIII века на нынешнем Милютинском — а тогда Казенном переулке, содержит в себе множество кирпичей различных мануфактур и эпох. Наряду с ними, здесь встречаются и кирпичи кустарного производства с отпечатками лап животных — в нашем случае собаки и кошки, так что можно без труда представить себе их погоню по груде свежевылепленных и еще не высохших кирпичей. Клейма «МК» и «ММ» можно отнести к 1820-1830 годам — времени покупки и перестройки усадьбы Платоном Фотиевичем Митьковым. Кирпичи со следами лап животных, возможно, гораздо более ранние и относятся к середине XVIII века — периоду активного строительства мануфактуры А.Я.Милютина, первые цеха которой и стали основой для последующего строительства главного усадебного дома Митьковых. Наконец, кирпич с клеймом «Гусарев» относится к 1870-1880 годам — до получения купцом 2-й гильдии Алексеем Гавриловичем Гусаревым в 1882 году права наносить герб на свои изделия.
Усадьба Митькова-Арбатской (Милютинский пер, 16с1,2,3) состоит из главного дома и двух флигелей, в основе которых — фабричные палаты купца и фабриканта начала XVIII столетия Алексея Яковлевича Милютина. Его отец — Яков Милютин, служил при дворе царя Алексея Михайловича, занимался поставками ко Двору рыбы из Астрахани и Нижнего Новгорода. Сам Милютин, по некоторым сведениям, служил истопником у Петра I и в 1714-1716 гг. по указу первого российского императора основал в переулках между Лубянкой и Мясницкой собственную «шелковую, позументную и парчовую фабрику. При мануфактуре Милютин построил и свою семейную усадьбу (сегодня дом N14). В свою очередь, князь Петр Владимирович Долгоруков в своей книге «Время Императора Петра II и Императрицы Анна Иоанновны» утверждает, что Алексей Милютин служил истопником в личных покоях Анны Иоанновны и считался человеком Бирона.
Так или иначе, но 3 марта 1740 году Алексей Милютин — к тому времени, помимо московской фабрики, обладавший собственными «Милютинскими» торговыми рядами в Санкт-Петербурге (нынешний адрес Невский проспект, 29) — был пожалован дворянской грамотой. С учетом даты смерти его отца — 1688 год, получается, что к тому времени Алексею Милютину шел шестой десяток лет. Тем временем московская фабрика постепенно разрасталась, так что во второй половине XVIII века весь переулок получил название Милютинский. После войны 1812 года фабрика сильно пострадала от пожара, дела наследников Милютина пошатнулись, и обширный участок был разделен и продан по частям.
Часть, где располагались фабричные корпуса, выкупил Платон Фотиевич Митьков — брат декабриста Михаила Митькова, героя войны 1812 года, кавалера орденов «Владимира с бантом» и «Анны на шее», члена Северного общества. Михаил Митьков не участвовал в событиях на Сенатской площади, но после провала восстания декабристов был арестован и сослан на каторгу в Иркутск, а затем в Красноярск, где и умер в 1849 году от туберкулеза. Владелец усадьбы на Милютинском — Платон Фотиевич, служивший в Московском кантонистском отделении и егерском полку — был единственным из братьев Михаила Митькова, не отвернувшимся от него и поддерживавшим его до самой смерти.
В 1834 — 1837 годах в усадьбе Митьковых жила тетя А.С.Пушкина Елизавета Львовна Сонцова, которую иногда навещал и сам Пушкин. В этом же доме в январе 1837 года гостивший у сестры Сергей Львович Пушкин узнал о смерти сына — чуть раньше, чем в доме появился поэт Евгений Баратынский, пришедший рассказать родным Пушкина эту печальную новость. В 1897 году бывшая усадьба Митьковых перешла во владение к купчихе Анне Николаевне Арбатской, вдове потомственного почетного гражданина, купца и мецената Александра Александровича Арбатского, державшего торговлю в Тёплых торговых рядах на Ильинке. А.Н.Арбатская перестроила флигель по Милютинскому переулку, возможно, именно тогда надстроив его третьим этажом.
В 1912-1915 гг в подвал одного из корпусов усадьбы переехал из дома купца Перцова у Храма Христа Спасителя легендарный театр-кабаре «Летучая мышь», основанный нефтепромышленником-миллионером и меценатом Николаем Лазаревичем Тарасовым и актером и конферансье Никитой Федоровичем Балиевым. Театр изначально создавался актерами Московского художественного театра как своего рода клуб для узкого круга посвященных, где действующие актеры могли свободной общаться, не зависеть от светских условностей и даже позволять себе шутливые репризы и постановки. Даже сама эмблема и название театра — «Летучая мышь» — была противопоставлением знаменитой Чайке на занавесе МХТ. Душой театра был Н.Ф.Балиев, выполнявший роль и руководителя, и конферансье. Молодой миллионер, ловелас и страстный любитель театра Н.Л.Тарасов брал на себя все организационные и материальные расходы вплоть до своего самоубийства в возрасте 28 лет.
Одним из наиболее популярных постановок театра был спектакль-буффонада «Скандал с Наполеоном, или Неизвестный эпизод, происшедший с Наполеоном в Москве». В ходе спектакля зябко кутающийся в плащ Наполеон в интерьерах Кремля, окруженный генералами и свитой, принимает решение уезжать из Москвы и громко спрашивает, где его шофер. В этот момент громкий голос из зала напоминает о том, что во времена Наполеона автомобилей не было. Среди актеров начинается замешательство, но вскоре они продолжают играть пьесу с того же места. Голос повторяется вновь — и так до тех пор, пока в зале не начинается настоящий скандал. Актеры демонстрируют крайнее смущение, Наполеон срывает с себя парик и заявляет, что не может играть в таких условиях. И в тот момент, когда, кажется, спектакль окончательно сорван, а зрители вот-вот разнесут подвал, конферансье — Никита Балиев — тихо напоминает публике, что «шофер» по-французски означает «истопник». Театр на Милютинском был столь популярным, что в январе 1914 году его посетил писатель Герберт Уэллс. В 1915 году «Летучая мышь» перебралась на новое место, а подвал усадьбы заняла Вторая студия МХТ, позже переехавшая в Камергерский переулок.
