Уникальный памятник русской гражданской архитектуры XVI–XVII веков хранит в своих стенах множество легенд, связанных с разными историческими периодами. Одно время палаты принадлежали английскому торговому предприятию — Московской компании, затем Посольскому приказу, московским купцам и боярам. Здесь располагалась одна из первых арифметических школ Петра I и библиотека иностранной литературы.