И. Д. Корсини, который спроектировал решетку со стороны набережной, также стал и автором садового флигеля Фонтанного дома. Двухэтажное здание было построено в 1845 году, а в 1911 году, на фоне экономического кризиса, дом был надстроен и переоборудован под жильё – в начале века индустриализация и экономические кризисы побудили многих землевладельцев Петербурга поступить так со своими участками и садовыми угодьями. В Фонтанном доме жил Николай Пунин, третий муж Анны Ахматовой. Там же жила его предыдущая жена Анна Аренс с дочерью Ириной. Пунин был искусствоведом, работал в Русском музее, занимался западноевропейским искусством. С 1942 года он был заведующим кафедрой западноевропейского искусства Института живописи, скульптуры и архитектуры истфака ЛГУ. Его роман с поэтессой стал причиной очень сложных и противоречивых отношений, усугубившихся бытовым аспектом советской жизни: Анне Ахматовой требовалась прописка, и в 1926 году она её получила – в том же Фонтанном доме. Ахматовой, Николаю, его бывшей супруге Анне Аренс и их дочери Ирине приходилось жить в одной квартире, пытаясь поддерживать дружеские отношения. Пунин несколько раз был арестован. Первый раз по делу боевой организации Таганцева в 1921 году, однако обвинения не были доказаны, и он был освобожден. Второй раз он попал под следствие в 1935 году вместе с Львом Гумилевым за участие в контрреволюционной деятельности в студенческой среде. Однако Анна Ахматова сумела добиться освобождения мужа и сына. Последний арест произошел в 1949 году: Николай был на 10 лет заключен в лагерь, где и умер в 1951-м. В 1952 году администрация Научно-исследовательского Арктического института, располагавшегося в Шереметевском дворце, окончательно выселяет жильцов из бывших дворцовых флигелей. Ахматова вместе с семьей Ирины Николаевны Пуниной вынуждена покинуть Фонтанный Дом. Отношения Ирины Пуниной и Анны Ахматовой весьма запутаны: они были по очевидным причинам холодными, однако поэтесса после возвращения из эвакуации приехала именно к ним и жила с ними. Свой архив она завещала Ирине, а не сыну Льву, с кем к концу жизни рассорилась. С архивом Ирина поступила вольно, нагнав туман. Женщина долго не давала сделать опись и передать архив в музей. Музей Анны Ахматовой был открыт в Фонтанном доме в 2003 году. Позже туда были переданы личные вещи Иосифа Бродского, с которым у Ахматовой были дружеские отношения.