这座庭园的历史可以回溯到接近350年前的江户时代。
1650年，毛利元就之孙毛利秀元任甲斐镇守，在麻布洼地（今六本木六丁目）建造了一处庄园。这标志着这座庭园的建立。
然后，在1702年（1702年），吉良府空袭后，赤穗勇士Yasoemon冈岛等10人已被存放在森房子（细川，森，松平，沉积分为四个主场美津浓） 。次年二月，每个人都在这个领域看到武士Honkai。
1849年，乃木希次的第三子、后来在明治时代成为陆军大将的乃木希典于在其家族位于调布区的武士庄园出生。年幼的乃木希典在这座洼地庄园度过了9年时光。
1865年，乃木希典接收了洼地庄园。

世易时移，律师、法学家、法学博士以及中央大学创始人增岛六一郎（1857-1948年）于1887年将这处地产购入名下，并将这座庭园命名为“芳晖园”。
1919年4月，这座庭园被列为历史古迹“乃木大将出生地”（目前为东京都所属的历史古迹）。

1943年3月，受指定为“森Kainokami宫”（感兴趣的现东京点）的兴趣点。在1952年3月成为一甲威士忌的东京工厂，在1977年，朝日电视台收购这里。池塘已经妮卡池塘和俗称。

在此之后，于1998年成立六本木六丁目地区市区重建工会，于2000年4月，建重建项目。 2003年4月打开“六本木新城”，诞生于当前的“Mohri博士园”。