江戸の老中・大久保忠朝の庭園が始まりです。かつては東側が海に面していて、潮の満ち引きで池の水位が変わったと言われています。堀田家や清水家、また宮内省の管理を経て、1924年に東京市に下賜され、旧芝離宮恩賜庭園として公開されました。