花园建于明代弘治十六年（公元1503年），重修扩建孔府时同时修建，由长沙李东阳监工设计。李东阳当时是太子太傅、吏部尚书、华盖殿大学士、国史总裁，他为什么亲自设计。因为李东阳的女儿嫁给了孔子六十二代孙、衍圣公孔闻韶，做了一品公夫人，为了女儿，他才如此大卖力气，修建花园。在修建完孔府和孔庙后，李东阳曾4次作诗写赋，勒碑刻铭，记此盛举。此次修建之后，到明代嘉靖年间，严嵩取代了李东阳的地位，也是太子太傅、吏部尚书、华盖殿大学士、国史总裁，为当朝首相。他也看中了孔府，把自己的孙女嫁给了孔子六十四代孙、衍圣公孔尚贤为一品夫人。严嵩又帮助衍圣公扩建重修孔府和整修花园，从各地名山搬来奇石怪岩，从各地园林移植名花奇草，使得孔储花园更为可观。合傲岱岩松。