不久，查为仁兄弟相继上世，查家开始败落，乾隆也不再光临这所闻名国内名园，行宫变成厂禁宫。因长年没有正式的人负责修缮，经百年风化，有的楼台亭阁已坍塌，又因水西庄依傍运河，时常遭受水患，巨姓为祭大防灾，在此修建了河神庙，顿杀风光。更有寺院僧人为求生活，引水种田，开畦艺蔬，人为地破坏了大片的景观。园内珍藏的字画图籍也都随之失散。时有人请盐商黄君出资修复园林部分，黄君已同意，待筹措备料之际，黄君作古，这件事就搁置起来，民国初年，曹馄修缮曹家花园看中水西庄的“假山嶙峋”，令人将不少山石搬走点缀自家园林。自此，盗风大炽。几经风雨，几经磨难，享有盛名的津沽名园被遗踏得面貌全非，仅剩下乾隆御笔的汉臼石碑和外边镶有石柱石顶的碑亭较为完整，似在低泣，似在向人昭示这块让人留迹的地方。近代著名教育家严范孙有“荒亭断碑无人问，知有铜驼位晚风”的产句凭吊水西庄，此后，又沿运河修建了自来水厂和大片的居民任宅区，有的街道沿用芥园的名称，实际已是名存实亡了。
当代水西庄研究会提出重建水西庄，恢复历史名园的构想，立即得到政府的支持和国内外名入志士的慷慨资助。不久的将来，水西庄昔日的风干将重现在人们的面前。只是，这所沽上名园已不在水西庄旧址，而是搬迁到西沽公园内，给后人多少留下一点遗憾。
