耕织图的建筑,从南到北由澄鲜堂、玉河斋、延赏斋、蚕神庙、织染局及水村居组成。地域开阔,建筑风格相对比较朴素。它在园中据西北方,正与昆明湖东南岸的铜牛遥相呼应,寓意“牛郎织女”隔湖相望。1755年(乾隆二十年)高宗《耕织图》 诗:“玉带桥西耕织图,织云耕雨学东吴。水天气象略加彼,衣食根源每勤吾。稻正分秧蚕吐丝,耕忙亦复织忙时。汉家歌笑昆明上,牛女徒成点景为。”1860年,英法联军焚毁“三山五园”时,耕织图景区也被毁灭,夷为废墟。慈禧重修颐和园时,却不去恢复耕织图旧观,而是在耕织图废墟上修了一个水操内外学堂,要在这里培养中国海军。刻有乾隆诗篇的耕织图石碑,则遗弃在学堂围墙之外。但水操学堂好景不长,九年后即退出历史舞台。至中华人民共和国成立,此处已是一片萧瑟景象,曾经做过工厂、学校等。2004年才重新整修,耕织图区又重现于颐和园中。
重建的耕织图景区,修复了水操学堂,原耕织图中的延赏斋、玉河斋、澄鲜堂等也翻修一新,亭台楼榭,别有趣味。堂前水域遍栽荷花,平添了一份美丽。恢复的耕织图石刻,已完整陈列于游廊的墙壁之上,可见耕种和织布的各个过程。重建的蚕神庙门前绿地上栽种了各种花卉,而重修的水村居,已辟为茶室,供人们劳累时落座品茶,里边还保留了磨面用磨,打水的辘轳和水井。在恢复后的水操学堂里,几进院落规模虽不大,却还包括了一个小花园,宽大的房间内陈列着关于耕织图景区历史风貌与变迁的各种展品,院子中还陈列了当时操练用的轮船,可以参观回味,领略这块土地沧桑巨变所蕴涵的酸甜苦辣。