西溪经历了千余年的发展历程，可概括为东晋发现、唐宋发展、明清全盛、民国衰落的四个阶段。

　　西溪保护区内历史文化非常深厚，一是有丰富的文人墨客和历史人物的活动遗迹。康熙、乾隆曾到西溪留下了若干宸翰诗，唐寅、范其昌、陈任儒、张岱、厉鹗、杭世峻、姜白石、康有为、孙中山、郁达夫、陈三立、于右任、黄宾虹等历史文人、政客均在西溪留有飞鸿雪迹、诗词画歌。

　　二是西溪的庵堂佛教文化相当发达，最盛时期建有庵堂36所及很多的祠庙，有名的如秋雪庵、交庐庵、曲水庵、两浙词人祠等。

　　三是社会民俗文化非常有特色。如一年一度的“龙舟胜会”、“集市灯会”、河渠行舟、碧潭网鱼、竹林挖笋等，均极富江南水乡的乡村田园气息。

　　四是西溪的建筑景观，种类较多，除庵堂、祠庙外，还有名园、民居、桥、亭及街道牌楼等建筑。有名的如西溪梅竹山庄、西溪草堂、淇园、洪园等。

　　由于历史的原因，这些历史文化均为遗迹、遗地，诗词画歌亦留存较少，需要发掘和恢复。