唐寅，字子畏，号六如居士，是明代著名的书画家、文学家。画风纤柔委婉、清隽生动，为“吴门画派”杰出代表。唐寅因会试中被诬，身陷囹圄，从此无意功名，以卖画所得购章楶的“桃花坞别墅”，取名“桃花庵”，在四周种桃树数亩，自号“桃花庵主”。明嘉靖年间，唐寅困苦而终，葬于桃花坞北，后迁葬于城西横塘。
　　梅宣义，北宋人。在桃花坞建“五亩园”。苏轼曾作《寄题梅宣义园亭》：“仙人子真后，还隐吴市门。不惜十年力，治此五亩园。初期橘为奴，渐见桐有孙。清池压丘虎，异石来湖鼋。敲门无贵贱，遂性各琴樽。我本放浪人，家寄西南坤。敝庐虽尚在，小圃谁当樊。羡君欲归去，奈此未报恩。爱子幸僚友，久要疑弟昆。明年过君西，饮我空瓶盆。”

　　章楶，字质夫，北宋枢密。在桃花坞建“桃花坞别墅”。《吴门表隐》誉其“园林第宅，卓冠一时”。
　　唐寅曾绘《桃花庵图》，又写了《桃花庵歌》：“桃花坞里桃花庵，桃花庵里桃花仙，桃花仙人种桃树，又折花枝换酒钱。酒醒只在花前坐，酒醉还来花下眠。花前花后日复日，酒醉酒醒年复年。但愿老死花酒间，不愿鞠躬车马前。车尘马足劳者趣，酒盏花枝贫者缘。若将富贵比贫者，一在平地一在天；若将贫贱比车马，他得驰驱我得闲。别人笑我忒疯癫，我笑他人看不穿。记得五陵豪杰墓，无酒无花锄作田。”《把酒对月歌》：“我愧虽无李白才，料应月不嫌我丑；我也不登天子船，我也不上长安眠；姑苏城外一茅屋，万枝桃花月满天。”《桃花坞》：“花开烂漫满村坞，风烟酷似桃源古；千林映日莺乱啼，万树围春燕双舞。”此外，唐寅还陆续写了一百多首《落花诗》。

　　沈明生，顺治年间名医。在桃花庵旧址上，构亭台，植竹木，建筑多沿用唐寅遗迹旧名。当时莫俨高写有《送明生先生迁六如别业》一诗：“六如泼墨狂歌处，桃树无多潭水秋；之子移家当胜地，一楼八咏继风流。”

　　叶昌炽,光绪年古籍校理和碑刻搜集专家。在五亩园旧址仿宋、明遗风建筑亭园。著名的有“拜石亭”和“碧藻轩”。俞樾有诗：“拜石亭连碧藻轩，吴中五亩旧名园。后人来往桃花坞，底事惟知唐解元。”道出了从清末至今，述及桃花坞言必称唐寅的偏颇之处。

　　谢家福，字绥之，号桃源主人、望炊楼主人等。清代洋务运动的积极参与者，中国交通电信事业的先驱者，苏州电报通信的创始人。光绪年间，谢家福因丧母丁忧，返居苏州桃花坞，购得宋代桃花坞“五亩园”遗址，建“望炊楼”。谢家福赋闲归苏后，又在“五亩园”原“正道书院”故址上，创建了义塾“儒孤学舍”，专授“新学”。光绪十八年，闻名电报界的“苏州电报传习所”（又称“苏堂”）在儒孤学舍内成立了。苏堂是我国早期培养电信人才的三大学校之一（另两所分设在天津、上海），影响极为深远。谢家福嗣孙谢安生继承了五亩园园产，五亩园废弃后，部分建筑移作昆剧传习所。
　　　谢家福著作等身，除编撰有关“军国大事”的书集外，还印刻了《望炊楼丛书》、《磷血丛钞》，荟集了相当丰富的文史资料。而他的《五亩园志》，无论是对古代苏州桃花坞来说，还是对古典园林五亩园来说，都是一份最详尽的总结，其地位，在苏州地方志乘上，是独一无二的。