他与著名画家郑午昌同岁，郑喜藏明清人书法对联，约有四五百件之多，其藏室冠名为墨鸳鸯楼，吴特意为他画卷，画面极为工细。吴湖帆画室名为梅景书屋，其来历为得宋本《梅花喜神谱》而取名。旧时无影字，景即影之本字。梅景书屋藏画中有前人画家九友真迹，每当高兴时，便精审后落笔临摹，曾集为册子分送好友。

　　  他曾为好友篆刻家陈巨来绘安持精舍图横幅，甚精工。文革中陈家受抄家冲击而被掠去，不知何故流至台北。正巧被张大千见而购之，又辗转寄归于陈巨来，一时传为佳话。某年，吴湖帆获一枚“六如居士”瓷印，常州吕学端也收有“金陵解元”牙印，此均为唐伯虎之遗物。吴湖帆极想配二印为一匣，便转告于吕氏，求得割爱赠之，以专门绘一山水长卷作为报答。

　　现代名人叶圣陶、顾廷龙、范烟桥、徐孝穆等与吴湖帆均为苏州草桥中学校友，范烟桥主持苏州博物馆工作时，求吴转让其收藏的清代状元写扇陈列。吴湖帆二话不说，倾其所藏70余把奉献，惟一要求则是在此基础上再扩充壮大，高风亮节可见一斑。有位与吴同时代人倪氏，喜收集书画文物，与吴湖帆极熟，为谋湖帆画作，常以所藏古人书画相换，因藏吴画甚多。文革时期，吴画被诬为“黑画”人被打成反革命，倪氏恐怖之余，遂将吴画悉数毁去，今日想来，甚为可惜。

　　他的收藏为人们所称颂，为其创作、鉴定提供了丰厚的资源和坚实的基础，这也是传统画学的一大特色。如今，这些艺术品虽然大部分被国内外各大博物馆及其他公私机构收藏，但从某种角度讲，未尝不是吴湖帆生命的延续。

　　吴湖帆梅景书屋的收藏，以其藏品丰富且精品较多，闻名遐迩。吴湖帆先生嫡孙吴亦深先生著文称：“在众多与‘梅影书屋’有关的梅花之中，最广为众所周知者，即宋景帝年间刻本《梅花喜神谱》与《宋汤叔雅梅花双爵图》两件，此亦为‘梅景书屋’名称之由来。”汤叔雅为宋“墨梅”创始人杨无咎之甥。《冬心画梅题记》曰：“叔雅画梅，曾见于吾乡梁少师乡林家，不愧逃禅叟(杨无咎)。”吴湖帆记其“受画梅遗法，而杨以踈名，汤以密实”对前辈多有创新。观其画，但见千花万蕊，锦簇芳浓，风前月下，不胜繁华春色。《吴湖帆文稿》对之有详细的描述“图作老梅一树，枝杆盈百，花朵数千，翠鸟欲语，粉香玉色，绝似绵绣画屏”，因而吴将之奉为“宋画中神品也！”并在日记中写道 “与宋刻《梅花喜神谱》同贮，名吾居曰梅影书屋。”