潘天寿纪念馆，坐落于杭州南山路景云村一号，这里原是潘先生晚年居所，一九八一年经文化部批准设立纪念馆并对外开放，一九九一年在原有故居基础上扩建现代化新馆。一九九五年五月十六日江泽民主席视察该馆，高度评价了潘天寿的艺术成就，并称赞“这座小型的纪念馆办得很好！”
    潘天寿纪念馆是一组青砖建筑群，外观质朴、厚重，既有传统特色，又有鲜明现代感。大门左侧的围墙上，镶嵌着六块一米见方的黑色花岗石，上有著名书法家沙孟海书写的“潘天寿纪念馆”金色大字。
    院内有两座楼房。一为潘天寿故居楼，是四十年代的青砖老楼；一为九十年代初新建的精品陈列楼，为求风格统一，也以青砖为外墙，高耸壁立。门厅与沙龙则用了十几米高的灰色反射玻璃幕墙，沙龙内外六个尖屋顶参差错落，与陈列厅的平屋顶相映成趣，从而使简朴的外观设计带上了一些现代气息。别致的水池将室内室外、新楼旧楼连成一体，水面清圆，风荷送香，鱼戏莲叶。全馆环境都作了精细的绿化，冬青翠柏遍植，紫藤凌霄满墙。楼前为一块方形的草坪，正中央静竖着一块洁白的大理石，似碑似石，纯洁无瑕，上面不留一字，这是设计师留给人们去想象、猜测、回味的一笔。
    故居楼底层朝南的正间是潘天寿先生的画室。画室靠西窗安置着一张特大的画桌，各种传统绘画用具摆得井井有条，其中有一方特大雕花端砚和大师生前常用的毛笔。书柜里文史书画类的书籍盈箧，那张红木旋椅使人想像当年潘先生手不释卷、笃行好学的情景。
    画室与后面的起居室、卧室相通，一应家俱均颇为俭朴。一间小陈列室有不少先生生平活动照片和实物资料供参观者瞻仰、研究。其中有一九五八年苏联艺术科学院授予潘天寿先生名誉院士的证书。玻璃橱窗里保存着先生的亲笔书稿、速写手稿和书信等文物。
    陈列楼有一千多平方米。参观者进入二楼陈列厅和陈列廊时，更感到这里是一座艺术的殿堂。精致、高雅的落地式展柜全部采取屋顶自然光，由电脑微机自动控制，这种新型设施在国内运用尚属首次。大展柜有五米多高，正面十二毫米厚的浮法透明玻璃彼此相连，中间没有一根遮挡视线的铝材柱子。潘天寿的巨幅绘画作品陈列在这样的展厅里相得益彰，观赏效果极佳。