香港艺术馆分东、西两座，楼高四层及地库，楼面总面积为17,530平方米。馆内设有有七个展览厅，面积共6,019平方米，分布如下：
四楼：中国书画展览厅
三楼：中国文物展览厅(1)、专题展览厅(2)
二楼：专题展览厅(1)、虚白斋藏中国书画馆、当代香港艺术展览厅
一楼：中国文物展览厅(2)、雕塑院
地库：演讲厅

香港艺术馆的藏品
　　香港艺术馆的藏品、除由馆方从不同地方及向收藏家蒐购所得之外，主要馆藏大多由艺术家、收藏家及公众捐赠所得。其中特别受注目的，是1989年由刘作筹所捐赠的一批为数逾四百多件的中国书画。这次的捐赠，是香港艺术馆历来所接受的最大批捐赠。

　　香港艺术馆的藏品主要分为“中国书画”、“中国古代文物”、“香港艺术”、“历史绘画”及“虚白斋藏中国书画”。虚白斋藏的藏品，涵盖由六朝至二十世纪当代作品。其中尤以明、清两朝之流派最为齐备、包括扬州八怪及清初六家等。“香港博物美术馆”成立时就是以一些反映旧日民生、风俗、地方风貌的历史绘画为馆藏核心，当中包括钱纳利及郎世宁的画作。