西區社區中心坐落於西邊街，設於建於1922年的前贊育醫院舊址，是西區的古蹟之一。中心佔地1,100平方米，樓高3層。其建築甚有英國殖民地色彩，包括紅磚的外牆和後園的樓梯。