由西班牙多明我会教士始建于1587年,次年由该会葡萄牙教士接管。初时只以木板搭建,故被华人称为“板樟堂”。十七世纪才改为砖石结构。1874年因火焚毁重建,后形成今天的规模。堂内最先供奉玫瑰圣母,因此称为玫瑰堂.