O edifício foi construído em 1868 num estilo neoclássico, com paredes rebocadas de amarelo adornadas com relevos circulares brancos e decorações de guirlandas. O topo do edifício apresentava um frontão triangular e um telhado inclinado de azulejos. Destacam-se ainda os volumes semicirculares que caracterizam as fachadas laterais. O edifício é rodeado por um jardim e está interligado com uma antiga residência na Rua da Praia do Bom Parto, n.º 17, com ambos os edifícios compartilhando um estilo arquitetônico semelhante e formando originalmente um conjunto coeso.
Este edifício serviu originalmente como uma residência de Jardine Matheson, uma importante empresa britânica que se desenvolveu após o fim do monopólio do comércio da Companhia Britânica das Índias Orientais na China. Jardine Matheson tinha laços extensos e próximos com a China. Em 1844, empresa transferiu a sua sede para Hong Kong, vendendo ou transferindo posteriormente suas propriedades em Macau.
Na década de 1940, a Diocese de Macau assumiu as propriedades na Rua da Praia do Bom Parto, n.º 19 e 21. Em 1955, ao observar que havia um grande número de crianças fora da escola em Macau, o Padre German Alonso, S.J. da Casa Ricci planeou estabelecer uma escola versátil para acomodar crianças empobrecidas e sem educação. Esta iniciativa recebeu apoio do então Bispo, D. Policarpo da Costa Vaz, que disponibilizou o referido local para a escola, levando à fundação do Colégio Matteo Ricci. Na década de 1960, a escola adicionou uma secção secundária e uma secção de escola nocturna, seguida pela construção de novos edifícios escolares. Em 2010, com o desenvolvimento da escola, os alunos e funcionários mudaram-se para um novo campus, e desde 2021, a Rua da Praia do Bom Parto, n.º 19 e 21, alberga a Academia de Música São Pio X.
Nas décadas de 1950 e 1960, Macau acolheu um elevado número de migrantes da China Continental, e a disponibilização de educação para os filhos destes migrantes tornou-se premente. Juntamente com organizações não governamentais e sindicatos, grupos católicos também promoveram activamente a educação para os pobres, estabelecendo muitas escolas gratuitas ou de baixo custo. O Colégio Matteo Ricci serve como um exemplo do esforço da Igreja Católica para fornecer educação às crianças de origens populares em Macau.