El Convento de Santo Antonio se construyó junto al Círculo Operario de Bahía, en un terreno donado por la organización, por iniciativa de Fray Hildebrando Kruthaup, consejero espiritual de Santa Dulce dos Pobres. El sacerdote presentó la idea a la directiva de la Congregación de las Hermanas Misioneras de la Inmaculada Concepción de la Madre de Dios, la cual fue aprobada de inmediato.

El joven ingeniero Norberto Odebrecht fue responsable de su construcción. Las llaves del edificio se entregaron el 12 de junio de 1948, y el 29 de junio, Santa Dulce dos Pobres fue nombrada primera superiora del convento. La inauguración tuvo lugar el 25 de julio de 1948, con una misa celebrada en la capilla de Santo Antonio por el arzobispo primado Dom Augusto Álvaro da Silva. El edificio, de estilo germánico, tenía capacidad para seis monjas.

Santa Dulce dos Pobres vivió aquí desde 1948, año de la construcción del Convento de Santo Antonio, hasta el 13 de marzo de 1992, día de su fallecimiento. También en esta obra de amor y fe estuvieron Santa Teresa de Calcuta, cuando en 1979 llegó a Salvador para fundar una casa para su Congregación en el barrio de Alagados, y San Juan Pablo II, quien bendijo al Ángel Bueno en su lecho de enfermo el 20 de octubre de 1991, durante su segundo viaje oficial a Brasil en Salvador. Este fue el segundo encuentro de Santa Dulce dos Pobres con San Juan Pablo II.

Durante 43 años, Santa Dulce dos Pobres vivió en este lugar, enfrentando 16 meses de enfermedad antes de fallecer el 13 de marzo de 1992. En 1993, parte del edificio fue adaptado para albergar el Memorial de Santa Dulce dos Pobres, conservando un anexo para residencia de las monjas de la Congregación.