Poco podían imaginar los antiguos vecinos de las afueras de Triana, al sitio del camino del campo de Castilla, que aquel templete que en el siglo XVII cobijaba la entrañable y menuda imagen de la Virgen del Patrocinio fuera a convertirse con el paso del tiempo en lugar de profundas devociones de proyección universal. El origen de este centro de veneración se pierde aún en la contradictoria nebulosa de la historia y de la tradición oral.

De una parte los investigadores aluden a una corporación con hospital propio fundada por gentes de color en 1584 en la cercana calle Portugalete, como Hermandad penitencial de Nuestra Señora del Rosario. Debido a los pleitos de exclusividad que sobre esta advocación interpuso la comunidad dominica de Sevilla hubieron de ir variando sucesivamente tal título, a la par que por diversas vicisitudes mudaban también de ubicación.