La Cofradía de las Penas se funda por un grupo de entusiastas cofrades en fecha
desconocida. También lo son la sede, el origen de la advocación y la incorporación de la imagen de la Virgen, pues no consta la existencia de libros de actas y de documentos generados por la propia Cofradía a partir de 1938, aunque si existen documentos que atestiguan la existencia de la Cofradía en años anteriores. Tradicionalmente se ha establecido como fecha fundacional el año 1935. El profesor Agustín Clavijo García proponía la del 30 de abril de 1935, para luego señalar que Antonio Rojo Carrasco, uno de los fundadores, aseveraba que lo fue el 7 de febrero de 1934 en la iglesia de San José.

Sin embargo, la profesora María Encarnación Cabello Díaz localizó una noticia en el periódico " La Unión Mercantil ", en su edición del 9 de junio de 1935. Ésta se refería a que la Comisión organizadora de la Hermandad había celebrado una reunión general de hermanos en los salones de la Agrupación de Cofradías el día 7 de junio para nombrar a una nueva Junta de Gobierno, donde salió elegido hermano mayor Julio Alfaro Martín.