Nació en Málaga el 6 de noviembre de 1533. Era hijo de Juan de Torres, regidor de esa ciudad, y de su esposa Catalina de la Vega. Estudió en la prestigiosa Escuela de Gramática de la catedral de Málaga, donde tuvo como maestro a Juan de Valencia. En 1552 fue llamado a Roma por su tío, el arzobispo de Salerno, Luis de Torres.[2] En 1560 fue nombrado clérigo presidente de la Cámara Apostólica en sustitución de Alessandro Campeggi, obispo de Bolonia que había sido elevado al cardenalato.
Ludovico tuvo una importante carrera en el ámbito diplomático. Gracias a sus cualidades, el papa Pío V lo eligió en 1570 como embajador de la Santa Sede acreditado ante la corte española de Felipe II y la portuguesa de Sebastián I. La misión diplomática concluyó con una alianza entre la corona española, la República de Venecia y la Santa Sede, dando origen a la Liga Santa con finalidad antiotomana. El relevante papel desempeñado por Ludovico de Torres fue elogiado por el poeta cortesano Juan Verzosa y Ponce de León.
En 1577 el Papa le confió otra misión diplomática, enviándolo a Malta para la consagración de la nueva iglesia construida por iniciativa del gran maestre de la Orden de los Hospitalarios de San Juan de Jerusalén, Jean de la Cassière. Esta iglesia debía convertirse en el templo principal de la Orden. La ceremonia de consagración tuvo lugar el 20 de enero de 1578. En mayo de 1579 Ludovico se encontraba nuevamente en Malta como negociador en las disputas entre el Gran Maestre y el obispo local. A pesar de la fastuosa acogida que recibió, no logró obtener resultados significativos.
El 30 de octubre de 1573 Felipe II lo propuso como arzobispo de Monreale, una diócesis muy rica. Mientras tanto, en diciembre de ese mismo año fue elegido papa Gregorio XIII, con quien Ludovico mantenía desde hacía tiempo relaciones de amistad. En la bula Pastoralis Officii, promulgada ese mismo año, Gregorio elogió su habilidad diplomática y su fidelidad al trono papal.
Ludovico fue consagrado arzobispo el 31 de diciembre de 1573. El 8 de enero se le concedió el palio y el 11 de enero tomó formalmente posesión de la diócesis. Hizo su entrada triunfal en Monreale el 1 de mayo de 1574. El 20 de mayo de 1574 celebró allí su primera misa, con gran asistencia de fieles y concesión de indulgencias. Posteriormente convocó un sínodo diocesano, cuyas constituciones fueron publicadas en 1575. Este sínodo desempeñó un papel esencial en la aplicación en la diócesis de las resoluciones del Concilio de Trento. Ludovico también abrió la diócesis a las actividades de la Orden de los Frailes Menores Capuchinos.
Ludovico promovió importantes obras de restauración de la catedral de Monreale y, en 1578, ordenó el traslado de los restos mortales del rey Guillermo II de Sicilia, «el Bueno», desde su humilde tumba original de ladrillo a un nuevo sepulcro de mármol con acabados en oro, coronado por una pirámide con las insignias reales y las del arzobispo. También amplió y restauró sin escatimar gastos el palacio arzobispal de Monreale, embelleciéndolo con numerosos frescos. En 1580 inició la construcción de la nueva iglesia de los Capuchinos y promovió la construcción de una carretera entre Palermo y Monreale.
También su ciudad natal, Málaga, se benefició de Ludovico. Gracias al éxito obtenido con la creación de la Liga Santa, el Papa le había concedido indulgencias para la capilla familiar en el convento franciscano de San Luis el Real (hoy desaparecido). Los padres de Ludovico ya habían iniciado los trámites para la construcción del convento en la colina de Miraflores, para lo cual habían adquirido los terrenos necesarios, pero tras su muerte en 1582 fueron los hijos (Ludovico y su hermano Alonso) quienes continuaron la iniciativa, obteniendo finalmente en 1584 la autorización necesaria del comisario general de la orden e iniciando inmediatamente las obras.
Durante el período pasado en la península ibérica entre 1570 y 1572, en el curso de sus desplazamientos entre Córdoba, Sevilla y Portugal, Ludovico visitó brevemente Málaga en 1570. En esa ocasión realizó varias donaciones a favor de la fundación del colegio jesuita local (colegio de San Sebastián), del cual puede considerarse uno de los principales promotores, junto con el obispo Francisco Blanco de Salcedo. Ludovico también donó al colegio mil ducados, con los cuales se adquirieron un terreno y un horno adyacentes necesarios para su ampliación. Durante esta visita también visitó a sus padres y a antiguos amigos. A su antiguo maestro, el literato Juan de Valencia, quien había sido su profesor en el Estudio de Gramática de la catedral, le regaló numerosas monedas antiguas, que posteriormente fueron objeto de los escritos de Valencia conocidos como Scholia in Andreae Alciati Emblemata.
En 1583, sintiéndose enfermo, Ludovico regresó a Roma, donde murió en 1584.
Fue enterrado en la iglesia de Santa Caterina dei Funari, de la cual había sido benefactor, en la capilla familiar que había construido allí. A Monreale se envió una lápida de mármol amarillo con un epitafio, y una lápida idéntica fue colocada en la catedral de Málaga, en la capilla de San Francisco, donde más tarde sus restos fueron trasladados a un sepulcro erigido por iniciativa de su sobrino Ludovico III de Torres.