Elle est située historiquement à l’intersection des rues de Nemours et Tronjolly et du boulevard de la Liberté.
Entre 1449 et 1476, la ville de Rennes édifia une troisième enceinte fortifiée. A l’entrée Sud de la ville, la porte de Toussaints fut construite sur un bras de la Vilaine. Composée de deux tours, elle est précédée d’un bastion avancé, doublée de fossés, pour la protéger des coups de canon. Le boulevard de Toussaints contournait ses fortifications.
La porte accueillit différents personnages historiques dont le plus célèbre est le duc de Bretagne François II, père d’Anne de Bretagne. Au XVIIIe siècle, elle fut transformée en hôpital général pour accueillir des fous, des vagabonds ou des filles de mauvaise vie avant de devenir une manufacture. Elle est abattue en 1783.