В Фабричном переулке расположены:

• дом №3
• дом №5
• дом №8 — Тихвино-Онуфриевский храм
• дом №10
• дом №12 — Дом Гарденина
• ул. 20-летия ВЛКСМ, д. 40 — Жилой дом Снопова
• ул. Большая Манежная, д. 13 — Казарма им. Н.Н. Раевского

Фабричный переулок (по материалам книги «Воронеж: встреча с прошлым и настоящим: историко-архитектурный иллюстрированный справочник-путеводитель по культурно-историческим памятникам. / В.А. Мальцев — Воронеж: Издательско-полиграфический центр Воронежского государственного университета, 2008. — 211 с.: 685 ил.»):

С конца XVIII — до первой трети XX века, до 1928 года, переулок назывался Онуфриевским (Ануфриевским) по церкви. Его переименовали в память о назидательной «суконной» истории.

В 1735 году была составлена первая опись церковного прихода — там впервые упоминается жилой дом П.H. Гарденина.