Консиержери е една от най-старите останки от кралски дворец в Париж. Този дворец е превърнат в затвор през XV в. Именно крал Филип Справедливия е поръчал построяването на кралски дворец, който да е достоен за положението му. По онова време дворецът е смятан за един от най-красивите в Европа. Накрая, в края на XIV в., кралете на Кралство Франция се преместват в Лувъра и Винсен. Тогава Консиержери е изоставен. Консиержът - човек, назначен от краля, за да поддържа реда и да се грижи за затворниците, решава да превърне двореца в затвор. По време на Френската революция Консиержери се превръща в основен френски затвор.