В XI веке граф Анжуйский, известный всем в стране как великий военачальник и полководец, загорается идеей выстроить по всей стране крепости для защиты земель. Так в небольшом городке Бриссак - Кенсе появляется настоящая оборонительная крепость, которая получает свое название в честь города. Но следом замок передается от графа к графу.
Когда в 1434 году при Карле VII замок оказывается в руках министра короля Пьера де Брезе, начинается полная перестройка замка. После этого времени замок уже приобретает свой более готический вид. Но недолго удалось пробыть в замке Пьеру де Брезе. Он героически погибает на войне в честь короля, а замок переходит его сыну Жаку де Брезе.
Именно с Жаком де Брезе связана настоящая мистическая история, рассказывающая о появлении в замке призрака, которую называют "Женщиной или дамой в зеленом платье".
Жак был вынужден жениться на родной сестре короля Людовика XI Шарлотте де Валуа, которая, к слову сказать, была дочерью знаменитой фаворитки Карла VII Агнессы Сорель. Ну а так как не любовь была причиной брака, Жак часто отсутствовал дома, пропадая то на охоте, то на пиршествах соседних баронов.
В это время юная Шарлотта не скучала одна дома, а предавалась утехам с молодым другом своего девства. И так однажды, когда Жак де Брезе вернулся после очередного длительного отсутствия дома и лег спать, его разбудил верный слуга, который намекнул графу, мол хозяйка дома то нынче ночью вновь не одна... Взбешенный Жак влетел в спальню Шарлотт и застал там свою жену в объятиях любовника. Схватив свой меч, Жак зарубил обоих прямо на ложе. Поговаривают, что он нанес более 100 ударов мечом.
Узнав о случившемся с собственной сестрой, разъяренный король приказал посадить ревнивца в тюрьму. Впрочем, через время сжалился и так и не довел дело до смертной казни - разрешил Жаку выйти из тюрьмы, уплатив при этом приличную сумму в казну. Чтобы собрать все деньги барону приходится продать даже замок.
А местные говорят, что до сих пор в его окрестностях можно встретить призрак дамы в зеленом платье. Если успеть приглядеться, можно даже увидеть на ней многочисленные порезы мечом.
Так с 1502 года замок переходит роду Коссе. Один из представителей древнего рода Карл II де Коссе заслужил хорошую расположенность у Генриха IV, за что ему был пожалован титул герцога де Бриссак, а также приличная сумма денег на восстановление и расширение замка.
