Замок Росс построен в 15 веке кланом О'Донохью Мор (или Росс) на скалистом полуострове Росс Айленд на берегу озера Лох Лин. По легенде вождь клана О' Донохью спит под водами Лох Лин, а раз в семь лет он просыпается и объезжает озеро на своем белоснежном жеребце. Удача будет до конца дней сопутствовать тому, кто увидит его.
В конце 16 века, во время Второго Восстания Десмонда, замком завладел клан МакКарти Мор. Они сдали замок и прилегающие земли в аренду семье Браун.
В 1652 году замок был осажден войсками Кромвеля под командованием генерала Ладлоу. Его армия насчитывала 4000 пехоты и 2000 всадников. Она гнала войско Лорда Маскерри из Корка в Килларни. Лорд Маскерри и его люди укрылись в замке, так как он прекрасно укреплен и мог выдержать длительную осаду с суши. Однако старое ирландское пророчество гласило, что замок не падет, пока по озеру не проплывет лодка. Чтобы ускорить капитуляцию замка, Ладлоу решил использовать артиллерию. Для этого был построен специальный корабль на реке Лон, спущен в озеро, и обстрел велся с воды. Замок был взят.
