Белый Тауэр - наиболее древняя и впечатляющая часть крепости. В настоящее время здесь находится коллекция Королевского Арсенала и экспозиция, посвященная истории здания и оружию и рыцарским доспехам.

Белый Тауэр был построен Вильгельмом Завоевателем (1066-1087) внутри существовавших укреплений. Точная дата начала строительства неизвестна, однако традиционно считается, что возведение Белого Тауэра началось в 1078 г.
Считается также, что строительство велось под началом Гандалфа, епископа Роч