Замок этот был построен крестоносцами для защиты береговой линии в центре Бейрута в конце 12 века. Вернее, он был сооружен на базе стоявшей тут ранее крепости 8 века  известным крестоносцем Жаном Ибелином (в 1197 году).  В 1291 году город был отвоеван у крестоносцев мамлюками и крепость частично была повреждена. В 16 веке Ливан был захвачен османами, крепость подлатали и она снова стала защищать город со стороны моря.  Но в 1827 году город был отбит у  турков русскими войсками. В результате этих сражений крепость получила новые разрушения. Добили же древнее оборонительное сооружение англичане, обрушившие на него огонь пушек своих кораблей в 1840 году. После этих ударов крепость уже не  стали восстанавливать и она утратила свои оборонительные функции.

Его изображение можно увидеть на старых фотографиях. Однако, в 1860 году крепость была снесена при расширении гавани. Долгое время ее остатки скрывались где-то под театром Риволи, однако, после сноса зданий, пострадавших в во время боевых действий, было обнаружено несколько сохранившихся фрагментов. Некоторые из обнаруженных частей замка были отреставрированы археологами (другая их часть все еще скрывается в холме, скрывшем под собой как части крепости, так и и более ранние постройки римского периода). При постройке крепости были использованы античные колонны и другие детали каких-то разобранных крестоносцами древних сооружений. Некоторые фрагменты крепости были обнаружены на глубине около 9 метров.

Крепость состояла из материковой части и маленького форта, который располагался на островке. Известно, что с юго-восточной стороны крепости был 14-метровый ров, а с юго-западной стороны ров, ширина которого составляла 6 метров. Башни замка, наряду со специальной обзорной сторожевой башней, известной под названием Бурж аль-Кашеф и маленькой башней  Бурж аль-Муселлах служили своеобразными маяками для моряков, прибывавших в гавань Бейрута. Башни и фортик были снесены в 1892  (1890?) году при строительстве железнодорожных путей. У подножья замка возник оптовый продовольственный рынок Маль-аль-Каббан, на котором продавали сахар, кофе, зерно, чай и рис.