فشل الفرنجة من دخولها في بادئ الأمر بعد أن حاصروها في العام 1099م. بعد أن دخلوا القدس، لكنّ الملك بلدوين حاصرها وهاجمها بمساعدة الأسطول الجنوي وتمكّن من احتلالها في العام 1101، وجعلها عاصمة إقليم.

 بعد معركة حطّين سنة 1187وانتصار صلاح الدّين، وقعت هنا معركة قاسية سنة 1191بين جيشه وجيش الفرنجة بقيادة ريكاردوس قلب الأسد، وكانت الغَلَبة لهذا الأخير، لتظل القلعة الحصينة بيد الفرنجة حتى العام 1265 عندما حاصرها بيبرس المملوكي أربعين يومًا مليئة بالصّدامات حتى استسلم المحاصَرون الذين طلبوا السّماح لهم بالانسحاب بسلام، وبعد أن وعدهم القائد المملوكي، لم ينفّذ وعده، إذ  ألزمهم حرق قلعتهم ثمّ أسَرهم.

أقام بيبرس قرية بجانبها حول المقام الذي أمر ببنائه وهي قرية الحَرَم أو سيدنا علي التي بقي مقامها.

 يستطيع الزائر اليوم أن يرى القلعة والمرافق الهامّة فيها والأسوار والخندق والميناء وآبار الماء .

معركة أرسوف

دارت معركة أرسوف في 7 سبتمبر 1191، زمن الحملة الصليبية الثالثة بين صلاح الدين الايوبى وريتشارد. هزم فيها جيش صلاح الدين الأيوبي. في يوم 22 أغسطس 1191، خرج ريتشارد بجيش من عكا متجها إلى عسقلان، وخرجت قوات صلاح الدين من خلفهم ترميهم بالنبال وتهاجمهم بالسيوف. وقد أمر صلاح الدين بقتل أي صليبي يؤسر كانتقام لمذبحة عكا وقتلهم للأسرى. فدخل الصليبيين حيفا وبقوا فيها، أما صلاح الدين فقد فضّل البقاء في القيمون إلى أن عرف أن الصليبيين خرجوا من حيفا بجنودهم وفرسانهم، ومشوا بجانب الساحل وسفنهم في البحر تحاذيهم، فخرج ورائهم، وحدثت بعض المناوشات. ولما وصل صلاح الدين قرية اسمها دير الراهب بجوار أرسوف، أرسل ريتشارد يطلب مقابلة الملك العادل، فلما التقيا قال له: " لقد حاربنا بعضنا البعض مدة طويلة، وقد جئنا هنا لكي ننصر أهل الساحل، فلو تصالحتم معهم فستنتهي جميع العداوات التي بيننا". فلما سأله العادل وماذا تشترطون لنتصالح؟ رد عليه ريتشارد قائلا: " نشترط أن يستعيد أهل الساحل المدن التي أخذتموها منهم "فانتهت المقابلة ومشى العادل غاضباً.

 يوم 30 أغسطس بقى جيش صلاح الدين قريباً جداً من جيش ريتشارد وحصلت بعض من معارك الكر والفر، وتعرض الفرنسيون لهجمات قوية كانت ستقضي عليهم لأنهم كانوا في مؤخرة الجيش الصليبي. وبعد ذلك بأيام قليلة اختار صلاح الدين أرض المعركة في شمال أرسوف في منطقه مفتوحة تسمح بمناورات الفرسان. يوم 7 سبتمبر اصطف الصليبيين الذين كان من ضمنهم قوات هنرى أوف شامبين، وقوات الملك جاي وفرسان المعبد، والإسبتارية، والفلامنكيين وغيرهم.

 بدأ سلاح فرسان صلاح الدين في الهجوم وهاجموا بخفة وأخذوا يطلقون السهام ثم يتراجعون بسرعة وفي كل مرة يقتربون أكثر وكالبرق كانت سرعة خيولهم وارتفع غبار كثيف. أجل الملك ريتشارد هجومه واعطى اوامره للمشاة ان يصدوا المسلمين وانتظر حتي تُجهد خيول جيش المسلمين واستمر الامر حتي منتصف النهار والحقت السهام خسائر فادحة بخيول الإسبتارية.

 ولم يستطيع قادة الاسبتارية ان ينتظروا أكثر فهتفوا باسم القديس جرجس وهاجموا. وادرك ريتشارد انه لن يستطيع كبح جماحهم فاندفع بحصانه وتبعه فرقته لدعم الاسبتارية ضد ميمنة المسلمين واندفع الداوية ضد ميسرة صلاح الدين وفوجيء المسلمين بالهجوم وتراجعوا بعد خسائر كبيرة وحارب قلب الاسد بشجاعة.--> لكن صلاح الدين تماسك وجمعه، وأمر بحماية معسكره وقام بهجوم جديد على الصليبيين لكنه فشل في التحكم في المعركة، وكان جيش الصليبيين منتصراً. انهزم جيش صلاح الدين ولولا حماسة صلاح الدين الشخصية وصلابته لكان جيشه قد انهزم هزيمة فادحة. مع ذلك النصر الذي حققه الصليبيون ما لم يكن حاسماً، ولم يقتل من كلا الجيشين عساكر كثيرون أو أمراء مهيمنين. أراد صلاح الدين أن يدخل معركة جديدة، لكن ريتشارد لم يرد ذلك لانه كان يعلم أنه ليس بالقوة التي تسمح له بدخول معارك متتابعة، فأكتفى بنصره المعنوى في أرسوف. وهذه المعركة كانت أول معركه مفتوحه بين جيش صلاح الدين والصليبيين بعد معركة حطين.

 صلاح الدين ذهب بجيشه إلى الرملة وانتظر هناك كي يرى ماذا سيفعل ريتشارد. ذهب الصليبيون إلى يافا وحصنوها، وبدأ ريتشارد يستعد للوصول إلى القدس. وهنا، يقول المؤرخون إن ريتشارد قام بخطأ هو الآخر لأنه انتظر مدة في يافا فلو أنه خرج من أرسوف إلى القدس فوراً لكان من الممكن أن يحصل عليها، لكن ريتشارد كان يعلم ان صلاح الدين قد انهزم، لكن جيشه كان موجوداً، ولو ذهب إلى القدس فوراً لكان جيش صلاح الدين بإمكانه أن يعزله عن الساحل، وبالتالى عن الإمدادات من البحر، فكان لابد من يقوم بعمل قاعدة قويه في يافا قبل أن يغامر ويتوغل في البر. لكن تأخره في يافا أعطى فرصة لصلاح الدين بأن يقوم بعمل تحصينات ودفاعات متينة حول القدس.

 ومن ناحيته خاف صلاح الدين من أن يذهب ريتشارد إلى عسقلان ويقوم ببناء قاعدة ثانية هناك، فيقطع الطريق بينه وبين مصر مصدر قوته وعسكر جيشه وترسانته، فسبقه إلى هناك ودمرها وجعلها غير صالحة للاستعمال كقاعدة عسكرية. ريتشارد بدأ يواجه مصاعب، عساكر من الجيش الصليبى بدأوا بالتسلل والهروب إلى عكا، وفوق ذلك بدأ ريتشارد يالقلق من كونراد في صور ومن رجوع فيليب إلى فرنسا، ومن أخبار التمردات التي تحصل في قبرص. ولكي ينتهي من قبرص باعها لفرسان المعبد، وابتدأ يتجهيز للتفاوض مع صلاح الدين.

وقد قبض على والتر الأرسوفي في معركة حطين في شهر تموز عام 1187 ، وعادت المدينة إلى ‏أيدي المسلمين في شهر آب من ‏نفس السنة وبعد ثلاث سنوات من فتحها هدم صلاح الدين حصونها ‏لكن المدينة استرجعها الصليبيون في أيلول من عام 1191 بعد ‏هزيمة صلاح الدين في شمال شرقي ‏المدينة أمام قوات ريتشارد ، وقد دفن الفارس جميس الأفِسنيسي في سانتا ماريا ، كنيسة أرسوف ‏‏الرئيسية بعد وفاة خليفة والتر ، جون ، في عام 1198 أو قبله ، انتقلت ملكية المدينة إلى ثييري ‏الأوركاوي ‏Thierry of Orca، ‏زوج أخت جون واسمها مليسِندا، لكن بعد وفاة ثييري في عام 1207 ‏، تزوجت مليسندا جون الإبِليني ، حاكم بيروت بدأ ابن جون ‏بتحصين أرسوف في 1241، لكن بعد ‏موته في 1258 انتقلت الملكية إلى ابنه باليان لم يستطع باليان أن يدافع عن المدينة ضد ‏هجمات ‏المماليك فأجّرها إلى جماعة الإسبتارية في 1261 مقابل مبلغ قدره 4000 بيزة سنوياً.‏

وفي 1263 ، سجلت المصادر الإسلامية أن الإسبتارية بدأوا ببناء ربض ، وكان هذا مخالفاً ‏لما اتفقوا عليه مع السلطان بيبرس ، ‏فحاصرنا السلطان بيبرس في 1265 وبعد أربعين يوماً من ‏الحصار – في 26 نيسان ، ترك الإسبتارية المدينة واعتصموا بالقلعة التي ‏سقطت بعد ثلاثة أيام فقط ‏بعد تقويض بوابتها وقد أسر حوالي 1000 من المدافعين عن القلعة أو قُتِلوا ثم هدم جدار القلعة ‏وسور ‏المدينة بعد ذلك