بُنيَت قرية الحرم على مقربة من خربة أرسوف الكنعانية القديمة والتي لا تزال بعض بقاياها قائمة إلى اليوم، وحتى عام 1948 كان في الحرم: 

• مسجد واحد هو مسجد سيدنا علي ذي الطراز المعماري المميز.
• مدرسة ابتدائية واحدة لتعليم أبناء القرية من الذكور افتتحت عام 1921.
• مقبرة واحدة