الحج فرض بإجماع المسلمين، أي بالكتاب والسنة وإجماع المسلمين، وهو أحد أركان الإسلام، لقوله تعالى: وَلِلَّهِ عَلَى النَّاسِ حِجُّ الْبَيْتِ مَنِ اسْتَطَاعَ إِلَيْهِ سَبِيلًا وَمَنْ كَفَرَ فَإِنَّ اللَّهَ غَنِيٌّ عَنِ الْعَالَمِينَ وقال النبي صلى الله عليه وسلم: إن الله فرض عليكم الحج فحجوا وقال النبي صلى الله عليه وسلم: بني الإسـلام على خمـس: شهادة أن لا إله إلا الله، وأن محمـدا رسول الله، وإقام الصلاة، وإيتاء الزكـاة، وصوم رمضان، وحج بيت الله الحرام فمن أنكر فرضية الحج فهو كافر مرتد عن الإسلام، إلا أن يكون جاهلا بذلك، وهو مما يمكن جهله أو مما يمكن جهله به، كحديث عهد بإسلام، وناشئ في بادية بعيدة، لا يعرف من أحكام الإسلام شيئا، فهذا يعـذر بجـهله، ويعـرف، ويبين له الحكم، فإن أصر على إنكاره حكم بردته.
وأما من تركه - أي الحج - متهاونا مع اعترافه بشرعيته، فهذا لا يكفر، ولكنه على خطر عظيم وقد قال بعض أهل العلم بكفره.