আল আরকাম তার পুত্রকে এই শর্তে বাড়িটি দেন যে সে এটা বিক্রি করবেনা। আরকামের এ বাড়িটি ছিল সাফা পাহাড়ের পাদদেশে। সাফা ও মারওয়ার মাঝখানে তাওয়াফ করার সময় ঠিক বাড়িটির দরজার সামনে দিয়ে অতিক্রম করতে হতো। আব্বাসী খলিফা মানসুরের সময় ১৪০ হিজরি পর্যন্ত বাড়ীটি অবিকৃত অবস্থায় ছিল। কিন্তু এ বছরই মুহাম্মাদ ইবনে আবদুল্লাহ ইবনে হাসান মদিনায় আব্বাসী শাসনের বিরুদ্ধে বিদ্রোহ ঘোষণা করেন। আরকামের পৌত্র আবদুল্লাহ ইবন উসমানও ছিলেন এ বিদ্রোহের একজন সমর্থক ও সহযোগী। এ কারণে খলিফা আল মানসুরের নির্দেশে মদিনার তৎকালীন ওয়ালী তাকে গ্রেফতার করেন। খলিফা মানসুর তার বিশ্বস্ত সহকারী শিহাব উদ্দিন ইবনে আবদে বরকে পাঠালেন আবদুল্লাহর নিকট এই বাড়িটি ক্রয়ের প্রস্তাব দিয়ে। 

আবদুল্লাহ প্রথমত বিক্রী করতে অস্বীকার করেছিলেন; কিন্তু কয়েদ থেকে মুক্তির শর্তে এবং উচ্চ মূল্যের লোভে শেষ পর্যন্ত বিক্রী করতে সম্মত হন। আল মানসুর ১৭,০০০ দিনারের বিনিময়ে এ ঐতিহাসিক বাড়িটির মালিকানা লাভ করেন। বাড়ীটির অন্য শরীকরা প্রথমত রাজী না হলেও আস্তে আস্তে তারাও রাজী হয়ে যান। খলিফা মানুসরের পর খলিফা মাহদী এ বাড়ীটি তাঁর প্রিয়তমা দাসী খায়যুরানকে দান করেন। তিনি বাড়িটির পুরনো কাঠামো ভেঙ্গে সম্পূর্ণ নতুন অট্টালিকা তৈরী করেন। এবং বাড়িটি এখন দারুল খায়জুরান নামে পরিচিত। বর্তমানে এটা কাবার বিপরীত পাশে অবস্থিত এবং একটি ধর্মীয় শিক্ষা প্রতিষ্ঠান হিসেবে ব্যবহৃত হচ্ছে।