برخی برای اثبات ازدواج و اولاد حضرت و مکان دائمی او به روایت احمد بن محمد بن یحیی انباری استدلال کرده اند . در این روایت که مفصّل است اشاره به پنج شهر شده که محلّ اقامت فرزندان و نسل امام زمان (ع) است .
پاسخ : روایت انباری را عدّۀ زیادی تضعیف نموده و به صورت جزم ردّ کرده اند ، از آن جمله می توان به این افراد اشاره کرد :
1. آقا بزرگ تهرانی .
2.سید نعمت الله جزایری .
3.شیخ محمّد تقی شوشتری .
شیخ آقا بزرگ تهرانی می گوید: « این حکایت تنها از طریق و جادت به دست ما رسیده و ما حکایت کننده قصّه را نمی شناسیم جز آنکه او مرد محترمی در آن مجلس بوده است . سند و متن آن مشتمل بر تناقضات و امور عجیب وغریب است که می توان آنها را انکار نمود... و غرض علما در نقل این حکایات مجرد انس گرفتن به یاد حبیب و ذکر دیار و شنیدن آثار اوست ... » .