مقطوع النسل

عزیزخان از دوران طفولیت و پس از اینکه مقطوع النسل و خواجه شد، در اندرونی ناصرالدین شاه قاجار زندگی می‌کرد. میرزاعلی اصغرخان امین السلطان مشهور به اتابک، وقتی که متوجه شد عزیزخان خواجه اندرونی شاه است، وی را به طرف خود جلب نمود و او را مأمور گزارش دادن جریانات اوضاع اندرونی شاه و آنچه که در میان زنان ناصرالدین شاه می‌گذشت، نمود. ناصرالدین شاه که از درز کردن اخبار اندرونی خویش به خارج از دربار و اطلاع امین السلطان از این اخبار متعجب و خشمگین شده بود، پس از مدتی تحقیق و بررسی از جریان امر مطلع شد و فهمید که راپرتچی یا مأمور گزارش‌های محرمانه اندرون به امین السلطان، عزیزخان خواجه‌است و به همین دلیل هم، او را از اندرون اخراج کرد و به امین السلطان بخشید.