个人所得税缴纳的课税对象是劳动者。退休人员退休之后就不在是劳动者了，不是劳动者不再领取工资，没有工资也不缴纳个人所得税。
个人所得税
个人所得税是国家对本国公民、居住在本国境内的个人的所得和境外个人来源于本国的所得征收的一种所得税。根据《个人所得税法》和国家税务总局《关于离退休人员取得单位发放离退休工资以外奖金补贴征收个人所得税的批复》(国税函[2008]723号)规定，退休人员养老金免征个人所得税，其余的个人收入如返聘的劳务报酬、各种补贴、奖金等均应纳税。
我国劳动法对劳动者的认定进行了规定，其中《劳动合同法》第七条认定“用人单位自用工之日起即与劳动者建立劳动关系。用人单位应当建立职工名册备查。”
意思就是我国的劳动者是与用人单位形成用工关系的个人，退休人员与用工单位的劳动关系已经结束了，自然退休人员不在是劳动者。根据《个人所得税法》的第二条，可以知道个人所得税法的征收对象是工资薪金，工资、薪金的领取人员是劳动者，退休之后劳动者领取的是退休金，不是工资、薪金。可见，退休人员是不同缴纳个人所得税的。
而且我国《个人所得税法》也明确规定了退休后不用缴纳个人所得税。其中第四条对个税免征的情况做了规定，第七项讲“按照国家统一规定发给干部、职工的安家费、退职费、基本养老金或者退休费、离休费、离休生活补助费。”
我国劳动者退休后不用进行缴纳个人所得税，个人所得税的征收对象是劳动者，而已经退休的人员不再是劳动者，所以不缴纳个人所得税。如果税务部门要求退休人员缴纳个人所得税，是违法的行为，可以进行申诉。