在中国传统文化中，人们通常使用干支纪年法来计算年龄，干支由十天干和十二地支组成，共六十个组合循环使用。其中，马对应的天干地支是午，而驴对应的是未。虚岁是中国传统计算年龄的一种方式，人出生时就算作一岁，每过一个新年增加一岁。
根据传说和民间故事，唐朝时期，宰相魏征在与唐太宗的对话中幽默地声称自己属驴，这一说法在民间流传开来，特别是在黄淮海一带。虚岁四十一岁的人，按照干支纪年法，干支组合为未申，其中未对应的是驴，因此，虚岁四十一岁的人被称为属驴。
另外，在一些地方，45岁也被认为是属驴的年龄，这可能是因为45岁的人经历了人生的一个转折点，需要承担更多的责任和压力，就像拉磨的驴一样辛苦劳作。
因此，41岁被称为属驴，主要是因为按照中国的虚岁计算方式，41岁时的干支组合中包含了代表驴的天干地支未。这种说法在民间有一定的流传，尤其是在黄淮海一带