1933年，蒋介石邀请段祺瑞南下，老蒋亲自去码头接人

众所周知，段祺瑞有一个外号是“歪鼻子”将军，之所以有这个称号，完全是因为他大怒时，鼻子会向左歪，等他发完脾气，鼻子还是歪的，必须得找中医按摩，才能缓缓恢复原位。

当然，段祺瑞会歪鼻子，和他的姨太太脱不了干系。

段祺瑞曾先后迎娶过两房太太和五房姨太太，原配夫人去世后，给他留下一儿一女，第二位太太张蘅是袁世凯的干儿女，为他生下四个女儿，段祺瑞一直盼望的儿子却没有人影。

张蘅自觉对不起丈夫，于是主动为他纳了姨太太，一来二去，段祺瑞有了五房姨太太。

段祺瑞下野后，前往大连疗养，除了三姨太、四姨太和五姨太外，其余的都跟随段祺瑞离开，这几位留在家里寂寞难耐，平日里也没其他的事，于是干脆在梳妆打扮上花费功夫，她们相约看电影、听戏，没事还会在外面招蜂引蝶。

这日，段祺瑞因为公事，一声招呼都不打的回到公馆，这下子打了所有人一个措手不及。段祺瑞一进门就发现不对劲，他的三姨太半夜三更才身影袅袅回到公馆，不仅如此，她还浓妆艳抹，这下子段祺瑞可气炸了。

段祺瑞当即将三姨太叫住，询问她去哪儿了，为什么把自己打扮成这样。话落，三姨太一脸心虚，结结巴巴半天都没有说出来。段祺瑞当即气急败坏地朝着三姨太扇了过去，质问对方大半夜的去哪里鬼混了。

三姨太被教训了一顿，不敢再继续隐瞒，段祺瑞这才知道，自己的三姨太竟然出门和自己的儿子夜半幽会。

这下，段祺瑞是真正的气得要命，他指了三姨太半天，硬是没有说出一句话，不仅如此，他反而将自己的鼻子气歪了，之后就再也回不去了。

之后，段祺瑞将三姨太休掉了，将她送回了娘家，之后，四姨太的风流事也传到了段祺瑞的耳朵里，段祺瑞气急败坏的把她也一并休了，丢回了娘家。

段祺瑞下野后，简直穷的不得了。段祺瑞生性不爱财，所以也不敛财，就连家底都没有多少，他所住的北京的公馆还是当年袁世凯送给他的。

为了节省开支，段祺瑞将自己从不管家的习惯也改掉了，每天都会亲自过问家里的账目，后来，公馆的规模缩小，厨房里的工作人员只剩下八九个，当差打杂的加上看门的，也才十几个人，就连小姐和太太们房间里的老妈子也有所缩减。

1933年1月19日，段祺瑞接受了蒋介石的南下邀请：“我已老，不中用了，如介石认为我南下于国事有益，我可以随时就道。”

之后，在吴光新等人的陪同下，段祺瑞离开了天津，对于段祺瑞的到来，蒋介石非常重视，还通令南京少将以上的军人过江到浦口车站迎接，他本人更是亲自去下关码头恭候。段祺瑞抵达时，蒋介石更是直接上前敬礼，然后搀扶着他下船，当晚，蒋介石设宴招待段祺瑞，南京的军政要员也都出席作陪。

1月23日，段祺瑞在蒋介石等人的陪同下，拜谒了中山陵，之后乘坐快车去了上海。

次年，段祺瑞因为胃溃疡引起胃部出血住院治疗。出院之后，因为年事已高，身体渐渐衰弱下去，医生和友人见状，都劝说他开荤来补充营养，可段祺瑞依旧坚持：“人可死，荤不可开。”

1936年11月1日，段祺瑞的胃病发作，出血不止，次日晚上，他在上海医院去世，时年72岁。

段祺瑞虽然是军人出身，但是没有打过什么仗，不过，他对中国军队的近代化进程作了一定的贡献：段祺瑞在北洋建军中，督练北洋新军；主持各类军事学堂......

但是，因为军队的私有化造成的民初政治动荡等，段祺瑞他也难辞其咎。