有的史学家借着孔子的话语，“唯女子与小人难养也”来证明孔子休妻一事，老狼认为是走入了误区。孔子并没有任何轻视女人的思想，这句话骂的是特定的女子。因孔子受卫国国君的邀请，来到了卫国参观学习休养，但在这期间，孔老先生突然发现人家根本是拿他的身份来炫耀自己而已，并不是真正支持他来这教化卫国民众的，尤其是那个卫灵公的夫人，为了抬高自己的身望，公开炫耀。离开之后，心情平复了，想起卫国公老婆那种仗着得宠，骄横跋扈乱政扰民的事，就发了感慨：“唯女子与小人难养也!近之则不孙，远之则怨。”
事实上，孔子周游列国确实历经了磨难。孔子在卫国被卫灵公夫人南子召见。子路对孔子见南子极有意见批评了孔子。由鲁至卫，卫灵公问陈于孔子，呆不下去了，又经过曹国到宋国，宋司马桓魋讨厌孔子，扬言要加害孔子，孔子微服而行。孔子过郑到陈国，在郑国都城与弟子失散独自在东门等候弟子来寻找，被人嘲笑“累累若丧家之犬”。在陈蔡之间被困绝粮，许多弟子困饿而病，后被楚人相救。由楚返卫，途中又遇隐者。吴伐鲁，孔子的弟子有若参战有功。齐师伐鲁，孔子弟子冉有帅鲁师与齐战。69岁的孔子开始安稳了下来，继续从事教育及整理文献工作，虽然有心参政，但不被用。71岁时，孔子见鲁哀公及三桓，请求鲁国出兵讨伐陈桓，没有得到支持。73岁时去世。
孔子的逝世震动不小，不少弟子为之守墓三年，子贡为之守墓六年。弟子及鲁人从墓而家者上百家，得名孔里。孔子的故居改为庙堂，孔子受到人们的奉祀。回顾历史，我们不得不佩服孔子当初的休妻决定，可以堪称是中国式离婚的鼻祖了，为了事业只能将爱情和婚姻割舍，他的内心又是怎样的一种痛啊。但是孔子的夫人亓官氏似乎被遗忘了，一直到宋代以后，在孔庙大成殿后建造寝殿时，人们才开始想到她。从此她才作为专职的“至圣先师夫人”，和她的前夫孔子一起被人供奉在那里。