春秋时期，孔子曾做过鲁国大司寇，因与当权者意见不合而被疏远。于是，孔子领着他的弟子来到卫国，推行自己的政治主张。
当时，卫国的国君卫灵公很热情地接待了孔子。卫灵公的夫人叫南子，很得卫灵公的宠信。她对孔子很好奇，传话给孔子说：“天下各方的君子，想要和我们国君交朋友的，都会来见见我，这次我想见你。”孔子本不想去，可如果不去的话，得罪了南子，可能会影响自己治国策略的推广。没办法，孔子只好去拜见她，走个过场，敷衍了事。入宫见南子时，他隔着帷帐向北行了个礼,就匆匆离去了。直性子的学生子路对此事不高兴，埋怨老师不该去见这样的女人，孔子急得发誓说：“我如果有什么不对的话，老天厌弃我吧！老天厌弃我吧！”
过了几天，卫灵公和南子坐了一辆车，并让孔子也坐了辆车跟在后面，招摇过市，引来很多百姓的围观。孔子觉得受到了侮辱，发了一句很著名的牢骚：“吾未见好德如好色者也。”——我没有见过喜好德行如同喜好美色的！然后就拂袖而去，领着弟子们离开卫国，前往曹国去了。
成语“招摇过市”就是从这个故事得来的，人们常用它来形容故意在众人面前虚张声势，炫耀自己，以引起人们的注意。过，穿过；市，街市。
