绿帽子这个词的由来：古代有一对夫妻，丈夫是个生意人，妻子因丈夫经常外出不在家，于是和卖布的好上了。有一次那卖布的正和妻子幽会，当晚丈夫差点将他逮了个正着，妻子也吓了个半死，那卖布的只好哆嗦在人家的床底一整晚。之后妻子用绿色的布料做了一顶帽子给丈夫，和卖布的约定，看见丈夫戴上绿帽子外出就可以来了。此后丈夫戴上那顶绿帽子外出，他妻子就和卖布的私会。于是绿帽子说法就传下来了。

绿帽子，本意指绿色的帽子，现在多意指伴侣出轨。隐含的意思是伴侣的一方和其他人相好，另一方就被称做是被戴了绿帽子。

而被人戴绿帽子是件很不光彩、很丢人、丢脸面的事情。“绿帽子”相传已久，虽然说法不一，但大概意思是一致的，后来大家便把这类事情叫做给人戴了“绿帽子”。

中国的男人们大抵最害怕自己戴上那“绿帽子”，说来有一段让人饶有兴趣的史话。“绿帽子”的演变过程长达两千年，“乌纱帽”则起源自南朝宋年间（另有说东晋时宫中就开始流行）。有意思的是这顶“帽子”都是在朱元璋手上最后“定型”，成为一个具有特殊含义的词。