因此，绿头巾的称呼应起于明代，明代的乐户乃是一种半妓半伶的低贱职业，规定她们只能戴绿色的头巾，因而绿头巾遂成了低贱的娼妓式记号。老婆养汉，当然也就相当于这种戴了绿头巾的行业。
不过，将绿头巾认为起源于明代，其实并不十分正确。因为，早在元朝的至元五年，就已规定娼妓穿著紫皂衫子，戴角冠儿。娼妓之家长并亲属男子裹青头巾，明代的所为显然继承了元制。
不过，若对中国古代的服装、颜色，以及身分阶级的区隔稍加研究，则可发现到元朝的绿头巾并非向壁虚构而来。在更早的时代，巾和绿就一直是低贱者的专利。
以巾而论，它虽起源甚早，但直到东汉，它都是平民或贱民们的专属冠饰，由巾并发展出类似的冠饰，如汉代的帻、唐代的头等。清代翟灏在《通俗编》卷十二里指出，远在春秋时代，有货妻女求食者，绿巾裹头，以别贵贱。足见绿头巾之早。汉代有了由巾变过来的帻。唐代颜师古在注解《汉·东方朔传》里所提到的绿帻时，亦曰：绿帻，贱人之服也。
因此，东汉以前，士大夫阶级所戴的乃是冠，而巾只能用于平民或贱民，当时的绿头巾就已是娼妓之家的专属。意大利近代符号学家艾柯umbertoeco曾经对西方的色彩系统做过研究，认为每个时代虽然用同样的颜色字词，但这些字词所指的颜色却不可能一样；意思就是说，古代的绿和近代的绿不可能相同。
这种情况在中国亦然，以前所谓的绿指的大概是帛布的自然绿，它可能是一种青青寡寡，被水漂白过，有点营养不足的绿色，难怪它会成为贱民阶级专用的颜色。汉代的奴仆阶级被称为苍头，原因即在于他们所戴的巾也是这种绿色。这种情况在欧洲亦然。
中古时的蓝色和今天不同，那是一种苔藓式的颜色、修道院的石质墙壁即这种颜色，因而近代遂称为修道士蓝。
因此，绿在中国古代的颜色评等上，乃是最低级的颜色。在唐代，官吏有袍，品级最低者也是绿色。唐代白易的《怀微之》有诗句曰：分手各抛沧海畔，折腰俱老绿衫中。可以为证。
也正因为绿头巾为低贱之装束，唐代李封在当延陵令时，遂吏人有罪，不加杖罚，但令裹碧绿以辱之，随所犯轻重以定日数。
基于以上之论证，已可看出绿头巾长期以来，即一直是贱民隶卒或仆庶者流所使用的装束。正因如此，它到了元朝开始，遂日益成为娼妓之家男子们之装束。将妻有行者称为绿头巾、绿帽子或戴绿帽子，乃是这种服色传统一脉相承之后的终极结果。绿头巾和绿帽子，也因此而从一种服装旳记号语言，升格成日常用语
不论来历如何，绿帽子终是出于低贱，或都是妻子出轨有关。所以男人不能接受自己的妻子出轨，自然也就对这种帽子无比痛恨。这也是恨屋及乌的一个典范了。绿帽子也就遭了这出轨的殃。祸及池鱼，被永远的打入了历史的垃圾堆，而且永无翻身的可能。
这就是绿帽的冤案。
绿帽子的来历在线阅读