端午节佩戴香囊是源自一个传说。传说，每年五月五日午时，这个时辰是所有妖魔鬼怪都出来活动。所以古人又将这个节叫“重五节”、“五毒日”。 如果古人能够避过这个时辰就能平安无事，但是一般都很难避过，所以有很多人都被妖魔鬼怪害死。

后来观音菩萨托梦给人们，说妖魔鬼怪最怕金属、香气，只要身上携带上金属或者香气之类的，就能避过妖怪之害。人们口口相传，他们就在这一天午时佩带各种各样的金属与香气之类来避邪，这种做法，俗称“压午”，然后他们都平安无事。

从此人们每年在这天佩带金属、香气之类的东西，时间久了，人们就逐渐在端午这天佩戴香囊驱邪了。