但是，一部分佛教徒把“欢喜天”的男像当作佛的化身，把女像作为妖魔与俘虏的化身。另一部分佛教徒则不承认这种解释，他们说女像是佛的化身，男像原先是异教的魔王，后来投降佛教，充当了佛教的“护法金刚”——这种说法不仅为西密和台密中的一部分佛教徒所坚持，更在东密的日本所流传。
对此，经典上也有记述，《四部毗那夜迦法》中说：
观世音菩萨大悲熏心，以慈善根力化为毗那夜迦身，往欢喜王所，于时彼王见此妇女，欲心炽盛，欲触彼那夜迦女，而抱其身。于是，障女形不肯受之，彼那王即忧作敬，于是彼女言，我虽似障女，自昔以来，能忧佛教，得袈裟，汝若实欲触我身者，可随我教，即如我至尽未来世，能为护法不？可从我护诸行人，莫作障碍不？又依我已后莫作毒心不耶？汝受如如敬者，为我亲友。时毗那夜王（即欢喜王）言，我依缘今值汝等，从今已后，随汝等语，守护法。于是毗那夜迦女含笑，而相抱时彼作欢喜言，善哉，善哉，我等今者依汝敕语，至于未来护持佛法，不作障碍而已。乃可知女，观自在菩萨也。是则如经所说，应以妇女身得度者，即现妇女身而为说法。
以上也是佛教密宗时“欢喜天”来历的附会之说。
西密和台密的传说是：本尊（即指那个凶恶的男佛像）为大自在天神，即有权势的婆罗门教徒，久恼害教（危害佛教），杀业重重，众生多苦。佛（指释迦牟尼）派十一面观世音收服，遂列入佛教护法天神之一为佛教捍卫。
上述传说还比较隐讳，而东密（日本密宗）的传说则更为明显地包含了性成分。他们认为双体“欢喜天”中那个男像名叫“毗那夜迦”，是崇信婆罗门教的国王，手下兵多势大，常常残害佛教徒，释迦牟尼派观世音化成美女，去和毗那夜迦结为夫妻，后来这个毗那夜迦因醉于女色而投降佛教，充当了佛坛（即曼荼罗）上众金刚中的主尊（领袖）。后世主持男女恋爱之神，就是这个毗那夜迦。当然，也有不少佛教徒不同意这种说法，因为施用“美人计”，实在太违反佛教的教规，太荒唐了。
在我国，佛教密宗古已有之。密宗在唐朝盛行时，密宗佛像较多地供奉于中国各地的寺庙之内。日本传入这种佛像，就是始自中国的唐朝。可是唐末大乱，密宗教门遭受破坏，密宗佛像也几乎被摧毁无遗。
到了元朝，喇嘛教兴起。喇嘛教是佛教的一支，主要传播于我国的藏族、蒙古族等地区。喇嘛是藏语“上师”的意思。公元7世纪，吐蕃赞普松赞干布在他的两个妻子尼泊尔公主墀尊和唐文成公主的影响下，信奉了佛教。公元8世纪时，天竺僧人寂护、莲华生等到吐蕃来传播显、密两系佛教。可是到了公元9世纪，赞普朗达玛却禁止佛教流传。到了公元10世纪后期，在吐蕃新兴封建领主阶级的扶植下，佛教以喇嘛教的形式得到复兴。到了13世纪中期，元太祖（成吉思汗）铁木真和元世祖忽必烈先后两次出征西藏，大力提倡佛教密宗，密宗佛像也就随之而传入蒙古。忽必烈入主中原后，佛教密宗又随之传入华北各地，以山西五台山为佛教密宗总禅林。明、清两朝，全都利用喇嘛以怀柔蒙、藏，于是密宗佛像也就普遍地供奉于许多喇嘛寺庙之中。目前我国还保存着的“欢喜天”大都是元代及元代以后的遗留。如甘肃敦煌莫高窟第465窟所保存的许多“欢喜天”壁画（都是元代遗留下来的。