我做了已婚男人的情人，而且也爱上他了，我们是同事，我该怎么办？

我的故事有点长，我知道大家都很通恨小三这个次，我曾经也是，但是我也不知道某一天会走到这一步。

坐标西安，说说我们各自的情况吧，我陕西人，95年，家里独生子，父母双职工，有车有房，身高165，体重98，长得看得过去，有点小气质，皮肤白。他甘肃农村人，98年，父母卖调味品，初中当兵回来后2019年就结婚了，媳妇家也是农村的，01年的，也没上过学，没接受好的教育，2019结婚的时候媳妇不满18岁，那会孩子都5个月了，第二年才领证了。

我两的故事是同事，4月20号晚上出差回来吃了烧烤，喝了点酒，鬼使神差就睡了一晚上，第二天早上起来各忙各的，我原本只当是一夜情，没想到一发不可收拾。从那以后他每天发消息找我很粘人，后来我们一下班就在一起有10多天，我辞职了，5月开始他不忙就会找我，一直相处挺好的，我对他的媳妇孩子充满了愧疚，但是还是舍不得离开他，从4月20到今天他不到三个月给我花了3万左右，而他媳妇没工作，在家带两个儿子，说实话，他对我真的挺好，能感觉到也是真心的，他一月工资5500，因为我有外债，认识一个月的时候给我了2万还债，平时出去吃饭开房啥都是他花钱，有一次给我转1万买东西，说媳妇要看牙，问他要9000都没给，给我买1000多的化妆品，回去把礼盒里面的小样送给了媳妇，我真的挺心酸……

我比他大三岁，他说我很懂他，我俩确实很聊得来，他能让我开心，让我不孤独，有精神支柱。

结婚这些年他一直不愿意回去，其实说到底还是没责任心，没担当，我其实是一个跟人聊清醒的人，无论他的条件还是各方面确实匹配不上我，但是他也不会为我离婚，没有能力精力实力。

如果他真的没结婚或者离婚我怕我躲都躲不急，但是我还是心理很矛盾，他对我到底是啥感情呢？而我对他又属于什么呢？是因为孤独还是其他呢？他不会为我离婚的点在哪呢？