偷偷爱上姐夫 我该怎么办

那段时间我失业，在家人的提议下，到了姐夫公司，接替姐姐的工作，当时姐姐怀孕。
姐夫是个很能干的人，跟我年龄差不了几岁，从聊天中我知道姐夫对我比较欣赏。因为工作关系需要经常跟着姐夫出出进进。有时候会很晚，他会开车送我回家。就这样接触久了，慢慢的我们之间有了微妙的变化。姐夫会不经意间，摸我的头发，说我的头发很漂亮。我迷迷糊糊，有排斥……
我没有男朋友，有时候一个人也会觉得寂寞。后来有我提议也有他主动，断断续续的一起去吃西餐，泡酒吧，很开心。刚开始时对于他的牵手和拥抱，我拒绝过，但没有坚持，最后发展到亲吻，仅此而已，没有突破底线。这样一段时间以后，他主动提出还是维持以前的关系对大家都好。出于自尊心和愧疚感，我同意了。
我们之间突然有360度的变化。话很少，交流很少，彼此甚至有意无意的躲避，该死的是我放不下。然而生活照常进行，工作在同一屋檐下，低头不见抬头见，在其他同事面前最大限度的装做若无其事的样子，直到姐回来上班。
在姐面前他表现的那么像姐夫！而我对姐的态度中也搀杂了莫名的情绪——内疚和自责。 要面对她、他、他们、还有自己。我实在是承受不了。
这份工作对于我来说是一全新的行当，到现在学了已经快一年，现在若抽身离开，是不是半途而废？身边的人会否怀疑我的能力？包括他。心情不好很影响工作，也影响生活，都说我变的没有以前开心，没有以前豁达。自己变的很敏感，情绪起伏不稳，心里压力特别大。委屈而又矛盾，我该怎么办？