職場の後輩の事と私の彼と2つの人間関係で悩んでいます。

まず後輩についてです。
私は性格上礼儀やマナーをわきまえない人は苦手であまり関わりたくないと思ってしまいます。

また、好きでもない異性との会話中のアクションとしてボディータッチをしたり、妙に距離感を近くする女性が嫌いです。

後輩は女性なのですが、そのどちらの要素を持ち合わせており、
反りが合わないという言葉がぴったり当てはまる性格をしています。

次に彼と私の事についてです。

彼とは職場恋愛をしています。
彼は浮気をする様な性格でもなく、基本的に安定した関係です。
社内では私達の関係はまだ秘密にしています。

関係を公表してない事もあり、後輩は前途の様に彼に親しげに頻繁に話しかけ、彼もそれに応じて話し続ける光景を職場でよく見かけます。

1番好きな人が1番嫌いな人と話している姿を見るのはとても苦しいです。

その都度彼に私の気持ちを伝えるのですが、
社員同士なんだから仕方ない、
単に社員同士というだけなのに嫉妬するのは変だという結論で改善策が見出せません。

私も彼と職場でも話したいけどずっと我慢してるのに
自由に行動できる後輩が羨ましくもあり苛立ちます。

実はこの嫉妬が理由で別れ話も出ていますが、
私は別れたくないと思っています。

私が嫉妬するのは変でしょうか？
私はどう変わっていったらいいでしょうか。