長文での相談、失礼いたします。

現在の職場で同じチームで働いている人のなかに、仕事中にも関わらず、何かと話しかけてくる同僚がいます。
その同僚がネガティブな発言が多く、どう接したらよいか、困っています。

私は今、仕事のモチベーションが高く、キャリアアップをして、もっと収入も上げていきたいと考えております。
それなのに、ネガティブな同僚に話しかけられると、なかなか無下にはできず、付き合ってしまい、結果として、仕事中に私語が目立つ状態になってしまっています。
もっと評価を上げていきたいと思っているのに、このままでは、逆に上司からの評価が下がってしまうのではと気が気でなりません。

同僚との会話の内容としては、同僚が仕事の愚痴や不平不満を言い、私が話を聞いて、意見を求められれば、意見を言うといった感じです。

私が話を聞くのをやめれば、同僚も話さなくなるのかもしれませんが、上手にかわすことができず、結局会話を続けてしまいます。
そして、業務後に何故話し続けてしまったのかと、激しい後悔に襲われます。
これまで積み上げてきた評価が、今日のおしゃべりで一気に下がってしまったら、どうしようとものすごく落ち込みます。

私自身、少し前に仕事のモチベーションが低い時期もあり、同僚の気持ちもわからなくはないので、放っておくのがなかなか難しい状態です。
また、毎日顔を合わせるので、嫌な感じの対応をして波風が立つのも嫌で、強く注意できません。

結局私は、上司や周りからの自分に対する評価が下がることが1番怖く、嫌なのですが、同僚とはどのように接するのがよいでしょうか。
同僚は同い年で、話の合う部分もあり、なるべく嫌いになりたくないのですが、一緒に居ると疲れてしまうのも事実で、困っています。

わかりにくい文で恐縮ですが、同僚への接し方や、話しかけられた際のかわし方について、アドバイスいただけますと幸いです。
よろしくお願いいたします。