職場でちゃんと仕事をしない、できない同僚に対して厳しくしてしまいます。

もちろん、他人にそれを求めるからには、自分もミスがないように迷惑をかけないよう完璧な仕事を目標にしており、それでもミスしてしまったり失敗することもありますが、その時は反省して同じ失敗を繰り返さないよう、再発防止策を講じるなど気をつけてきました。

ただ、同僚にはやりたい仕事しかしない人・同じミスを繰り返す人・主体的に仕事をしない人がいて、仕事中におしゃべりばかりだったり、ネットを見ていたり、もっと一生懸命仕事をしてほしいという不満や怒りを感じることが多いです。

ただ、その不満を上司に愚痴っていた時、世の中の人は私が求めるほど仕事に注力したいと思っていないとか、もう少し自分を客観視した方がいいと言われました。

正直、言われたその時は仕事をちゃんとやるのは当たり前では？という思いで一杯だったのですが、このサイトで他の方の質問を見るうちに、その考えが傲慢だったのかなと思い、何が正解か分からなくなってきてしまいました。

私は自分が偉いだなんて思っていない（むしろできない人間だから努力したい）と思っていて、人間みんな大したことないのだから努力したらいいのに、と思っていたのですが、この考えこそ傲慢だったのでしょうか。。
取り留めのない文章で恐縮ですが、上記を見て感じたことや、アドバイス等あればご助言いただけますと幸いです。
どうぞよろしくお願いいたします。