コンビニatmでの連続使用で怒鳴られました。

後ろに人が並んでいなかったこと、大きな金額を取り扱っていたこともあり、3回連続で入金しようとしました。
atmに利用制限の張り紙はなく、1回目が終わり2回目を初めているときににうしろに並んだ人。その人が並んでから、2回目の操作を始めようとしたら
連続でやりすぎやろ！！どけ！！
と実際に怒鳴られました。
後ろに並ぶ前からどこかにいたのか？そうだとしても、後ろに並んでからこっちは意識するので知ったこっちゃないですし…

ルールがない以上、譲り合いは思いやりの範囲だと思いますが、わたしもこれまでも同じようなシチュエーションに出くわしましたし、普段は他人に迷惑かけないよう気を遣っていますが今回は後ろに並んでから2回めだし、許容範囲と思い操作をしようとしました。
帰宅後ネットで検索すると、ルールのないatmでは3〜4回が限度、とあり、やはり声を荒げて怒られる筋合いはなかったのではと。わたしにも譲り合いの精神が足らなかったのは承知ですが、入金だけなので一度の操作にそれほど時間をかけたわけでもなく、見ず知らずの人に怒鳴られるほど悪いことをしたのかと考えています。
怖いし、ショックだし、その人は30代の小汚い男性で、札束を持ったわたしに対して、借金でもするから嫉妬してるのか？と想像して心を落ち着かせるも、(わたしの性格が悪いのはわかっていますが…)なかなか落ち着かず、悔しいです。
世の中、他人に気を遣わず、なぜこんなことするの？自分がされたら嫌ではないの？と思うことがたくさんあります。人に迷惑かけないよう気を遣ってきましたが、無駄にいいひとしたって、誰も気づかないし、疲れるだけ。少し図々しく生きよう。なんて思います。今回まさにそれで、事情もあって後ろに並んでからすぐに譲ることはしませんでした。だとしても、悪いことをしているとは思えず、怒鳴られたことに怒りを感じます。
わたしが悪いのでしょうか。