部署異動願いについて

理由
・来年以降のリーダーと折り合いが合わない。
（仕事熱心さが見えない　・春先体調崩して毎年長期休む・起伏激しく、菓子一つ異常なキレ方・ジャイアン的な威圧感と手を出す（恐怖感が消えない））
・周囲含め、仕事一つ、注意も、し辛い状況
・リーダーの二番手になり、全てのフォローがのしかかる状況）異動しなければ、２０年ずっと

希望に悩む理由
・現在の仕事は好き（作業職で体を動かすから）
・他の部署の勤務帯（遅番早番・休日など）がどういう風なのか、仕事内容も不明。（自分なりに聞いたりしてはいるが）
・勤務帯など、融通が利きにくい（母子家庭・子供がまだ小さく、親など頼れる人が居ない）
・一時、他の部署の人手不足で、人材見つかるまでの期間未定で、臨時異動の際、合わない仕事で鬱状態になり、人事には、適合出来ないレッテルが付いたと思う（言われた訳ではないが、自分で思う）

上司は、事務的仕事で、別の階におり、私たちの作業職は、ほぼ分かっていません。
また、上司に相談した際、来年以降のリーダーの耳に、相談した事が入ると恐怖。
今年は、希望出さない。理由は、退職者数人埋めるのに、なかなか見つからない状況を知っているから。

私自身、不安なども有り、モヤモヤどうしたいのか、自分でも分からないが
もし、希望する場合、どのように伝えるのがベストか、希望悩む理由も考慮して、アドバイスよろしくお願いします。