just when; of all times
あなたがいないときに限って、あなたが欲しい。
It’s only when you’re not around that I want you.
その日に限って彼は欠席だった。
He was absent that day of all days.
夜寝れない時に限って、時計のカチカチいう音が気になるものだ。
It’s always when you can’t sleep at night that the ticking of the clock starts to bother you.
シャワーをしている時に限って、なんでいつも電話がかかるんだ？
Why is it that the phone always rings whenever I’m in the shower?
その日に限って財布を家に忘れた。
Of all days, I forgot my wallet at home that day.
急いでる時に限って・・・
It’s always when I’m in a hurry...
— 鏡 (1975)