三省堂 大辞林

ばかり-に

（連語）

〔副助詞「ばかり」に格助詞「に」の付いたもの〕（接続助詞的に用いて）ただそれだけの原因・理由で、事態が悪化するような結果が導かれることを表す。
「ちょっと油断をした―、とんでもないことになってしまった」「ちょっと口をすべらした―、すっかり怒らせてしまった」