ここでいう「安全サイド」は
もっと火事場の話で

「数字的にもうかなり危ないんちゃう？」

vs.

「いや、長い目で見ればよくなるし
残留くらいはできるだろう」
(安全サイド)

という意味かと思います。

座して焼け死にたくはないですね