対処方法を教えてください

Question

先日、道路の左路肩にバイクが停まっていたため、進路変更のために後方確認をして走行しました。

その後、再び左に戻る際に、偶然そのバイクの人と目が合い、目を合わせたことに対して、怒られました。「待て」と言われても逃げ続けました。
今でも、すごく怖く感じてしまい、記憶も少し曖昧になるほどでした。特に何かされたわけではないのですが、今後また同じような場面があるかもしれないと思うと不安です。

この時、どのように対処するべきだったのか教えていただけませんでしょうか？