ご自身が自転車で走行するとき、ドコを見ていますか？
車も同じです。手元を見ずに先を見て状況を判断しましょう。
ハンドル操作を素早くと言うのは…イメージがわきませんが…
恐らく狭路の走行だと思います。
ハンドル操作と速度は比例しないのでその辺を意識してみてください。