支付赔偿后怕对方再找麻烦怎么办？

今天骑电动车上班途中，一位老人也不知道他是有意还是无意，在路口中突然走过来，当时我电动车已经刹住车，无奈惯性下电车右边的把手还是碰到了老人的侧身，我整个人也站住往前倾(当时老人没有倒，往后大约退了有小步吧，还站着，具体的实在记不住了)。对方随后上楼叫了他儿子下来，跟我商讨怎么赔。随后我打了110，随后来了两位交警，交警让我们协商私了，后来我当交警面支付了200元赔偿，随后交警也没有出具责任认定书，也没有出具什么文书，就让我们各自离开。我现在是担心后面对方还会不会借着这件事后面还继续讹我。