我在4月20日晚上骑摩托车直行，被左转弯违章行驶的摩托车撞倒，后来他报警了，双方摩托车被交警拉走了。他证件齐全，交警队判他负主要责任，我无证驾驶负次要责任。我们双方的损失该怎么赔偿（双方损失都没有超过2000元）？是不是要我负责他的全部损失，他负责我的全部损失？如果我不去处理，不在责任认定书上签字，是不是他就没办法把他的摩托车从交警队拿出来，我该怎么办把我的损失降到最低？