你可以向交警大队或派出所报案。或向法院起述，要求归还证件，同时可以要求赔偿相关损失。对方的行为涉嫌违法，交通法明确规定。除了交通管理部门，任何个人和单位不得以任何理由扣留驾证与行驶证。
事故是私了的，不然行驶证不会在对方手中，最简单方法，去车菅所报挂失，重新补办行驶证。正确做法，报警你接受无证驾驶处理，对方在不还行驶证，就违法了，这样做没有后患。
