根据你的表述，该人的行为构成诽谤，你可以收集证据，然后依法向公安机关报案，要求查处其违法行为（详见治安管理处罚法第42条）。 公安机关依法对其处罚后，你还可以向人民法院起诉，要求赔偿损失，恢复名誉。
这侵犯了你的名誉权。如果你真的忍不了的话，你就要掌握了足够证据。起诉他。
还达不到犯罪的程度，但可以通过民事方面的起诉维护你的声誉。
