面对造谣的人，可以采取以下措施：
如果造谣内容对自己的影响不大，可以选择不予理会，因为随着时间的推移，谣言的影响会自然淡化。
可以通过公开事实真相来反驳造谣者的不实言论，让公众了解真实情况，从而使造谣内容失去意义。
如果造谣行为对自己的影响非常严重，可以向公安机关报案，要求对方停止造谣并追究其法律责任。
如果造谣行为情节特别严重，可以聘请律师搜集证据后向法院提起诉讼，要求对方停止侵害、赔礼道歉、恢复名誉及赔偿损失。
可以尝试与造谣者进行协商，要求其停止侵害行为并赔偿相应损失。如果对方同意，可以达成和解。
如果协商无果，可以寻求第三方调解，例如通过人民调解委员会等机构进行调解。
根据《中华人民共和国民法通则》和《中华人民共和国治安管理处罚法》等相关法律，造谣者可能面临停止侵害、恢复名誉、消除影响、赔礼道歉及赔偿损失等法律责任。
在报案或起诉前，应尽可能收集有关造谣的证据，以便在需要时能够提供有力的证据支持。
公安机关可以根据情况对造谣者进行治安处罚，包括拘留和罚款等。
如果造谣行为构成诽谤罪，造谣者可能面临三年以下有期徒刑、拘役、管制或者剥夺政治权利的刑事处罚。
综上所述，对付造谣的人可以根据具体情况选择合适的法律手段进行维权。在处理过程中，保持冷静，合理利用法律武器，可以有效维护自己的合法权益。