根据《中华人民共和国治安管理处罚法》第四十二条，若债主通过电话、短信、上门等方式频繁联系债务人的家人，使用侮辱性语言或威胁手段，干扰其家人的正常生活，即构成骚扰，可能面临拘留、罚款等行政处罚。若骚扰行为情节严重，如导致债务人或其家人精神失常、自残、自杀等严重后果，还可能构成犯罪，如《中华人民共和国刑法》中的寻衅滋事罪，需承担刑事责任。
面对债主的骚扰行为，你可以采取以下措施：
1. 与债主沟通：明确告知债主其骚扰行为已超出合法追债范围，要求其停止骚扰，并表明你会积极协商还款事宜，但需要在合法的框架内进行。
2. 保留证据：收集并保留债主骚扰行为的证据，如录音、录像、短信、聊天记录等，以便后续维权。
3. 及时报警：一旦发现骚扰行为，应立即向公安机关报案，由公安机关依法处理。
4. 寻求法律途径：如骚扰行为导致严重后果，可向法院申请禁止令，禁止债主对你及家人进行骚扰，或者通过诉讼等方式维护自身权益。
在处理过程中，请保持冷静，避免与债主发生冲突，以免引发更严重的问题。如有需要，你可以直接向我咨询，我会为你提供专业的法律帮助。