会。心理有问题的人对情绪和自我控制能力受到影响，无法理性地对待和处理骚扰，不回应会被视为冷漠或对其问题的忽视，进而引发情绪激动或更加困扰的行为，遇到心理有问题的人不断被骚扰不回应会激怒。