不会。海马体并不是直接负责接收电话信号的器官，电话信号是通过听觉系统传递到大脑的，而听觉系统与海马体之间没有直接的连接，因此，即使不接听电话，海马体也不会受到影响。