我打电话说了并不是不还。但是他不停的骚扰我通讯录里面的人合法吗，我能起诉他吗。