摆摊的为何如此嚣张？

今天下午我把车停路边，一外地人立马过来说这里不能停，等会晚上我要摆摊。我就问这里是你的，还是划定只允许摆摊了。他说都不是。我就没理他，后来过来了一看，贵贵，车前车后都是摊位了。我要他把摊位挪挪，他来了句叫你别停你要停，现在也别走了。跟他吵了几句，我想报警，他居然说警察来了他就挪摊位，能把他怎样？