一般情况下，拆迁协议是双方自愿达成的协议，一旦双方都签约，就达成了法律上的有效协议。因为签协议的过程是经过了双方的商议和讨论，达成了双方消除矛盾的方案，所以撤销协议本身就意味着矛盾再次爆发，双方的关系也再次恶化。
即使在一些特殊情况下，协议的内容存在一定的违法性，或者在签署协议后发生了重大变化，也不一定能够撤销协议。这时需要通过法院的途径来解决争议，而不是通过单方面撤销协议。
因此，在签署拆迁协议之前，双方应该充分了解协议的内容，并确定自己的权益得到了充分保障，尽量在签署协议之前进行咨询和协商。
如果确实不想签署协议，可以尝试寻求改变协议的条款，或者在合理的范围内寻求保护自己的利益。在这个过程中，需要注意的是不能采取激烈的行动，破坏与拆迁部门的沟通和协商，以免影响自己的利益和日后的处理进程。
