不遵守离婚协议是违法的行为，因为离婚协议是夫妻在离婚后达成的一种协议，其内容包括夫妻共同财产的分割，子女抚养和教育等方面的协议。一旦夫妻双方在离婚后达成了协议，就应该认真履行，否则会被追究法律责任。
如果离婚协议中有关于财产分割的内容，一方不遵守协议，那么另一方就有权利向法院提起诉讼，追究其侵权责任。另外，如果离婚协议中有关于子女抚养和教育的协议，一方不履行协议，也会面临法律责任。
对于不遵守离婚协议的行为，法律给出了相应的处罚措施。比如对于财产分割方面的协议，一方不履行协议会被追究违约责任；对于子女抚养和教育的协议，一方不履行协议甚至拐走子女的行为，将被判刑和罚款等。
总而言之，离婚协议是夫妻双方在离婚后达成的协议，具有法律效力。一旦达成协议，就应该认真履行，否则会面临法律的惩罚。如果夫妻之间难以达成协议，也可以通过法律的途径进行调解，以避免因不履行协议而产生的法律纠纷。
