如果离婚协议中的楼号写错了，可以通过以下几种方式进行改正：
1.与对方协商
在协议中写错楼号可能只是一小部分问题，双方可以在离婚后进行协商，让对方同意修改该部分内容。通过协商，确定正确的楼号并在协议上签字确认。
2.通过法院申请修改
如果双方无法协商，可以通过法院申请修改。首先要在法院提出申请，建议找专业律师协助处理。申请过程中需要提供证据证明楼号确实存在错误。当法院同意修改后，需要修改协议并重新签字确认。
3.补充协议
如果修改协议的申请被法院拒绝或者对方不同意，也可以在协议中添加补充条款，说明楼号存在错误，确定正确的楼号并加以说明。在协议上签字确认后生效。
无论是哪种方式，都需要双方认真对待。因为离婚协议是民事行为的一种记录，一旦签署，就意味着协议中的条款具有法律效力。因此，在签署离婚协议前，应该仔细检查每一个条款并确定所有内容的准确性。
