如果需要修改离婚协议，需要前往当地的民政局。在北京，可以前往市级的民政局或者区级的民政部门进行修改。
首先需要明确，修改离婚协议必须是双方自愿协商达成一致后才能进行。修改内容必须符合法律规定，并经过公证机构公证。
具体步骤如下：
1. 双方协商
双方需重新商定离婚协议，并达成一致意见。协商的内容可以包括财产分割、抚养子女、探望子女等方面。
2. 修改协议
根据协商结果，双方可以在原有的离婚协议上进行修改，或者重新起草一份新的协议。修改的内容必须具体清晰，法律合规，并经过公证机构公证。
3. 公证
修改后的协议需经过公证机构的公证，以保证协议的法律效力。公证处会对协议的内容进行审核，并在确认无误后进行公证。
4. 提交民政部门
公证完成后，双方需将协议提交民政部门备案。如需修改离婚证书，还需提供公证处开具的公证证明。
总之，修改离婚协议需要双方自愿协商达成一致意见，并遵守法律规定。如果需要修改，可以前往当地的民政局进行办理。
