根据《中华人民共和国婚姻法》规定，夫妻双方通过协议离婚解除婚姻关系时，需要向当地婚姻登记机关提交离婚协议书，签字的双方同时应当出具本人身份证明和户口簿等证件。
虽然有些地区规定可能有所不同，但是在大多数情况下，夫妻离婚需要提供户口簿作为证据，因为户口簿是证明夫妻关系的重要依据。一方面，户口簿可以确定夫妻的姓名、性别、出生日期以及婚姻关系，另一方面，户口簿还可以证明夫妻关系的时限和变化，如有子女、离婚等。因此，在办理协议离婚时，两次都需要带户口簿。
另外，需要注意的是，离婚协议书必须由双方自愿签署，且内容必须符合法律法规的规定。离婚协议的内容包括财产分割、子女抚养等，离婚协议的签署应当在双方的自愿、公平、公正的原则下进行，确保离婚协议具有法律效力。
总之，对于想要离婚的夫妻，协议离婚是一种比较便捷的方式。无论是第一次还是第二次离婚，都需要提供户口簿等证件，并且签署离婚协议时需要注意各项规定，确保协议离婚的效力和合法性。
