根据法律规定，离婚后，原配偶的姓氏不会自动改变。这也意味着，即使您与前配偶签订了再婚协议，并在其已经使用的姓氏下重新结婚，离婚后仍然无法自动更改为原来的姓氏。
但是，如果您确定要更改姓氏，仍然可以尝试提出请求并办理变更手续。您需要按照当地政府或国家法律规定的程序，提交相关文件并接受审查。这些文件可能包括身份证、户口本、结婚证、离婚证、再婚协议等。事实上，变更姓氏需要一定的时间和精力，但如果对您来说是很重要的，将是一个值得付出的努力。
此外，一些特殊情况下，例如援助妇女离婚的案件，法院也会给予离婚妇女更改姓氏的特殊权限。
总而言之，尽管再婚协议中可能规定了使用前配偶的姓氏，离婚后仍然可以更改姓氏，只需按照当地政府或国家法律规定的程序来办理变更手续。
