这是一个非常敏感的问题，很难一概而论。首先，父母都有抚养子女的责任，无论是父亲还是母亲。但是，如果一个男人欠钱并且无法偿还，那么他是否应该保留孩子的抚养权就要具体情况而定。
首先，需要确定这个男人欠了多少钱。如果他欠了一些小额债务，那么这并不足以让他丧失孩子的抚养权。但是，如果他欠了大量的债务，这就需要考虑他是否有能力继续担当父亲的角色。如果他不能为孩子提供足够的经济支持和稳定环境，那么他可能不应该保留孩子的抚养权。
其次，需要考虑这个男人是否有良好的品行和行为记录。如果他有过犯罪记录或者有其他不良行为，那么他的子女可能会受到不利影响，并且他可能不能保留孩子的抚养权。
最后，需要考虑孩子的最佳利益。如果这个男人是一个负责任的父亲，他与孩子之间的关系良好，并且他有能力为孩子提供足够的经济和情感支持，那么他可能应该保留孩子的抚养权。
总之，无论男方是否欠钱，孩子的最佳利益应该放在首位。如果男方具备成为一个负责任的父亲的条件，那么他应该有权抚养自己的孩子，但如果他无法履行这个责任，那么孩子的利益应该是首要考虑的。
