一个父亲是否应该要回女儿的抚养权，需要考虑多个方面。首先，必须考虑到女儿的最佳利益，并且确定父亲是否能够提供她所需要的关爱和照顾。
如果父亲能够证明自己有能力照顾女儿，那么他应该有权要回女儿的抚养权。然而，必须注意到过去行为的影响。如果父亲曾经有过被禁止接近孩子的历史，那么这将是一个大问题。此外，如果小女孩已经建立起了与现任监护人的深厚感情，调换监护人可能会对她的心理健康造成不良影响。这些都需要权衡和考虑。
鉴于以上考虑，父亲应该首先考虑与现任监护人和解，并尽力达成一个最佳的共同抚养协议，以确保女儿在一个稳定的，适合她成长的环境中得到照顾。否则的话，需要有足够的证据来证明女儿将得到更好的抚养，才能寻求法院的支持来争取女儿的抚养。
