在中国，根据婚姻法和儿童保护法，如果父亲去世，母亲则拥有抚养权。但是如果母亲也去世，那么抚养权则可以由祖父母、外祖父母、姑父、叔父等其他近亲属来行使。
因此，如果男方去世，他的爷爷是否有抚养权，应该根据具体情况来判断。如果男方的母亲仍然健在，那么她会是孩子的法定监护人，爷爷不能够取代她的地位。但如果母亲也不在了，而爷爷又是孩子的近亲属之一，那么他可以申请抚养孩子的权利。
当然，在具体申请中，还需要考虑孩子的意愿、爷爷的抚养能力等其他因素。如果孩子已经到了成年，那么抚养权的问题也不存在，他可以自行决定自己的行动。
总之，无论是谁来承担抚养孩子的责任，都应该把孩子的利益放在第一位，给他们提供良好的成长环境和教育条件。
