根据您描述的情况,这个问题涉及到物权法、婚姻法以及合同法等多个法律领域。在中国大陆地区,房子的所有权原则上以产权登记为准,目前该房产登记在您的名下,从法律角度看,您是该房产的所有权人。男方哥哥出资购买,如果他没有明确表示是对男方的赠与,那么可以理解为他是对您的一种债权或者借款行为,或者是对您的直接赠与。如果没有明确的书面约定或其他证据证明男方哥哥要求返还财产的权利,男方哥哥直接要求要回房子是比较困难的。然而,男方哥哥可能会主张存在借名买房、委托购房或者其他形式的合同关系,并提供相应证据来维护其权益。此外,基于公平原则和实际出资情况,法院也可能会考虑男方哥哥的实际贡献进行利益平衡。另外,对于非婚生子女,虽然您与男方并未结婚,但孩子享有合法的财产权益,特别是在抚养问题上,可能会影响到房产的处置。因此,具体分析和判断需要结合更多实际情况和证据,建议您在遇到此类复杂法律问题时,及时咨询专业律师以获取准确的法律意见。