离婚时小孩不是老公的，他是否该抚养？

从法律层面来看，在离婚的情况下，如果小孩并非男方亲生，男方通常是没有抚养义务的。

抚养义务一般是基于血缘关系或者合法的收养关系产生。在婚姻关系中，如果孩子不是男方亲生，也就不存在天然的血缘联系作为抚养义务的基础。根据《中华人民共和国民法典》第一千零七十三条规定，对亲子关系有异议且有正当理由的，父或者母可以向人民法院提起诉讼，请求确认或者否认亲子关系。对亲子关系有异议且有正当理由的，成年子女可以向人民法院提起诉讼，请求确认亲子关系。当通过法律程序确定孩子与男方不存在亲子关系时，男方没有法定的抚养责任。

此外，要是男方在不知情的情况下抚养了非亲生子女，他还可以要求女方返还已支付的抚养费。这是因为女方的行为可能构成不当得利。不当得利指没有合法根据，使他人受到损失而自己获得利益的行为。根据《中华人民共和国民法典》第九百八十五条规定，得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还取得的利益。所以男方有权要求女方返还抚养孩子期间支出的费用。