连女方亲戚、族人也不清楚女方是不是嫁的;有了小孩后,也不喜欢让外孙叫外公外婆,而是叫爷爷奶奶;除夕吃年饭,上午在女方吃,下午回男方家时,岳父岳母像不太高兴,说过年没人陪,说男方家过年人多,而且还有个哥哥可以陪父母,多你一个不多,少你一个不少。请问作为男主,怎么做最合适?