我公公有两个儿子,我老公是他大儿子。婆婆两年前去世了,公公今年65岁,身体挺好的,每个月退休金8000多。(公公是老教师)。现在公公想和他小儿子的岳母搭伴一起过,他小儿子的岳母才58岁,去年老伴去世了。我和老公都不同意,可他小儿子和儿媳都赞成他们在一起,我们该怎么办?