瓜田李下本就该主动避嫌，不妨让公公把孙子带回老家住几天，之后再把孩子送回来就好。