石破茂さん、「石破だからトランプに会えない」という批判にいら立ちを感じていた