河野氏の「来日されても困る」発言、韓国当局「不適切な発言だ」