及川雅貴、侍ジャパンを辞退