立憲民主党・枝野幸男氏、東京五輪中止求めず…「かえって大きな混乱を招く」