神宮球場、五輪期間に待機所や資材置き場になることが決定していた