ワンピースアラバスタ編のこのシーンがよくわからないんだが

いつかまた会えたらもう一度仲間と読んでくれますか？って言われてなんでバツなんだ？
いいよーの流れじゃないのか？