VPC ピアリング をする際は双方のホストでお互いのホストへのルートテーブルを設定する

結論

標題のとおりなんですが、結構ハマってしまいました……。

つまり、A と B という二つの VPC をつなげる場合、

• A から B へ通す
• B から A へ通す

この双方をやらないとだめだよというごく当たり前のことです。たとえ通信が AからB だけに限定されるような場合でもだめです。