pandoc は docx とかにするとすごい勢いで構造を崩すので、できるだけ最終段階にだけ使ったほうがいいと考えてます。