足回りにdockerじゃなくfinchを使う場合でもdevcontainersが動かせるようになっていたので試してみたところ、コンテナ名の長さに若干の制限はありつつも問題なくvscodeで開発できそう。

Enhancing Developer Productivity: Finch’s Support for Development Containers and the Finch Daemon https://aws.amazon.com/jp/blogs/opensource/enhancing-developer-productivity-finchs-support-for-development-containers-and-the-finch-daemon/