結局vertualなデストラクタを定義しておくのを忘れていて、それを基底クラスとしているクラスのメンバのスマートポインタのデストラクタが呼ばれなかったのが原因だった。それにしても分りずらかったよ。背中は寒いのに鼻水止まらないのに汗かくんだよな…も…