RunWorkCompletedイベントで２つ目のスレッドを開始したところ上手く閉じることが出来ました。
あそこでエラーが発生する要因は分からないままですが、どうもありがとうございました。