VBの問題なら、同じようなことを他のFTPソフトなどでやってみればどちらかの推測が立つんじゃない？
そういうのも無くて聞かれてもね･･･
TCP/IPの設定によって、全然関係ないルータを介すようになってたら、すごい時間かかるようになってるかもしれないし。
やだよー、デフォルトゲートウェイの設定がおかしいとか、WINSが設定されているからおかしいとか、そういうのが原因だったら。

あと、自分では調べた？