ホストがVistaやWin7ならUACがらみでUSBドライバのインストールでこけることがあるみたいで
ゲストの設定で「USB」の「USBデバイスフィルタ」に「空のフィルタを追加」で「新規フィルタ1」を追加しておけば回避できるらしい

うちはホストXPで普通にUSBデバイス使えてる