>ASIOのレイテンシ情報はinとoutで個別管理されてるから

よほど古いDAW（cubase vst5とかlogic4）を使ってるんでなければ
実際のレイテンシーはインとアウトを合計した数値になるよ。
インに対してアウトが2倍のI/Fがあるから
そういう機材だと設定値の三倍のレイテンシーを感じることになる。
tone portダイレクトよりも4msのがレイテンシーを感じるならまさにそれ。