ipk の X サーバが出てるので、下記の３つを入れたら、X 風になりました。 試したのは SL-C860 です。

http://xqt.sourceforge.jp/index.ja.html
　X/Qt Server
ttp://onohiroki.cycling.jp/comp-z-x11-vnc.html
　Zaurus XFree86
　icewm ウィンドウマネージャ

全部を本体メモリにインストールした後、コマンド wm または icewm を実行すると、タスクバー(?)が出ました。
タスクバーから、Xterm と Xeyes を起動できます。
Address + タップで、右クリックっぽいのですが、中ボタンがないです。 (逆かも)

アプリケーションをどうやってインストールするかは不明です。 dpkg? (本体メモリに入りそうですが。)