まず、ubuntuを捨てます。
それからdebianをテキストインストール、
このとき間違ってもデスクトップ環境を入れてしまわないように。