2軸のXYプロッターとソレノイドコイルを使ってロボットを作って
それを制御して携帯電話のボタンを押していくプログラム作って
それをインターネット越しに操作出来るように通信プログラムかけばいいんじゃねえの。
表示のフィードバックはウェブカメラで表示パネルを撮影すればいいだろ。

究極的にはメイドさん雇うのが一番簡単だと思うが。