補足すると、何か書きたいグラフィックアプリケーションがあって質問しているわけではないです。
たとえば動画を再生するようなシステムやテレビを受信して表示するシステムを設計するとして、
ハード、ソフト含め完全に内部動作を理解して最適化できるようにまでなりたいとしたら
何を勉強すべきかということが知りたいというか…
その中でひとつ、デコード以外のデータ転送に関して画面表示の一連のプロセスが気になって、
何か奥の深い部分や勉強すべき部分が明らかになったらなあ、というのがもともとの
質問の意図です。