ローカルだと気にならないので、ネットワーク遅延かと思って色々調べてみるものの、特にこれって理由も見つからない。
ま、ローカルとネットワーク越しにアクセスしてるサーバーの環境が微妙に違うのであれですが・・。

とりあえず

:set noruler

カーソルの現在位置を非表示にしたら軽くなった。

よく「:set ruler」でカーソル位置を表示する設定にしてる.vimrcを見るんだけど、他の環境だと起きないのかなー・・。