Puoi farlo, ma questa è una cattiva idea™! sta andando per causarti dolore lungo la strada.
Tuttavia, se sei deciso a farlo, inserisci queste due righe in ~/.vimrc
:
:nnoremap j k
:nnoremap k j
Per quanto riguarda lo spostamento a sinistra/destra sulle righe:
:set whichwrap+=h,l
Vedi :help 'whichwrap'
(con le virgolette singole) e nota che l'help dice che questo non è consigliato.