Coloque o seguinte em seu arquivo ~ / .Xresources ou ~ / .Xdefault .
Xterm.*font: 10x20
O arquivo .Xresources é um evento de carregamento único quando você inicia o gerenciador de janelas. Por outro lado, .Xdefaults é carregado em todas as janelas do xterm.
Para mais informações man X ou man xterm