Vous pouvez pour cela utiliser l'extension mise à disposition par Louis :
https://fr.wordpress.org/plugins/elegant-custom-fonts/
Bien qu'elle n'ait pas été mise à jour depuis un moment, elle fonctionne très bien. Il faut pour cela suivre les étapes décrites pas à pas.
Récemment un snippet a été mis à disposition de la communauté par un contributeur fréquent, Matthias.
Son utilisation est extrêmement simple. Il faut installer le plugin code snippets, importer le snippet téléchargé sur le site de Matthias et l'activer, mettre dans le dossier /uploads/fonts (à créer si nécessaire) les fichiers des polices souhaitées sous n'importe quel format. Et voilà, c'est tout.