Witam,
Na pierwszy rzut oka Twoje rozumowanie jest OK, ale teraz są trochę inne czasy i formatowanie strony: kolory czcionki itp… nie jest bezpośrednio w danym pliku tylko w pliku style.css. Ja szczegółów ci więcej nie podam bo Wordpressa nie używam ale mam własną stronę internetową i trochę o pisaniu stron internetowych wiem. Nie wykluczone że plików css jest tam kilka i który jest dołączany do danego pliku .php to już dodatkowa trudność dla ciebie.
Pliki z rozszerzeniem css nie koniecznie mają nazwę style. Może to być ona jakakolwiek. Powinieneś wejść w folder motywu, tam powinieneś poszukać plików z rozszerzeniem css.
W trybie deweloperskim przeglądarki szukasz selektora odpowiedzialnego za elementy które chcesz zmienić, a później tego samego selektora szukasz w jednym z dodanych plików.
Tam możesz sobie dopisać / zmienić użytą czcionkę. Weź też pod uwagę, by wrzucić ją na serwer ponieważ nie każdy ma czcionki zainstalowane u ciebie na pc.
Można też użyć Google Fonts.