TL;DR

掲題のとおりですが、検索して出てくる記事では手元環境とパスが違っていたので改めてメモしておきます。誰かの助けになりますように。

JupyterLab 0.35.3

ファイルの場所

C:\Users\[ユーザー名]\AppData\Local\Continuum\anaconda3\Lib\site-packages\matplotlib\mpl-data\fonts\ttf\

C:\Users\[ユーザー名]\AppData\Local\Continuum\anaconda3\Lib\site-packages\matplotlib\mpl-data\matplotlibrc

全体的な手順としてはこちらが参考になるかと。