Editar el mkdocs.yml, por ejemplo si queremos poner en español:
mkdocs.yml
theme: name: mkdocs locale: es