Primero tienes que asegurarte de que tienes el diccionario en frances:
Te vas a Opciones -> OpenOffice.org -> Rutas y miras cual es la la ruta de linguística y cual la de diccionarios definidos por el usuario. Y compruebas si en una de ellas tienes un fichero llamado fr_FR.dic. Si no lo tienes debes descargar el diccionario de
aquiTienes que descomprimir el archivo en la ruta deseada (la de linguistica si quieres que esté disponible para todo el mundo, o la de diccionarios definidos pro el usuario si solo queires que esté para un usuario).
Una vez descomprimido habrá dentro otrso zip que debes descomprimir también. Uno es el diccionario, otro las reglas de separación de palabras y otro el thesaurus. Luego tienes que editar el dicctionary.lst que tienes en esa ruta y añadirle algo como:
DICT fr FR fr_FR
HYPH fr FR hyph_fr_FR
THES fr FR th_fr_FR
(Todo esto suponiendo que es una instalación en castellano o en inglés y no dispone del corrector en frances instalado).
Ahora te vas a Herramientas->Opciones->Configuración del idioma->Linguística, tal como te decía colegota, marcas todas las opciones en la primera ventanita (Módulos disponibles de idioma), le das al botón de editar que hay al lado de dicha ventanita y verás que tienes disponible el idioma francés.
Lo correcto no es cambiarlo ahí, si no poner el idioma en que está escrito el documento, puedes establecer el idioma por defecto para todos los documentos que edites o sólo para el documento actual en Herramientas->Opciones->Configuración del idioma->Idiomas->Idiomas predeterminados para los documentos (Si solo lo quieres cambiar para el documento que estás editando marcas la casilla que dice 'solo para el documento actual')