Impossible de corriger les paramètres régionaux

J'utilise une image Ubuntu fournie par mon entreprise, qui semble avoir des paramètres linguistiques étranges pour commencer. Firefox utilise le dictionnaire français par défaut et je reçois des avertissements lorsque je fais quoi que ce soit avec SSH (git pull/push et sessions SSH normales).

Ces avertissements ressemblent à ceci :

perl: warning: Setting locale failed.
perl: warning: Please check that your locale settings:
        LANGUAGE = (unset),
        LC_ALL = (unset),
        LC_PAPER = "en_GB.UTF-8",
        LC_ADDRESS = "en_GB.UTF-8",
        LC_MONETARY = "en_GB.UTF-8",
        LC_NUMERIC = "en_GB.UTF-8",
        LC_TELEPHONE = "en_GB.UTF-8",
        LC_IDENTIFICATION = "en_GB.UTF-8",
        LC_MEASUREMENT = "en_GB.UTF-8",
        LC_TIME = "en_GB.UTF-8",
        LC_NAME = "en_GB.UTF-8",
        LANG = "en_US.UTF-8"
    are supported and installed on your system.
perl: warning: Falling back to the standard locale ("C").

J'ai essayé de régler ma locale sur en_GB.UTF-8 J'utilise des informations que j'ai trouvées sur des sites tels que askubuntu.com mais je n'arrive pas à le faire fonctionner. Ma version actuelle /etc/default/locale contient les éléments suivants.

LANG="en_GB"
LANGUAGE="en_GB:en"

Et voici le résultat de mon locale commandement.

LANG=en_GB.UTF-8
LANGUAGE=en_GB:en
LC_CTYPE="en_GB.UTF-8"
LC_NUMERIC=en_GB.UTF-8
LC_TIME=en_GB.UTF-8
LC_COLLATE="en_GB.UTF-8"
LC_MONETARY=en_GB.UTF-8
LC_MESSAGES="en_GB.UTF-8"
LC_PAPER=en_GB.UTF-8
LC_NAME=en_GB.UTF-8
LC_ADDRESS=en_GB.UTF-8
LC_TELEPHONE=en_GB.UTF-8
LC_MEASUREMENT=en_GB.UTF-8
LC_IDENTIFICATION=en_GB.UTF-8
LC_ALL=

Quelqu'un a-t-il une idée de ce qui peut être réglé pour corriger cela ?

Merci.