SSH接続の場合のみ環境変数を設定する

.bashrc

bashrcでSSHの場合のみの処理を入れたい場合は

   if [[ "${SSH_CONNECTION}" ]] ; then
     //何か処理
   fi

のようにSSH_CONNECTION環境変数を見る。

sshdの設定（PermitUserEnviroment）を使う

sshdの設定を

PermitUserEnvironment=yes

にして、ユーザーごとの

 ~/.ssh/environment

に環境を変数を書く。
~などの展開はしてくれないので注意