Объясню для чего мне это нужно. Сервер подключен к телевизору и используется как система мониторинга, и чтобы не бегать с клавиатурой и мышкой каждый раз к серверу, поэтому и хочу настроить удаленный доступ.
Причем я так понимаю что моя проблема заключается в том, что у меня разные сеансы для подключения, тоесть подключаюсь к DISPLAY:1, а телевизор висит на DISPLAY:0, но к нему у меня не конектит.
Задача теперь становится совсем запутаной =) Точнее Вы сами создаете себе проблему, которой не существует.
Вы хотите удаленно мониторить и управлять сервером. Для мониторинга есть методы без всяких использования рабочих столов и т.д., то есть управлять можно и через обычный ssh. Для мониторинга же есть куча ПО, которое при определенных условиях может даже слать СМС (если настроить).
Самый простой способ мониторинг за своим рабочим местом conky+ssh
Запускаем у себя терминал и выполняем (ключ -Y делает проброс нашего дисплея. То есть если нужна графика окна будут вылазить на ваш монитор)
ssh -Y <login>@<server>
sudo apt-get install conky-all
conky &
конфиги для конки можете поискать в интернете или даже здесь. В результате на вашем рабочем столе будет отображена статистика с сервера и подстраивать вы тоже сможете никуда не бегая (если честно, то и телефизор тоже не надо)