Такс, может кому пригодиться, проблему решил.
Для начала нужно отредактировать файл Gemfile
sudo nano /home/git/gitlab/Gemfile
Закоммитить строчку(поставить штрих в начале строки) или стереть :
# gem "mysql2", group: :mysql
На след строке оставить только:
gem "pg"
Остальное не трогаем и сохраняем ctrl+x
Затем выполняем:
sudo bundle install
После, продолжаем следовать инструкции
И в конце при редактировании файла /etc/nginx/sites-available/gitlab будьте внимательны, иначе nginx не поднимется
В настройке listen вписать ip адрес вида: 192.168.1.10:80