Ошибка доступа при использовании rsync

[Luca Brasi]

Доброго времени. Стояла у меня простая задача, синхронизировать одну машину с другой. Сделал скрипт, задуман он так:

• Монтируем каталоги сервера
• Сихнхронизируем каталоги клиента с сервером
• Демонтируем каталоги сервера

Ошибка возникает на этапе синхронизации.
Диски монтируются в режиме rw. Инфа успешно просматривается даже не от рута. Скрипт запускается от рута, однако все равно имеем
"rsync: readlink_stat("/tmp/Дело/study") failed: Permission denied (13)"
Все пункты проверялись по-отдельности и имеют право на жизнь, но в скрипте почему то не работают. А конкретно:

(Нажмите, чтобы показать/скрыть)

SYNCHRONIZATION PROCESS

rsync: readlink_stat("/tmp/Дело/Методика") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/tttt") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/study") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/pb") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/Сеня") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/bike") failed: Permission denied (13)
rsync: readlink_stat("/tmp/Дело/databases") failed: Permission denied (13)

rsync error: some files/attrs were not transferred (see previous errors) (code 23) at main.c(1183) [sender=3.1.1]

sent 61 bytes  received 17 bytes  156.00 bytes/sec
total size is 0  speedup is 0.00
sending incremental file list

sent 55 bytes  received 17 bytes  144.00 bytes/sec
total size is 0  speedup is 0.00


rsync -rv /tmp/Книги /media/Maindata/Книги
something bad happen
rsync -rv /tmp/Дело /media/Maindata/Дело
something bad happen

(Нажмите, чтобы показать/скрыть)

Код: (python) [Выделить]

#! /usr/bin/python3
import subprocess, os, os.path
import configparser

#INPUT DATA
configFileName=".sync_via_NFS.cfg"

#define a ip adress of server via ping
#subprocess.call(,shell=True)


#read  property file
settings =  configparser.ConfigParser()
settings.read(configFileName)


#create directories for mounting
def createMountDirs(rawPath):

    try:
        os.mkdir((rawPath.split(" "))[1])

    except FileExistsError:
        pass

#mount NFS dirs to client with rw options

mountDests = settings.items("MountDestinations")
host = settings.get("Server","host")
for dest in mountDests:
    print(dest[1])
    createMountDirs(dest[1])
    subprocess.call("mount -o rw {0}:{1}".format(host, dest[1]),shell=True)

print("\n------"*3)

#synchronizate data
print("\nSYNCHRONIZATION PROCESS \n")
syncDests = settings.items("SynchDestinations")
for dest in syncDests:
       
        print("rsync -rv {0}".format(dest[1]))
        resultOfSync = subprocess.call("sudo rsync -rv {0}".format(dest[1]),shell=True)

        if (resultOfSync == 0):
            print("files {0} have syncronyze successfully".format(os.path.basename(dest[1])))
        else:
            print("something bad happen")


print("\nUNMOUNTING DEVICES \n")

#umount devices

for dest in mountDests:

    print("umount {0}".format((dest[1].split(" "))[1]))

    resultOfUmount = subprocess.call("umount {0}".format((dest[1].split(" "))[1]), shell=True)

    if resultOfUmount == 0:
        print("{0} is unmounted successfully".format(os.path.basename(dest[1])))
    else:
        print("something bad happen")




(Нажмите, чтобы показать/скрыть)

/media/Maindata/Дело/    192.168.0.102 (rw,sync,no_subtree_check) 192.168.0.103 (rw,sync,no_subtree_check)

[Azure]

Скрипт запускается от рута

Зачем тогда sudo внутри скрипта, тем более я не уверен что python его верно обработает?
2-е: rsync умеет работать по сети (сюрприз!), не понятно зачем делать mount|unmount?

[Luca Brasi]

Azure, я не против отказаться от монтирования,однако

Код: [Выделить]

rsync -r -v 192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги/
ssh: connect to host 192.168.0.101 port 22: Connection refused
rsync: connection unexpectedly closed (0 bytes received so far) [Receiver]
rsync error: unexplained error (code 255) at io.c(226) [Receiver=3.1.1]

Он что через SSH пытается зайти?

[Azure]

через SSH пытается зайти?

Без знака вопроса. Так что запустите/настройте ssh-сервер и проблема решена

[Luca Brasi]

Azure, хорошо, это я попробую.
В скрипте "sudo" убрал, оно там и вправду не к чему. А опции NFS в /etc/exports не могут палки в колеса вставлять? Теоретически, это должно обеспечивать синхронизацию?

/media/Maindata/Дело/    192.168.0.102 (rw,sync,no_subtree_check) 192.168.0.103 (rw,sync,no_subtree_check)

[AnrDaemon]

$HOME/bin/rsyncd

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

#!/bin/sh
logger -is -- Running custom rsync $USER $*
/usr/bin/rsync --config="$HOME/.rsyncd" "$@"

$HOME/.rsyncd

(Нажмите, чтобы показать/скрыть)

Код: [Выделить]

address 127.0.0.1
uid = anrdaemon
#gid = Domain\x20Users
use chroot = no
refuse options = no-iconv

[Documents]
path = /home/anrdaemon/Documents
comment = Documents
read only = no
charset = UTF-8
incoming chmod = Dg+s,o=

[arc]
path = /home/.a
comment = Archive
read only = no
charset = UTF-8
incoming chmod = Dg+s,o=

Скрипт для скидывания данных на эту конфигурацию (Cygwin):

(Нажмите, чтобы показать/скрыть)

Код: (bash) [Выделить]

#!/bin/sh
#
export LANG=$(locale -uU)
test -r "$HOME/.ssh_agent" && . "$HOME/.ssh_agent"
/bin/rsync -Fxtcrv --iconv=. --rsh="ssh" --rsync-path='$HOME/bin/rsyncd' -- "$HOME/Documents/" "anrdaemon@Daemon1::Documents/" 2>> "$HOME/rsync-errors-$(date +%F).log" | tee "$HOME/rsync-Documents-$(date +%F).log" | grep -vE "\/$"

При работе через ssh враппер "address" игнорируется, прописан просто для совместимости с локальным сервером.
Если абсолютно требуется запускать rsync от рута, настройте ключи и запускайте. Ни в коем случае не ставьте руту пароль.

[Luca Brasi]

Я настроил SSH, сгенерировал ключи. Когда делаю ssh user@host - все гуд, логинится без пароля. Стоит только мне:

Код: [Выделить]

rsync -rv -e "ssh -i /home/andrew/.ssh/id_rsa.pub" --update andrew@192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги
И до фени все эти ключи. Снова просит пароль

Enter passphrase for key '/home/andrew/.ssh/id_rsa.pub':
andrew@192.168.0.101's password:

Нудно как-то. Можно обойтись без ввода пароля?

[AnrDaemon]

делаю ssh user@host - все гуд

Стоит только мне:Код: [Выделить]rsync -rv -e "ssh -i /home/andrew/.ssh/id_rsa.pub"

Найдите десять отличий…

[Vail]

Вместо этого:
rsync -r -v 192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги/

Попробуйте это:
rsync -r -v rsync://192.168.0.101/media/Maindata/Книги /media/Maindata/Книги/

[Luca Brasi]

Найдите десять отличий…

Нижеупомянутый вариант который не работает. Хотя по идее мог бы и работать, вот я и бросаюсь в крайности с принудительным упоминанием ключей через опцию -i

Код: [Выделить]

rsync -rv -e ssh --update andrew@192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги

Вместо этого:
rsync -r -v 192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги/
Попробуйте это:
rsync -r -v rsync://192.168.0.101/media/Maindata/Книги /media/Maindata/Книги/

Ну как-бы этот варинт ничего не меняет

[Azure]

Без -е не пробовали?

[Vail]

Цитата: Vail от Сегодня в 10:18:12
Вместо этого:
rsync -r -v 192.168.0.101:/media/Maindata/Книги /media/Maindata/Книги/
Попробуйте это:
rsync -r -v rsync://192.168.0.101/media/Maindata/Книги /media/Maindata/Книги/
Ну как-бы этот варинт ничего не меняет
Сообщить модератору  

Ну, как-бы очень даже меняет.

Вот вам выхлоп с моего rsync сервера:

test:~$ rsync -r -v rsync://10.8.0.1/UNITS/UNITS/UNIT00010/Music/ /home/User/Музыка/
receiving incremental file list
skipping non-regular file "GlobalMusic"

sent 20 bytes  received 64 bytes  168.00 bytes/sec
total size is 37  speedup is 0.44

test:~$ rsync -r -v 10.8.0.1:/UNITS/UNITS/UNIT00010/Music/ /home/User/Музыка/
ssh: connect to host 10.8.0.1 port 22: Connection refused
rsync: connection unexpectedly closed (0 bytes received so far) [Receiver]
rsync error: unexplained error (code 255) at io.c(235) [Receiver=3.1.2]

меня одного смущает двоеточие после IP адреса, без указания порта?

В первом случае ничего не скачалось из-за того, что в папке на сервере лежат только символьные ссылки.

[Luca Brasi]

Azure, без -e пробовал. Результат тот же что и с -e, т.е. нужен ввод пароля. Попутно у меня появилась еще одна проблема.
В какойто момент синхронизация начинает падать, т.к. есть файлы владелец которых рут. Следовательно доступ к ним я получить не могу... Есть способ игнорировать ошибки "permission denied"?

[AnrDaemon]

нужен ввод пароля

Если просто ssh user@host пароля не требует, а rsync внезапно требует, значит, вы что-то не так делаете.

Попробуйте это:rsync -r -v rsync://

Не надо это пробовать.

[Luca Brasi]

Подитожу свои текущие сложности:

1. Убрать пароль и оставить одну лишь авторизацию по ключам (за это я с Вашей помощью сражаюсь уже не первый раз, и буду дальше сражаться )
2. Можно обоходить стороной файлы владельцем которых является на $USER?
3. Когода начинается синхронизация у меня на клиенте остаются файлы которых на сервере уже нет. Хотелось бы от них и на клиенте избавлятся. Игрался с опциями --update, --delete, что не очень то и помогло.