Как его сдвинуть если он примонтирован?
Отмонтировать. swapoff.
при перемещении ОСи как раз то может понадобиться swap...
Возможно придется выполнять из liveUSB.
А мой вам совет: забудьте про свап-раздел и создайте свап-файл.
С ним удобней. В любой момент можно удалить-создать, на любом разделе, любого размера.
Можно создать несколько свап-файлов. Подключать все сразу или по отдельности.
Ubuntu, начиная с 17.04, по умолчанию создает свап-файл.