Скачать нужный пакет с зависимостями и установить через gdebi.
С риском поломать текущие и будущие зависимости.
перенести установленную прогу из старой версии Ubuntu
Если действительно нужно, то можно и повозиться. Если у программы немного зависимостей, то возможно пройдет успешно и не сложно.
В простейшем случае, скопировать все файлы программы в иерархию /usr/local. Если повезет, то заработает.
Если не заработает, то посмотреть на что жалуется. Запустить: ldd programma.
Недостающие библиотеки можно подключить через LD_PRELOAD.
Во всяком случае, никоим образом не затрагивает и не поломает новую систему.
Для большей "изоляции", можно все это собрать в любой каталог на любом разделе и уже его монтировать в иерархию /usr/local, либо как каталог, либо с помошью оверлейной файловой системы.