почти всё верно.
Драйвера, в данном случае, являются модулем к ядру, так что "в ядро" видимо не совсем корректно. Мы добавили к ядру модуль, поддерживающий данный чип.
И мы ничего не удаляли, а просто запретили автоматическую загрузку модулей, которые могли помешать.
Что и произошло в том случае, когда Вы ошибочно добавили собранный модуль в черный список.