Здравствуйте, Orifiel.
Не знаком ни с одним программером, кто начал свою карьеру с драйвера. Чесно говоря вообще чтобы пересчитать знакомых специалистов по драйверам хватит пары пальцев

Все начали с... Вы удивитесь... "hello world".
Мне самому пришлось заняться драйверами уже имея за плечами приличный опыт разработки высокоуровневого софта.
Думается мне, здесь надо созреть профессионально. Как минимум нужна техническая грамотность. Нужна база знаний. Это вовсе необязательно "знание мрачных глубин Linux" (дословно. не помню кто) или детальных различий архитектур x86 и какого-нить XScale (хотя это лишь вопрос технических деталей). Сегодня на рынке достаочно ОС, повернувшихся к системным программерам ну если не лицом, то чем-то похожим.
Что касается сложности перехода — главное не бояться. Не боги горшки обжигают (С) народная мудрость