Некоторые компоненты добавляют зависимости. Поэтому они могут не компилироваться после такого.
Вообще логика была такая. В MainActivity пользователь выбирает желаемую версию API, а компоненты читают и подстраиваются (отключают какие-то возможности или добавляют зависимости от Support Library).