Нужно обрабатывать MouseEnter и MouseLeave, а про MouseMove вообще забыть. Тогда мигать ничего не будет.