Возможно, собтие onMouseDown происходит после начала перетаскивания, поэтому первое перетаскивание не срабатывает, зато следующее работает. Кроме того, после перетаскивания я не заметил события onMouseUp - предыдущая скорость не восстанавливается (иначе последующие перетаскивания не работали бы).