Как определить, было ли инициировано событие с полосы прокрутки

У меня есть div, в котором я реализовал iPad, как смахивание.

Посмотрите, что я имею в виду на JSFiddle (просто щелкните и перетащите указатель мыши в div.)

Я хочу предотвратить смахивание, когда кто-то использует полосу прокрутки (щелкните значок полосу прокрутки, затем перемещайтесь слева направо, смахивание все еще происходит).

Короче говоря, мне нужно if (! Event.wasTriggeredFromScrollbar), который я могу использовать в любом триггере события (в данном случае mousedown / move / up).

jQuery и обычные ответы на Javascript приветствуются.

Отредактировано: Чтобы было понятнее.