Я слышал, что Aforge довольно круто (проверьте Aforge.vision.motion пространство имен).
Быстрый запрос Google дал мне это: Признание видео руки в C #
Это также интересно: Алгоритмы обнаружения видео движения в C #
OpenCV может быть вариантом. Хотя это библиотека C, имеются привязки C #. В настоящее время самая полная библиотека компьютерного зрения там (IMO).