תאפייני לעצמך קודם כל מה בדיוק את צריכה
עיבוד וידאו זה נושא רחב, דבר ראשון את חייבת לאפיין טוב את הדרישות האפליקטיביות - צריך לעקוב אחרי המכוניות או פשוט למצוא כיווני תנועה? יש אילוצים של זמן ריצה? האם מותרת התערבות של משתמש בשלב האיתחול? האם הסרטים שאת אמורה לעבוד עליהם מצולמים מזוית קבועה? המצלמה זזה או נייחת? האם את נדרשת להתמודד עם הסתרות מלאות/חלקיות של אובייקטים? תנאי סביבה משתנים? וכו' בכל מקרה - מקום טוב להתחיל יהיה להבין איך מזהים בכלל תנועה בסרטי וידאו: motion vectors vmd (video motion detection optical flow הם מושגים שכדאי לגגל. באופן עקרוני, עבור סצינות יחסית פשוטות לא אמורה להיות בעיה לחלק כל פריים לבלוקים, לחשב motion vectors ולמצוא כיוונים כלליים המשוייכים לאיזורים שונים בפריים.