Ну так сразу надо было указывать, что обработка ведется не в реалтайме. Ато писали 25 кадров в секунду....
Если всего пара кадра в секунду вас устроит - другой вопрос, пожно пробовать.
Не в реал тайме можно и на MCS51 сделать

Правда несжатого видео на карту совсем немного влезет. в гиг всего минут 8...