Насчёт темпа сравнений - это по потребностям. Я свои алгоритмы изначально делал с прицелом на реализацию в ПЛИС с возможностью "базового" варианта на ЦПС. Темп сравнений ограничивается кадровой частотой сенсора и тактовой частотой ПЛИС (с коеффициентом), так что на практике тормозит только сенсор. Я брал за основу новейший на то время коммерческий КМОП сенсор, у него разрешение 1280х1024 и скорость от 500 кадров в секунду и выше (с пропорциональным уменьшением высоты кадра, т.е. 1280х256 даст 2000 кадров в секунду). В общем, я всё это к тому пишу, что темп сравнений определяется требованиями задачи, а не ограничивается параметрами компонентов. Если для задачи подойдёт невысокая скорость в пределах 30 кадров в секунду, то выбор сенсоров широчайший, причём они не все как один, а с повышенной функциональностью - выбор интересующего окна в кадре, например.

Видеосенсор - это уже не только ПЗС. Кроме них есть КМОП сенсоры, и они уже больше чем просто матрицы - у них на чипе дополнительные полезные функции легко получаются. Посмотреть про них в сети можно - все всё рассказывают и показывают у кого что есть.
Например у Micron: http://www.micron.com/products/imaging/products/
И у японцев разных этого добра полно.

"Алгоритмическая база" у меня сейчас оформляется в виде диссера (на английском) %) Но там шире всё это дело раскручивается с прицелом на автономное визуальное управление роботом (в широком смысле - колёса, крылья, и т.д - не важно). Насчёт разработки - это пока врядли, по крайней мере пока не решится вопрос с работой на следующие пару лет. К тому же я в России последний раз был где-то в восьмидесятых, а теперь ещё дальше - на территории верного союзника наиболее вероятного противника. Не смущает? :)

То, что Вы не в России, исключает возможность нашего сотрудничества, как это ни жаль... Увы.
Можно было бы из всего этого сделать неплохую вещь. А так для нас 30 Гц - за глаза хватает, можно даже 16 Гц, 500 элементов в строке -- прекрасное качество. Простая и дешёвая вещь могла бы быть.
Увы.

Да я так и думал. Сенсоры и алгоритмы - это почти единственное уязвимое место подобных систем. Я бы тоже на вашем месте не рисковал.