iOS CGImageRef Pixel Shader

Question

Я работаю над приложением для обработки изображений для iOS, и один из различных этапов моего приложения - это вставка/распознавание цвета на основе вектора.

Теперь я написал код, который может на пиксель определять постерилизованный цвет, но, по-моему, через каждый пиксель в изображении будет очень сложно процессор, если iOS. Поэтому мне было интересно, можно ли вместо этого использовать графический процессор;

Я хотел бы создать своего рода «пиксельный шейдер», который использует OpenGL-ES или какую-либо другую технологию рендеринга для обработки и постеризации изображения быстро. Я не знаю, с чего начать (я написал простые шейдеры для Unity3D, но никогда не делал базового программирования для них).

Может ли кто-нибудь указать мне правильное направление?

Answer 1

Я собираюсь подойти к этому сбоку и предложить вам попробовать GPUImage framework Брэда Ларсона, который описывает себя как «лицензионную лицензию на iOS-библиотеку BSD, которая позволяет применять фильтры с ускорением GPU и другие эффекты для изображений, видео в реальном времени , и фильмы ". Я не использовал его и предполагаю, что вам нужно будет сделать чтение GL, чтобы добавить свою собственную фильтрацию, но она будет обрабатывать так много компонентов шаблонов и предоставляет так много предварительно упакованных фильтров, которые, безусловно, стоит посмотреть. Не похоже, что вы в особенности заинтересованы в OpenGL, поэтому нет никакой реальной причины для этого.

Я добавлю единственное соображение, что в iOS 4 я часто быстрее работал над процессором (используя GCD для его распространения среди ядер), чем на графическом процессоре, где мне нужно было прочитать результаты на конец для любого вида последовательного доступа. Это потому, что OpenGL обычно разработан так, что вы загружаете изображение, а затем преобразуете его в любой формат, который требуется, и если вы хотите его прочитать, он преобразует его обратно в тот формат, который вы ожидаете получить, и копирует его туда ты хочешь это. Итак, что вы экономите на графическом процессоре, за который вы платите, потому что драйвер GL должен шунтировать и переупорядочивать память. Начиная с iOS 5 Apple представила специальный механизм, который эффективно дает вам прямой доступ к процессору в хранилище текстур OpenGL, так что, вероятно, это уже не проблема.