شما باید از quantrization برای کاهش تعداد رنگهای تصویر استفاده کنید:
http://answers.opencv.org/question/5293/colour-quantization/