怎么样可以最快找出一张图片中所有的色值

比如一张图片有256种颜色，是随机分布的，怎么样可以最快地查找出这256种颜色的色值。
我能想到的是线性扫描，但太慢了，请各位前辈指导。谢谢！