В RGB описание цвета как таковое отсутствует -- там есть только описание яркости трёх независимых цветовых каналов, а цвет, собственно, восстанавливается ТОЛЬКО в наших глазах. Это фотометрический, а не цветностный, стандарт, так что "убрать в нём saturation" невозможно просто физически.

А если просуммировать значения по всем трём каналам для каждой точки, то мы, фактически, получим яркость этой точки, то есть нормированную интенсивность света, излучаемого ей. В этом-то и есть его отличие от других стандартов цветности.