Тут принципиальный момент: 1. предметы от названий цвета или 2. названия цвета от предметов. Или 3. вперемежку.

Полагаю, что исключительно названия цветов от предметов.

Допустим, придумал древний человек название цвета. Объясняет сородичу, какой же это цвет, допустим желтый. Пока он не ткнет пальцем в желтый предмет, он никогда не объяснит. Т.е. у каждого цвета обязательно УЖЕ был предмет.