Не могу сказать почему точно, это же ассоциация, чувственный образ. Возможно, потому что желтый цвет-цвет помешательства. Раньше даже сумасшедший дом называли желтым. Может быть из-за манеры накладывать цвет, из-за хаотичности мазков. Может быть из-за самих цветов