Este parece ser el camino a seguir:
SELECT
A.answer_id
,C1.color_name AS favorite_color_name
,C2.color_name AS least_favorite_color_name
,C3.color_name AS color_im_allergic_to_name
FROM tbAnswers AS A
INNER JOIN tbColors AS C1
ON A.favorite_color = C1.color_code
INNER JOIN tbColors AS C2
ON A.least_favorite_color = C2.color_code
INNER JOIN tbColors AS C3
ON A.color_im_allergic_to = C3.color_code
En lugar de "estúpido", me atrevería a decir que esta es una consulta bastante estándar. Esto también supone que todas las columnas tendrán un valor válido. De lo contrario, reemplace todas las INNER JOIN con LEFT JOIN