Você deve avaliar a capacidade humana em uma tarefa não em termos de "humano médio" ou "humano aleatório", mas em termos da sua melhor alternativa (à IA) caso você contratasse um humano para resolver a tarefa. Que não é nem média nem aleatória.
Isso se aplica tanto a habilidades/conhecimento quanto à inteligência fluida. Digamos que a tarefa seja traduzir do italiano para o alemão. "Desempenho humano médio" não tem significado.