Первейшая задача пользователя при обучении научной тестологии - это научиться различать проценты и процентили. Обратите внимание, что это задача даже не разработчика, а именно пользователя. Ведь пользователь автомобилей и компьютеров должен немножко знать про лошадиные силы и гигабайты. Так и пользователь тестов что-то должен немножко знать, чтобы хотя бы понимать, чем одни тесты отличаются от других по качеству и по сфере применения. Процент правильных ответов (ППО) - это тот же самый сырой балл...

Шахматный процентиль не определяет абсолютное мастерство. Он показывает, какую часть игроков в рейтинговом пуле вы превосходите. Аналогия со школьными оценками: процентиль 90 означает превосходство над 90% игроков в этом пуле. Пул может быть ограничен, например, игроками определенного рейтинга. Расчет зависит от системы рейтингования (ELO, Glicko). Процентили разных систем несравнимы. Считать процентиль абсолютным показателем – заблуждение. Высокий процентиль в слабом пуле не равен высокому уровню мастерства...