Для задач, где применяется кликер, в силу специфики, 50 мс это ничего. В большинстве тормозим сознательно гораздо больше.
Да и не только кликер. Во многих средах где используются аналоги потоков и процессов, они требуют расходов. Расходов времени на синхронизацию и управление. Во многих реальных задачах нельзя получить аналог параллельной работы на 100%, как раз из за сложности распределения задач и потерях на совместных блокировках.