Наречие изредка образовано от прилагательного редкий с помощью приставки из- и суффикса -а
(приставочно-суффиксальным способом).
Ударение в прилагательном рЕдкий приходится на гласный звук е.
Казалось бы, в наречии изредка ударение тоже должно падать на ту же буковку, гласную е.
Ан нет... ударение переместилось с корня на приставку: правильно это слово произносить с ударением на приставку -- Изредка.
Такой перенос ударения на приставку часто происходит в нашем языке русском, например, нАбок, нАдвое, дОсуха, Издали, Издавна, зАдорого (ударения выделены большими буквами).
Малыш очень пугался, когда раздавались, хоть и изредка, раскаты грома.