Ну вот и понятно, откуда ноги растут.
В диапазоне 2-5к идёт спад АЧХ, а значит подъём ФЧХ. И поэтому неправильно выставлена задержка твиттеров.
Выравнивай ФЧХ твиттеров в диапахоне выше 5к.
И тогда вопрос по твоим FIR фильтрам: какой тип фильтра ты установил? И почему они крутят фазу также, как IIR?