Я бы даже сказала они не "хотят его упрекнуть", они его прямо-таки упрекают в следующей реплике.

Вообще всё это напоминает мне математику...
НЕ могли удержаться...,чтобы НЕ упрекнуть - два отрицания дают положительный результат.