System.OutOfMemoryException из-за большого словаря

Я храню большой кеш в словаре со значением IEnumerable > . Я периодически удаляю элементы из словаря и периодически добавляю элементы в словарь. Время от времени я получаю System. OutOfMemoryException. Я хотел знать, почему сборщик мусора не приходит мне на помощь?