Пытаясь читать или писать много файлов в разных потоках, много вы не выиграете, поскольку все в конечном счете упрется в диск. Поэтому я бы посоветовал следующую схему:
- Чтение и запись файла с помощью асинхронных операций (смотрите в
сторону асинхронных методов типа
ReadAsync()
и async/await
). Если библиотека для чтения Excel файлов не поддерживает асинхронную работу, значит читайте многопоточно, но нужно экспериментировать и проверять, при каком количестве потоков вы получите наилучшую скорость.
- Преобразование ячеек в текст можно делать многопоточно
(
Parallel.ForEach
или PLINQ).
Parallel.ForEach
и PLINQ скорее всего дадут примерно одинаковые результаты (однако ничто не мешает измерить оба варианта). Что выбирать -- зависит в первую очередь от того, какая функциональность нужна:
- если методы обработки элементов не зависят друг от друга, порядок обработки не важен, выбирайте
Parallel.ForEach
- если важен порядок обработки элементов, выбирайте PLINQ (см.
AsOrdered()
)
- если вам нужен стрим процессинг (ленивая обработка), выбирайте PLINQ
- если нужно обрабатывать две коллекции вместе, выбирайте PLINQ
- если нужен thread-local state, выбирайте
Parallel.ForEach
(он имеет встроенную поддержку)
- если нужна отмена, выбирайте
Parallel.ForEach
(см. ParallelLoopState.Stop()
и ParallelLoopState.Break()
)
Подробнее можно узнать в документе "When Should I Use Parallel.ForEach? When Should I Use PLINQ?".
Также при схеме "чтение-трансформация-запись" вам может пригодиться producer/consumer pattern, таких пар у вас будет две (чтение-трансформация и трансформация запись). Одно из преимуществ заключается в том, что если части конвейера работают с разной скоростью, то есть возможность регулировать производительность отдельных частей, тем самым оптимизируя производительность (и по скорости, и по потреблению памяти) всего конвейера.