Поток может максимально загружать один (логический) процессор за один раз. И сон в 1 мс не будет мешать. Не парься.
<component id="FooRetriever" service="Namespace.IRetrievable`2[[Namespace.Foo, Assembly],[System.String]], Assembly" type="Namespace.FooRetriever, Assembly" />