Как использовать Task для парсинга каталога в C#?

я наверное что-то не понимаю, не могли бы вы посмотреть что не так?
https://github.com/FairyFox5700/carAplication/blob...

FairyFox5700, используйте HttpClient как синглтон вместо WebClient.
static HttpClient http = new HttpClient();
Не используйте блокирующие вызовы, загрузку делайте так:
var item = await http.GetStringAsync("item url");

Сохраняя в бд используйте так же асинхронный вариант, в противном случае вы заблокируете поток и все старания будут насмарку.

Учтите что Parallel и db.SaveChanges() блокируют поток, сделайте как я вам написал в примере:
await db.SaveChangesAsync();

Ascar, извините не та версия
Вот https://github.com/FairyFox5700/carAplication/blob...

FairyFox5700,

используйте HttpClient как синглтон вместо WebClient.
static HttpClient http = new HttpClient();

вместо этого

Task t= Task.WhenAll(tasks);
                try
                {
                    await t.ContinueWith(task => { GetAutomobileSubFamily(); });
                }
                catch (AggregateException)
                { }

это

await Task.WhenAll(tasks);
await GetAutomobileSubFamily();

И не проглатывайте ошибки, так вы потеряете данные и не узнаете об этом

catch (AggregateException)
      {}

Ascar, try
{
var tasks = new List();
int count = 10;
while (count-- > 0)
{
var taskToGetMarks = Task.Run(async () =>
{
try
{

string page = await http.GetStringAsync(Url);
Doc.LoadHtml(page);
var table = Doc.DocumentNode.SelectSingleNode("//table[@class='tck']");
var rows = table.Descendants("tr");

//Parallel.ForEach(rows, node =>
foreach (var node in rows)
{ //pages
var hrefs = node.SelectNodes(".//a");
string[] array = node.InnerText.Trim().Split(new[] { "\r\n", "\r", "\n" }, StringSplitOptions.RemoveEmptyEntries);
for (int i = 0; i < array.Length - 1; i++)
{
TradeMark tradeMark = new TradeMark
{
TradeMarkName = array[i],
TradeMarkUrl = "www.autosvit.com.ua" + hrefs[i].GetAttributeValue("href", "/tech")
};
tradeMarks.Add(tradeMark);
Console.WriteLine(tradeMark.TradeMarkName);
listOfMarksHrefs.Add(tradeMark.TradeMarkUrl);
}
}
//is it better to write each item or list of items?
using (var context = new CarEntitiesContext())
{
tradeMarks.ForEach(s => context.TradeMarks.Add(s));
await context.SaveChangesAsync();
}
}
catch (Exception ex)
{
Console.WriteLine(ex.Message);
}

});

tasks.Add(taskToGetMarks);
}
await Task.WhenAll(tasks);
await GetAutomobileFamily();
}
catch(Exception ex)
{
Console.Write(ex);
}
}
сейчас выходит из функции на await Task.WhenAll(tasks); а другая функция не запускается

Ascar, для чего именно предназначен counter? Так как у меня 181 марка на странице , но парсит около 900

FairyFox5700, я вам его указал для примера, конечно впустую цикл перебирать не нужно. Я ответил на ваш изначальный вопрос?

Ascar, да спасибо большое) Наверное я что-то не понимаю просто..

FairyFox5700, тогда отметьте что ответ верный.

Наверное я что-то не понимаю просто..

Пройдитесь дебагом

Эти куски вам не нужны

int count = 10;
                while (count-- > 0)

FairyFox5700, у вас в Main нет Console.ReadLine(); так как таски в бэкграунде выполняются программа не успевает отработать.