Узлы HTML Agility Pack для выбора - PullRequest
Новая
       10

Узлы HTML Agility Pack для выбора

6 голосов
/ 13 ноября 2011

Я пытаюсь использовать пакет HTML Agility, чтобы очистить некоторые данные с сайта.Я действительно изо всех сил пытаюсь понять, как использовать selectnodes внутри foreach, а затем экспортировать данные в список или массив.

Вот код, с которым я работаю до сих пор. 

       string result = string.Empty;

        HttpWebRequest request = (HttpWebRequest)WebRequest.Create(http://www.amazon.com/gp/offer-listing/B002UYSHMM/);
        request.Method = "GET";

        using (var stream = request.GetResponse().GetResponseStream())
        using (var reader = new StreamReader(stream, Encoding.UTF8))
        {
            result = reader.ReadToEnd();
        }

        HtmlAgilityPack.HtmlDocument doc = new HtmlAgilityPack.HtmlDocument();
        doc.Load(new StringReader(result));
        HtmlNode root = doc.DocumentNode;

        string itemdesc = doc.DocumentNode.SelectSingleNode("//h1[@class='producttitle']").InnerText;  //this works perfectly to get the title of the item
        //HtmlNodeCollection sellers = doc.DocumentNode.SelectNodes("//id['bucketnew']/div/table/tbody/tr/td/ul/a/img/@alt");//this does not work at all in getting the alt attribute from the seller images
        HtmlNodeCollection prices = doc.DocumentNode.SelectNodes("//span[@class='price']"); //this works fine getting the prices
        HtmlNodeCollection nodes = doc.DocumentNode.SelectNodes("//div[@class='resultsset']/table/tbody[@class='result']/tr"); //this is the code I am working on to try to collect each tr in the result.  I then want to eather add each span.price to a list from this and also add each alt attribute from the seller image to a list.  Once I get this working I will want to use an if statement in the case that there is text for the seller name instead of an image.

        List<string> sellers = new List<string>();
        List<string> prices = new List<string>();

        foreach (HtmlNode node in nodes)
        {
            HtmlNode seller = node.SelectSingleNode(".//img/@alt");  // I am not sure if this works
            sellers.Add(seller.SelectSingleNode("img").Attributes["alt"]); //this definitly does not work and will not compile.

        }

В приведенном выше коде есть комментарии, показывающие, что работает, а что нет, и то, чего я хочу достичь.

Если у кого-то есть какие-либо предположения или чтение, это было бы здорово!Я искал форумы и примеры и не сталкивался ни с чем, что мог бы использовать.

1 Ответ

11 голосов
/ 14 ноября 2011

Ваша первая проблема с закомментированным SelectNodes не работает, потому что «id» - это не имя элемента, а имя атрибута. Вы использовали правильный синтаксис в других своих выражениях для выбора атрибута и сравнения значения. Например, //ElementName[@attributeName='value']. Я думаю, что даже [attributeName='value'] должно работать, но я не проверял это.

Синтаксис внутри функции SelectNodes называется «XPath». Эта ссылка может вам помочь.

Выбранный вами узел seller - это брат node для текущей итерации, который является img с атрибутом alt. Однако я думаю, что правильный синтаксис, который вы хотите, это просто img[@alt].

Следующая проблема, когда вы говорите, что она не будет компилироваться, проверьте сообщение об ошибке, возможно, он будет жаловаться на типы аргументов. sellers.Add Я думаю, что ищет имя другого HtmlNode, а не атрибут, который возвращает выражение внутри добавления.

Кроме того, ознакомьтесь с документацией по пакету Html Agility и другими вопросами, касающимися синтаксиса.

...