C#Xpath解析HtmlDocument的使用方法與遞歸取得頁面所有標簽xpath值（附源碼）

在學習HTML Xpath之前呢我們先來下載一下Dll文件
下載地址：http://htmlagilitypack.codeplex.com/
大家下載單擊如下圖片下載就行了
<ignore_js_op> 

接下來就是在程序中引用一下，
<ignore_js_op> 
然后就可以直接調用 了，大家看看
代碼吧

普通瀏覽 復制代碼

1.    //htmlDcoument對象用來訪問Html文檔s
2.             HtmlAgilityPack.HtmlDocument hd =  new HtmlAgilityPack.HtmlDocument ( ) ;
3.              //加載Html文檔
4.             hd.LoadHtml (strhtml ) ;
5.    string str = hd.DocumentNode.SelectSingleNode ( "//*[@id='e_font']" ).OuterHtml ;

這樣就可以得到一個標簽的HTml代碼了
OuterHtml是取包含本身的Html如果是InnerHtml就是取的包含在這個標簽之內的所有Html代碼了
這點大家要注意了
如果大家想獲取Html代碼的Xpath路徑就是這部分

1. //*[@id='e_font']

復制代碼

這個其實很簡單只在大家安裝一個Firbug就行了，
看下圖片
<ignore_js_op> 
大家只要進入選擇模式，然后選擇你要的內容，然后右鍵復制一下就行了。
然后放在SelectSingleNode（）方法里就OK了
下面我說說幾個方法和屬性的意思吧、
方法

---

SelectNodes 獲取的是一個集合
SelectSingleNode 獲取一個標簽
SetAttributeValue 設置標簽的屬性值例如：SetAttributeValue("name","xpath-89");這說明把name屬性的值修改為xpath-89
屬性

---

OuterHtml   是取包含本身的Html
InnerHtml   取的包含在這個標簽之內的所有Html代碼了
XPath   獲取相對應的Xpath值
Attributes 獲取一個屬性的值例如：Attributes("name") 
也可以進行添加屬性例如：

普通瀏覽 復制代碼

1. hd.DocumentNode.SelectSingleNode (item.Key ).Attributes.Add ( "xpathid",  "xpath_1"  ) ;

下面我寫了一個遞歸獲取Html頁面所有Xpath值的方法大家看一下吧

普通瀏覽 復制代碼

1.    //key（Xpath）,value（整個節點）
2.          public List<ObjXpath> XpathList =  new List<ObjXpath> ( ) ;
3.          public  string strhtml =  "" ; //這里就是你的Html代碼具體怎么獲取請參考我的<a href=\"http://www.sufeinet.com/thread-3-1-1.html\" target=\"_blank\">HttpHelper</a>類吧
4.            private  int Index =  0 ;
5. //開始處理Node
6.          private  void SartNode ( )
7.         {
8.              //htmlDcoument對象用來訪問Html文檔s
9.             HtmlAgilityPack.HtmlDocument hd =  new HtmlAgilityPack.HtmlDocument ( ) ;
10.              //加載Html文檔
11.             hd.LoadHtml (strhtml ) ;
12.             HtmlNodeCollection htmllist = hd.DocumentNode.ChildNodes ;
13.             Index =  0 ;
14.             XpathList.Clear ( ) ;
15.              foreach  (HtmlNode em  in htmllist )
16.             {
17.                 Setxpath (em ) ;
18.             }
19.         }
20.          /// <summary>
21.          /// 遞歸獲取Html Dom
22.          /// </summary>
23.          /// <param name="node">要處理的節點</param>
24.          private  void Setxpath (HtmlNode node )
25.         {
26.              foreach  (HtmlNode item  in node.ChildNodes )
27.             {
28.                  if  (item. XPath.Contains ( "#" ) )
29.                 {
30.                      continue ;
31.                 }
32.                  if  (item.ChildNodes.Count >  0 )
33.                 {
34.                     XpathList.Add ( new ObjXpath ( ) { id = Index.ToString ( ), Key = item. XPath, Value =  "" } ) ;
35.                     Index++ ;
36.                     Setxpath (item ) ;
37.                 }
38.                  else
39.                 {
40.                     XpathList.Add ( new ObjXpath ( ) { id = Index.ToString ( ), Key = item. XPath, Value =  "" } ) ;
41.                     Index++ ;
42.                 }
43.             }
44.         }
45.    public  class ObjXpath
46.     {
47.          public  string id { get ; set ; }
48.          public  string Key { get ; set ; }
49.          public  string Value { get ; set ; }
50.     }

XpathList 就是獲取的所有Xpath值了，大家有興趣的話可以試試
我們先來看看效果吧
<ignore_js_op> 
好了下面放出所有代碼給大家

普通瀏覽 復制代碼

1. using  System ;
2. using  System. Collections. Generic ;
3. using  System. ComponentModel ;
4. using  System. Data ;
5. using  System. Drawing ;
6. using  System.Linq ;
7. using  System. Text ;
8. using  System.Windows.Forms ;
9. using  System. Text. RegularExpressions ;
10. using  System. Threading ;
11. using HtmlAgilityPack ;
12. using  System. IO ;
13. using  System. Runtime. Serialization.Json ;
14. 
15. namespace AutoXpathTools
16. {
17.      public partial  class Form1 : Form
18.     {
19.          public Form1 ( )
20.         {
21.             InitializeComponent ( ) ;
22.         }
23. 
24.          #region 私有變量和方法
25. 
26.          //委托傳入一個字符串
27.          private  delegate  void SetListBox ( string str ) ;
28. 
29.          //key（Xpath）,value（整個節點）
30.         List<ObjXpath> XpathList =  new List<ObjXpath> ( ) ;
31.          private  int Index =  0 ;
32.          //htmlDcoument對象用來訪問Html文檔
33.         HtmlAgilityPack.HtmlDocument hd =  new HtmlAgilityPack.HtmlDocument ( ) ;
34. 
35.          #endregion
36. 
37.          //分析Xpath的所有代碼
38.          private  void btnGetXpath_Click ( object sender, EventArgs e )
39.         {
40.              try
41.             {
42.                 HttpHelper http =  new HttpHelper ( ) ;
43.                 HttpItem item =  new HttpItem ( ) { URL = textBox1. Text.Trim ( ), IsToLower =  false, Encoding =  "gbk" } ;
44.                 txtXml. Text = http.GetHtml (item ) ;
45.                  if  (! string.IsNullOrWhiteSpace (txtXml. Text ) && txtXml. Text.Trim ( ).ToLower ( ) !=  "error" )
46.                 {
47.                      //加載Html文檔
48.                     hd.LoadHtml (txtXml. Text ) ;
49.                   
50. 
51.                     Thread pingTask =  new Thread ( new ThreadStart ( delegate
52.                     {
53.                          //代碼,線程要執行的代碼
54.                         SartNode (txtXml. Text ) ;
55.                     } ) ) ;
56.                     pingTask.Start ( ) ;
57.                    
58.                 }
59.                  else
60.                 {
61.                     txtXml. Text =  "根據您的的ULR：" + textBox1. Text.Trim ( ) +  "無法得到任何內容" ;
62.                 }
63.             }
64.              catch  (Exception ex )
65.             {
66.                 txtXml. Text = ex.Message.Trim ( ) ;
67.             }
68.         }
69.        
70. 
71.          //開始處理Node
72.          private  void SartNode ( string strhtml )
73.         {
74.              //htmlDcoument對象用來訪問Html文檔s
75.             HtmlAgilityPack.HtmlDocument hd =  new HtmlAgilityPack.HtmlDocument ( ) ;
76.              //加載Html文檔
77.             hd.LoadHtml (strhtml ) ;
78.             HtmlNodeCollection htmllist = hd.DocumentNode.ChildNodes ;
79.             Index =  0 ;
80.             XpathList.Clear ( ) ;
81.              foreach  (HtmlNode em  in htmllist )
82.             {
83.                 Setxpath (em ) ;
84.             }
85.         }
86.          /// <summary>
87.          /// 遞歸獲取Html Dom
88.          /// </summary>
89.          /// <param name="node">要處理的節點</param>
90.          private  void Setxpath (HtmlNode node )
91.         {
92.              foreach  (HtmlNode item  in node.ChildNodes )
93.             {
94.                  if  (item. XPath.Contains ( "#" ) )
95.                 {
96.                      continue ;
97.                 }
98.                  if  (item.ChildNodes.Count >  0 )
99.                 {
100.                     XpathList.Add ( new ObjXpath ( ) { id = Index.ToString ( ), Key = item. XPath, Value =  "" } ) ;
101.                     UIContorol (item. XPath ) ;
102.                     Index++ ;
103.                     Setxpath (item ) ;
104.                 }
105.                  else
106.                 {
107.                     XpathList.Add ( new ObjXpath ( ) { id = Index.ToString ( ), Key = item. XPath, Value =  "" } ) ;
108.                     UIContorol (item. XPath ) ;
109.                     Index++ ;
110.                 }
111.             }
112.         }
113.       
114.          //使用委托給控件賦值
115.          private  void UIContorol ( string str )
116.         {
117.             listBox1.Items.Add (str ) ;
118.             toolStripStatusLabel1. Text = str ;
119.         }
120. 
121.          private  void listBox1_SelectedValueChanged ( object sender, EventArgs e )
122.         {
123.              if  (listBox1.SelectedItem !=  null )
124.             {
125.                 txtPath. Text = listBox1.SelectedItem.ToString ( ).Trim ( ) ;
126.             }
127.         }
128. 
129.          private  void button3_Click ( object sender, EventArgs e )
130.         {
131.             txtContents. Text = hd.DocumentNode.SelectSingleNode (txtPath. Text.Trim ( ) ).OuterHtml ;
132.         }
133.       
134.          private  void Form1_Load ( object sender, EventArgs e )
135.         {
136.              //HttpItem item = new HttpItem()
137.              //{
138.              //    URL = "http://www.diandian.com/login",
139.              //    Method = "post",
140.              //    Cookie = "dtid=ZfXUVo1IsplHR4mHW1HYmgKbY4GJa003; kvf=1358855337188; alf=1; dru=1356356040; _l5=y",
141.              //    ContentType = "application/x-www-form-urlencoded",
142.              //    Postdata = "account=[e-mail]&password=wjlove520&nextUrl=&lcallback=&persistent=1",
143.              //    Referer = "http://www.diandian.com/logout?formKey=e4714d863c862a84fafd83d98e5ecb22"
144.              //};
145.              //HttpHelper http = new HttpHelper();
146.              //string html = http.GetHtml(item);
147.              //string cookie = item.Cookie;
148.              //item = new HttpItem() { URL = "http://www.diandian.com/home", Cookie = cookie };
149.              //html = http.GetHtml(item);
150.         }
151.     }
152.      public  class ObjXpath
153.     {
154.          public  string id { get ; set ; }
155.          public  string Key { get ; set ; }
156.          public  string Value { get ; set ; }
157.     }
158. }

就到這里吧，大家可以下載我的源代碼試試手
打包下載：
<ignore_js_op> AutoXpathTools.zip (76.32 KB, 下載次數: 0) 
如果你感覺可以話就給我推薦一下吧。感謝大家