第十節 lxml.etree解析HTML文件

from lxml import etree

r = ''' 
              <div class="tabsConItem syllabus">
                  <ul id="syList">
                                                                              <li class="item lesson" >
                                  <div class="main"><a href="https://edu.51cto.com/center/course/lesson/index?id=226242" title="第一個python程序與數據存儲-1" target="_blank">第一個python程序與數據存儲-1</a></div>
                              </li>
                                                        <li class="item lesson" >
                                  <div class="main"><a href="https://edu.51cto.com/center/course/lesson/index?id=226241" title="第一個python程序與數據存儲-2" target="_blank">第一個python程序與數據存儲-2</a></div>
                              </li>
                                                        <li class="item lesson" >
                                  <div class="main"><a href="https://edu.51cto.com/center/course/lesson/index?id=226240" title="第一個python程序與數據存儲-3" target="_blank">第一個python程序與數據存儲-3</a></div>
                              </li>
                                                        <li class="item lesson" >
                                  <div class="main"><a href="https://edu.51cto.com/center/course/lesson/index?id=226239" title="第一個python程序與數據存儲-4" target="_blank">第一個python程序與數據存儲-4</a></div>
                              </li>
                                                        <li class="item lesson" >
                                  <div class="main"><a href="https://edu.51cto.com/center/course/lesson/index?id=226238" title="第一個python程序與數據存儲-5" target="_blank">第一個python程序與數據存儲-5</a></div>
                                                                  </ul>
                  <div id="syList_loading" class="loading">加載中</div>
                  <div id="syList_Empty" class="Empty"></div>
              </div>'''
'''

'''
def parse_text():
    html = etree.HTML(r)  # 這個底層已經設定好html解析器，不需要重新設置
    # 使用etree將爬蟲爬取保存成字符串格式的文件重新轉換成HTML格式的文件以便用xpath語法提取信息
    print(etree.tostring(html, encoding='utf-8').decode('utf-8'))
def parse_lagou_file():
    #拉鈎網的語法不想騰訊的那么規范，因此需要調用etree.HTMLParser生成一個專門用來解析html的解析器正常解析
    parse = etree.HTMLParser(encoding="UTF-8")
    html2 = etree.parse('lagou.html',parser=parse)   #讀取文件方式解析
    #etree.parse('lagou.html',parser=parse)默認是使用XML解析器的
    print(etree.tostring(html2,encoding='utf-8').decode('utf-8'))
if __name__ == '__main__':
    parse_lagou_file()