欧美成人精品手机在线观看_69视频国产_动漫精品第一页_日韩中文字幕网 - 日本欧美一区二区

LOGO OA教程 ERP教程 模切知識(shí)交流 PMS教程 CRM教程 開發(fā)文檔 其他文檔  
 
網(wǎng)站管理員

你沒有看錯(cuò),爬網(wǎng)頁數(shù)據(jù),C# 也可以像 Jquery 那樣

admin
2023年10月16日 9:23 本文熱度 518

一:背景

1. 講故事

前段時(shí)間搞了一個(gè)地方性民生資訊號(hào),資訊嘛,都是我抄你的,你抄官媒的,小市民都喜歡奇聞異事,所以就存在一個(gè)需求,如何去定向抓取奇聞異事的地方號(hào)上的新聞,其實(shí)做起來很簡單,用邏輯回歸即可,這篇主要討論如何去抓取,在 C# 中大家都知道抓取通用的庫是 HtmlAgilityPack,但是這個(gè)庫主流的做法是采用 xpath 提取網(wǎng)頁內(nèi)容,這就讓我很不爽了,畢竟不熟悉莫名的抵抗哈,像我這個(gè)年紀(jì)的碼農(nóng),被 Jquery 教育了至少 5-6 年,所以必須用 類Jquery 的方式,在 python 中有 pyquery 做這件事情,那在C# 中有沒有類似的方式呢?嘿嘿,萬能的 github 上還真有。。。就是本篇介紹的 CSQuery。

二:CSQuery

1. 安裝

github的地址:https://github.com/zone117x/CsQuery   然后在vs中 nuget 一下即可:

2. 舉幾個(gè)例子

一切都準(zhǔn)備就緒了,那怎么用呢?不著急,我以博客園舉兩個(gè)例子。

1) 將首頁中的 友情連接 提取到

如上圖,要想獲取這里的 友情鏈接幾個(gè)大字,直接用 text() 肯定是不行的,默認(rèn)情況它會(huì)將所有的子節(jié)點(diǎn)的文本也會(huì)抓到,如下圖:

那怎么處理呢?可以用 jquery 提供的 contents 方法,然后在獲取的所有子節(jié)點(diǎn)中判斷是否有 文本節(jié)點(diǎn),最后獲取文本節(jié)點(diǎn)的內(nèi)容即可,如下代碼:

用js是搞定了,那用 CSQuery 代碼怎么搞定呢?模仿唄,如下代碼:


        static void Main(string[] args)
        {
            var jquery = CQ.createDocument(new WebClient().DownloadString("http://cnblogs.com"));

            var content = jquery["#friend_link"].Contents().Filter((dom) =>
            {
                return dom.NodeType == NodeType.TEXT_NODE;
            }).Text();

            Console.WriteLine(content);
        }

我不知道用 xpath 提取這樣的內(nèi)容麻不麻煩,不過用 jquery 方式不簡單,但輕車熟路。

2) 如何將 html 中的某些元素標(biāo)顏色

有時(shí)候?yàn)榱藰I(yè)務(wù)需要將某些 html 標(biāo)簽改一下顏色,比如說將首頁的 tabmenu 中 博問 和 專區(qū) 改成紅色,如下圖:

那用 CSQuery 怎么處理呢?如果玩過 jquery,一般來說步驟如下:

  • 使用 each 遍歷每一個(gè)子 li 標(biāo)簽

  • 使用 CSS 方法給 li 中 a 標(biāo)簽賦樣式

  • 使用 Render 渲染生成一個(gè)新的的html

有了步驟,C#代碼如下:


        static void Main(string[] args)
        {
            Config.HtmlEncoder = HtmlEncoders.None;

            var jquery = CQ.createDocument(new WebClient().DownloadString("http://cnblogs.com"));

            var html = jquery["#nav_left li"].Each(dom =>
               {
                   var self = jquery[dom];

                   var text = self.Text();

                   if (text == "博問" || text == "專區(qū)")
                   {
                       self.Find("a").CssSet(new { color = "red" });
                   }
               }).Render();
        }
        

3) 其他的操作方法

除了上面兩個(gè)操作方法外,你還可以使用 after,before,replaceAll,IS 等等一百來個(gè)實(shí)用的方法,這篇肯定也無法一一介紹了,大家有興趣可以下載下來看一看,搗鼓搗鼓。

三:其他用途

除了抓取html中的元素,我覺得這玩意還可以用在發(fā)送郵件時(shí)操控郵件模板,畢竟在很久以前大家都是用jquery來繪制 html,所以用 CSQuery 也是可以的,相對(duì)使用 xslt 有利有弊吧,接下來做一個(gè)例子:

1. 生成一個(gè)html模板


<!DOCTYPE html>

<html lang="en" xmlns="http://www.w3.org/1999/xhtml">
<head>
    <meta charset="utf-8" />
    <title></title>
</head>
<body>
    <ul id="main"></ul>
</body>
</html>

2. 使用 CSQuery 給 ul 追加 li

可以用 Append 將內(nèi)容追加到 <ul> 節(jié)點(diǎn)內(nèi)。


    class Program
    {
        static void Main(string[] args)
        {
            Config.HtmlEncoder = HtmlEncoders.None;

            var strlist = new string[2] { "1""2" };

            var path = Environment.CurrentDirectory + "\\2.html";
            var jquery = CQ.createfromFile(path);

            foreach (var str in strlist)
            {
                jquery.Find("#main").Append($"<li>{str}</li>");
            }

            var html = jquery.Render();
        }
    }

3. 部分渲染 Renderselection

Render方法是將整個(gè)Dom渲染成html,但有時(shí)候你只需要得到你修改的那部分內(nèi)容,而不是整個(gè)html,這就涉及到了部分渲染,可以用 Renderselection 方法即可,代碼如下:


        static void Main(string[] args)
        {
            Config.HtmlEncoder = HtmlEncoders.None;

            var strlist = new string[2] { "1""2" };

            var path = Environment.CurrentDirectory + "\\2.html";
            var jquery = CQ.createfromFile(path);

            var current = jquery.Find("#main");

            foreach (var str in strlist)
            {
                current.Append($"<li>{str}</li>");
            }

            var html = current.Renderselection();

            Console.WriteLine(html);
        }

------------- output ----------------

<ul id="main"><li>1</li><li>2</li></ul>

四:總結(jié)

Jquery 這種操作模式對(duì)我個(gè)人來說還是比較舒服的,畢竟熟!不過在 html5 中也新增了 queryselector 和 queryselectorAll 支持 css3 選擇器,非常強(qiáng)大,可 jquery 不光在選擇器的靈活上,還在于對(duì)節(jié)點(diǎn)的靈活操作上,總的來說不是特別富交互的情況下可以懷舊一把。



該文章在 2023/10/16 9:23:53 編輯過
關(guān)鍵字查詢
相關(guān)文章
正在查詢...
點(diǎn)晴ERP是一款針對(duì)中小制造業(yè)的專業(yè)生產(chǎn)管理軟件系統(tǒng),系統(tǒng)成熟度和易用性得到了國內(nèi)大量中小企業(yè)的青睞。
點(diǎn)晴PMS碼頭管理系統(tǒng)主要針對(duì)港口碼頭集裝箱與散貨日常運(yùn)作、調(diào)度、堆場、車隊(duì)、財(cái)務(wù)費(fèi)用、相關(guān)報(bào)表等業(yè)務(wù)管理,結(jié)合碼頭的業(yè)務(wù)特點(diǎn),圍繞調(diào)度、堆場作業(yè)而開發(fā)的。集技術(shù)的先進(jìn)性、管理的有效性于一體,是物流碼頭及其他港口類企業(yè)的高效ERP管理信息系統(tǒng)。
點(diǎn)晴WMS倉儲(chǔ)管理系統(tǒng)提供了貨物產(chǎn)品管理,銷售管理,采購管理,倉儲(chǔ)管理,倉庫管理,保質(zhì)期管理,貨位管理,庫位管理,生產(chǎn)管理,WMS管理系統(tǒng),標(biāo)簽打印,條形碼,二維碼管理,批號(hào)管理軟件。
點(diǎn)晴免費(fèi)OA是一款軟件和通用服務(wù)都免費(fèi),不限功能、不限時(shí)間、不限用戶的免費(fèi)OA協(xié)同辦公管理系統(tǒng)。
Copyright 2010-2025 ClickSun All Rights Reserved