當(dāng)前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

探究Ptcms小说采集规则

發(fā)布時(shí)間：2023/12/9 编程问答 30 豆豆

生活随笔收集整理的這篇文章主要介紹了探究Ptcms小说采集规则小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

1、首頁的更新列表頁采集 ,新增http://www.31xs.org/首頁采集規(guī)則
PTCMS內(nèi)置
[subnovelid] // floor(小說ID/1000)
[novelid] //小說ID
[頁碼] //列表采集頁碼
[空白] //空白包含換行和空格
[內(nèi)容] //等同于 .+? 匹配之間的任何字符
[數(shù)字] // 等同于 \d+ 匹配0-9數(shù)字組合
常用正則，以下的自己百度下
.+? //最小匹配 . 除了換行符之外的任意字符,+ 重復(fù)一次或一次以上
//? 懶惰模式
\d+ // \d 表示匹配的是數(shù)字,+ 表示重復(fù)一次或者多次
//* 表示重復(fù)零次或者多次
\w+ //[\w]+和\w+沒有區(qū)別，都是匹配數(shù)字和字母下劃線的多個(gè)字符；
//[\w+]表示匹配數(shù)字、字母、下劃線和加號(hào)本身字符；
\s //\s是指空白，包括空格、換行、tab縮進(jìn)等所有的空白，而\S剛好相反
\r\n //\n是換行。\r是回車。

[]
表示數(shù)組而非排列，即不按固定次序位置排列；
在[]內(nèi)的字符可以任意次序出現(xiàn)。
[ABC]+
可以匹配"AAABBBCCC,BBBAAACCC,BACCBACAACBAC,…"，不是一定按固定A…B…C…的次序排列。
[\w./-+]+
是匹配\w [0-9a-zA-Z_] 或 . 或 / 或 - 或 + 字符；
在[./-+]內(nèi)均表示字符本身；
在[]+外表示{1,}至少1次或多次；
在[.]內(nèi)點(diǎn)，不是任意字符的意思，就是匹配點(diǎn).字符本身，點(diǎn).可以不需要加反斜杠.。
在[]內(nèi)特殊字符，表示匹配特殊字符本身，不需要加反斜杠，
在[]外特殊字符，表示匹配特殊字符本身，必須要加反斜杠。

()用于捕獲匹配的字符串,比如：a(.?)b捕獲a和b之間的任何字符(除了換行符外)
而且()還用于括起正則表達(dá)式中的小組，比如：^(a|b).$匹配以a或b開頭的任何字符串
另外,(?:pattern)是一個(gè)非捕獲匹配,就是匹配但不捕獲字符串
(?<=pattern)逆序肯定環(huán)視，表示所在位置左側(cè)能夠匹配pattern
(?<!pattern)逆序否定環(huán)視，表示所在位置左側(cè)不能匹配pattern
(?=pattern)順序肯定環(huán)視，表示所在位置右側(cè)能夠匹配pattern
(?!pattern)順序否定環(huán)視，表示所在位置右側(cè)不能匹配pattern
這些都和()是不同的概念,不要混淆
[]用于定義匹配的字符集或字符范圍,比如：[a-z]匹配一個(gè)英文小寫字母范圍從a到z
{}用于定義匹配的次數(shù),比如：a{1,}匹配a至少一次

（1）采集地址
列表頁地址：

血紅小說網(wǎng)http://www.xuehongxs.com/xuanhuan/

88讀書	https://www.88dus.com/sort1/1/
頂點(diǎn)小說	http://www.23us.tv
31xs.org	http://www.31xs.org/

信息頁地址：

血紅小說網(wǎng)http://www.xuehongxs.com/[subnovelid]_[novelid]/

88讀書	http://www.88dus.com/xiaoshuo/[subnovelid]/[novelid]/
頂點(diǎn)小說	http://www.23us.tv/xs/[subnovelid]/[novelid]/
31xs.org	http://www.31xs.com/[subnovelid]/[novelid]/

血紅小說網(wǎng)

<h2>好看的玄幻小說最近更新列表</h2> <ul><li><span class="s2">《<a href="https://www.xuehongxs.com/5_5875/" target="_blank">山村最強(qiáng)小農(nóng)民</a>》</span><span class="s3"><a href="/5_5875/18285280.html" target="_blank">第三百四十七章路修好了</a>(10-04)</span><span class="s5">趙小剛</span></li><li><span class="s2">《<a href="https://www.xuehongxs.com/5_5631/" target="_blank">絕品小農(nóng)民</a>》</span><span class="s3"><a href="/5_5631/18285279.html" target="_blank">第三百四十七章路修好了</a>(10-04)</span><span class="s5">一目盡是滄桑</span></li><li><span class="s2">《<a href="https://www.xuehongxs.com/8_8246/" target="_blank">總裁，來吧！</a>》</span><span class="s3"><a href="/8_8246/18285275.html" target="_blank">第327章小白鼠</a>(10-04)</span><span class="s5">壺聿</span></li>

88讀書

<div class="booklist"><h1>玄幻魔法</h1><ul><li class="t"><span class="sm">小說名稱</span><span class="zj">最新章節(jié)</span><span class="zz">作者</span><span class="zs">字?jǐn)?shù)</span><span class="sj">更新</span><span class="zt">狀態(tài)</span><span class="fs">關(guān)注</span></li> <li><span class="sm"><a href="/xiaoshuo/98/98218/"><b>不滅修羅</b></a></span><span class="zj"><a href="/xiaoshuo/98/98218/40370860.html">第一千二百九十一章執(zhí)法守護(hù)者出面</a></span><span class="zz">冷面加糖</span><span class="zs">9360650字</span><span class="sj">18-10-03</span><span class="zt">連載中</span><span class="fs">47人</span></li> <li><span class="sm"><a href="/xiaoshuo/103/103631/"><b>英雄聯(lián)盟之我最囂張</b></a></span><span class="zj"><a href="/xiaoshuo/103/103631/40370859.html">第534章邀請(qǐng)</a></span><span class="zz">西瓜君1</span><span class="zs">3645692字</span><span class="sj">18-10-03</span><span class="zt">連載中</span><span class="fs">6人</span></li> <li><span class="sm"><a href="/xiaoshuo/99/99117/"><b>大道誅天</b></a></span><span class="zj"><a href="/xiaoshuo/99/99117/40370855.html">第八百六十九章集體進(jìn)階</a></span><span class="zz">熱乎冰棍兒</span><span class="zs">6849454字</span><span class="sj">18-10-03</span><span class="zt">連載中</span><span class="fs">69人</span></li>

頂點(diǎn)小說

<div id="newscontent"><div class="l"><h2> 最近更新小說列表</h2><ul><li><span class="s1">[玄幻奇幻]</span><spanclass="s2"><a href="/xs/98/98785/"target="_blank">圣尊之門</a></span><spanclass="s3"><a href="/xs/98/98785/424589.html"target="_blank">第一百一十八章自斷一臂,饒...</a></span><spanclass="s4">引玉</span><spanclass="s5">10-04</span></li><li><span class="s1">[玄幻奇幻]</span><spanclass="s2"><a href="/xs/109/109510/"target="_blank">不朽神帝</a></span><spanclass="s3"><a href="/xs/109/109510/735249.html"target="_blank">第1642章十二天都化魂陣</a></span><spanclass="s4">項(xiàng)華</span><spanclass="s5">10-04</span></li><li><span class="s1">[女生頻道]</span><spanclass="s2"><a href="/xs/119/119748/"target="_blank">御天神凰</a></span><spanclass="s3"><a href="/xs/119/119748/457042.html"target="_blank">第二百零九章身世</a></span><spanclass="s4">迷之萌物</span><spanclass="s5">10-04</span></li><li><span class="s1">[都市言情]</span><spanclass="s2"><a href="/xs/117/117275/"target="_blank">火爆宗師</a></span><spanclass="s3"><a href="/xs/117/117275/496014.html"target="_blank">第195章靈貓</a></span><spanclass="s4">瀚海藏鷹</span><spanclass="s5">10-04</span></li>

31xs首頁

<div class="l"> <h2>最近更新小說列表</h2> <ul><li><span class="s1">[靈異小說]</span><span class="s2"><a href="http://www.31xs.com/114/114468/" target="_blank">老公太放肆：嬌妻要造反</a></span><span class="s3"><a href="/114/114468/38809832.html" target="_blank">第43章暗戀的那幾年3</a></span><span class="s4">天下斗筆</span><span class="s5">10-04</span></li><li><span class="s1">[都市小說]</span><span class="s2"><a href="http://www.31xs.com/114/114495/" target="_blank">貼身特工</a></span><span class="s3"><a href="/114/114495/38809833.html" target="_blank">第九十一章怪才導(dǎo)演</a></span><span class="s4">特工熊貓</span><span class="s5">10-04</span></li><li><span class="s1">[武俠小說]</span><span class="s2"><a href="http://www.31xs.com/114/114499/" target="_blank">空竹斷月</a></span><span class="s3"><a href="/114/114499/38809830.html" target="_blank">八章箭上弦太子挑釁</a></span><span class="s4">譚小漾</span><span class="s5">10-04</span></li><li><span class="s1">[都市小說]</span><span class="s2"><a href="http://www.31xs.com/114/114497/" target="_blank">雜家弟子在都市</a></span><span class="s3"><a href="/114/114497/38809827.html" target="_blank">第三十二章反追殺</a></span><span class="s4">尺寒</span><span class="s5">10-04</span></li>

目錄頁地址：

血紅小說網(wǎng)http://www.xuehongxs.com/[subnovelid]_[novelid]/

88讀書	http://www.88dus.com/xiaoshuo/[subnovelid]/[novelid]/
頂點(diǎn)小說	http://www.23us.tv/xs/[subnovelid]/[novelid]/
31xs.org	http://www.31xs.com/[subnovelid]/[novelid]/

（2）更新列表規(guī)則

<span class="s2">《<a href="https://www.xuehongxs.com/5_5875/" target="_blank">山村最強(qiáng)小農(nóng)民</a>》</span> <span class="sm"><a href="/xiaoshuo/98/98218/"><b>不滅修羅</b></a></span> <span class="s2"><a href="/xs/119/119748/" target="_blank">御天神凰</a></span> <span class="s2"><a href="http://www.31xs.com/114/114497/" target="_blank">雜家弟子在都市</a></span>

小說名稱：

血紅小說網(wǎng)<span class="s2.+?(.+?)

88讀書	[內(nèi)容]
頂點(diǎn)小說	lass=“s2”>.+?blank">(.+?)
31xs.org	lass=“s2”>.+?blank">(.+?)

小說書號(hào)：

血紅小說網(wǎng)<span class="s2.+?

88讀書
頂點(diǎn)小說	“s2”>.+?href="/xs/\d+/(\d+)/".+?blank">.+?
31xs.org

“s2”>.+?href=".+?/\d+/(\d+)/".+?blank">.+?

<span class="s3"><a href="/5_5875/18285280.html" target="_blank">第三百四十七章路修好了</a>(10-04)</span> <span class="zj"><a href="/xiaoshuo/98/98218/40370860.html">第一千二百九十一章執(zhí)法守護(hù)者出面</a></span> <span class="s3"><a href="/xs/119/119748/457042.html" target="_blank">第二百零九章身世</a></span> <span class="s3"><a href="/114/114499/38809830.html" target="_blank">八章箭上弦太子挑釁</a></span>

更新標(biāo)識(shí)：

血紅小說網(wǎng).+?<a href="/\d+_\d+/(\d+).html"

88讀書	<a href="/xiaoshuo/\d+/\d+/(\d+).html"
頂點(diǎn)小說	“s3.+?href=”/xs/\d+/\d+/(\d+).html"
31xs.org	“s3.+?href=”/\d+/\d+/(\d+).html"

（3）信息頁規(guī)則

小說名稱：

血紅小說網(wǎng)

(.+?)

88讀書	[內(nèi)容]
頂點(diǎn)小說
31xs.org	[內(nèi)容]

血紅小說網(wǎng)

</div><a href="/">血紅小說網(wǎng)</a> > <a href="https://www.xuehongxs.com/xuanhuan/1.html">玄幻小說</a> > 山村最強(qiáng)小農(nóng)民最新章節(jié)列表</div> <div id="maininfo"><div id="info"><h1>山村最強(qiáng)小農(nóng)民</h1><p>作    者：趙小剛</p><p>動(dòng)    作：<a href="javascript:;" onClick="showpop('/modules/article/addbookcase.php?bid=5875&ajax_request=1');">加入書架</a>, <a href="javascript:;" onClick="showpop('/modules/article/uservote.php?id=5875&ajax_request=1');">投推薦票</a>, <a href="#footer">直達(dá)底部</a></p><p>最后更新：2018-10-03 21:14</p><p>下    載：( <a href="/modules/article/txtarticle.php?id=5875">TXT</a>,CHM,UMD,JAR,APK,HTML )</p></div><div id="intro"><p>大哥死的突然，留下一個(gè)仙女一般的嫂子讓趙小剛照顧，但是村里人都說她是掃把星，克夫命，趙小剛卻不信邪，于是……</p></div></div><div id="sidebar"><div id="fmimg"><script src="/modules/article/52mb_uptime.php?id=5875&type=img"></script><span class="b"></span></div></div>

88讀書

頂點(diǎn)小說

31xs首頁

小說作者：

血紅小說網(wǎng)

作????者：(.+?)

88讀書	og:novel:author" content="[內(nèi)容]"
頂點(diǎn)小說	作.+?者：(.+?)
31xs.org	og:novel:author" content="[內(nèi)容]"

小說簡(jiǎn)介：

血紅小說網(wǎng)(.+?)

88讀書	og:description" content="[內(nèi)容]"
頂點(diǎn)小說	(.+?)
31xs.org	(.+?)

小說封面：

血紅小說網(wǎng)

小說分類：

血紅小說網(wǎng)html">(.+?) &gt

88讀書
頂點(diǎn)小說
31xs.org

小說進(jìn)度：

血紅小說網(wǎng)type=img">

88讀書
頂點(diǎn)小說
31xs.org

（4）目錄頁規(guī)則

章節(jié)ID：

血紅小說網(wǎng)

88讀書	.+?
頂點(diǎn)小說	.+?
31xs.org	.+?

血紅小說網(wǎng)

<div class="box_con"><div id="list"><div class="volume">山村最強(qiáng)小農(nóng)民正文<span></span></div><ul class="chapters"><li class="chapter"><a href="/5_5875/13267068.html">第2章/m.XueHongxs.Com</a></li><li class="chapter"><a href="/5_5875/13267075.html">第3章/m.XueHongxs.Com</a></li><li class="chapter"><a href="/5_5875/13267083.html">第4章/m.XueHongxs.Com</a></li>

88讀書

<div class="mulu"><ul><li><a href="33794984.html">第一章廢物</a></li><li><a href="33794985.html">第二章修羅傳承</a></li><li><a href="33794987.html">第三章突破先天</a></li>

頂點(diǎn)小說

<div class="box_con"><div id="list"><dl><dt>《圣尊之門》最新章節(jié)（提示：已啟用緩存技術(shù)，最新章節(jié)可能會(huì)延時(shí)顯示，登錄書架即可實(shí)時(shí)查看。）</dt><dd> <a style="" href="424658.html">第一百一十九章饒我不死的都死了</a></dd><dd> <a style="" href="424589.html">第一百一十八章自斷一臂,饒你不死</a></dd><dd> <a style="" href="424555.html">第一百一十七章三槍</a></dd><dd> <a style="" href="424526.html">第一百一十六章名師</a></dd>

31xs首頁

<div class="box_con"><div id="list"><dl> <dt>絕品邪少最新章節(jié) （本站開啟緩存，剛剛更新的章節(jié)書架實(shí)時(shí)顯示。）</dt> <dt>絕品邪少全部章節(jié)</dt><dd><a href="javascript:void(0);" onclick="addBookcase(114495,0)">加入書架</a></dd><dd><a href="javascript:void(0);" id="report" articleid="114495">錯(cuò)誤反饋</a></dd><dt>正文</dt><dd><a href="/114/114495/38806778.html">第一章誰睡了我</a></dd><dd><a href="/114/114495/38806849.html">第三章親密接觸</a></dd><dd><a href="/114/114495/38806915.html">第四章小保安</a></dd><dd><a href="/114/114495/38806982.html">第五章冤家路窄</a></dd>

章節(jié)名稱：

血紅小說網(wǎng)

(.+?)
">

88讀書	(.+?)
頂點(diǎn)小說	(.+?)
31xs.org	(.+?)

章節(jié)地址：

血紅小說網(wǎng)

88讀書
頂點(diǎn)小說	.+?
31xs.org	.+?

（5）章節(jié)頁規(guī)則

接口URL：

血紅小說網(wǎng)http://app.api.ptcms.com/api/chapter/get.xml?url=[url]

88讀書
頂點(diǎn)小說
31xs.org

內(nèi)容規(guī)則：

血紅小說網(wǎng)(?:<![CDATA[)?內(nèi)容?

88讀書	[內(nèi)容]
頂點(diǎn)小說	(?:<![CDATA[)?內(nèi)容?
31xs.org	(?:<![CDATA[)?內(nèi)容?

血紅小說網(wǎng)

<div id="content">    烈日炎炎，天空之上猶 ..........................立刻心中有了一個(gè)大膽的主意。</div><div class="bottem2">

88讀書

<div class="yd_text2">    “爺爺，你怎么樣了？你別嚇我啊！”<br />.......................... </div><div class="yd_ad1">

頂點(diǎn)小說

</div><div style="text-align: center"><script>read2();</script></div><div id="content"><br/>　　<span class="Banner"> 親 ~ 本站域名:"166小說"的簡(jiǎn)寫諧音166xs.com，很好記哦！www.166xs.com 好看的小說</span><br/>　　<strong class="Book_Hot">強(qiáng)烈推薦：</strong> &nbsp;&nbsp;&nbsp;&nbsp;“老子居然又重生了？”陳玄機(jī)站在銅鏡前，里面是一張略顯稚嫩的臉孔，但劍眉星目，鼻若懸膽，模樣甚是好看，.......................... </div><div class="bottem2">

31xs首頁

<div id="content">  <p> 時(shí)間總是飛快的，..........................</div>

2，測(cè)試后內(nèi)容不對(duì)

(?:\<\!\[CDATA\[)?[內(nèi)容](?:\]\]\>)? 沒有寫對(duì) [內(nèi)容] 為空

vim /usr/share/wwwphp/ptcms/application/rule/model/collect.php $this->progress("《{$zym_31}》添加新書成功"); $this->progress("《{$zym_31}》開始處理章節(jié)");; $this->progress("《{$zym_31}》需要處理章節(jié)數(shù)目：" . count($zym_20)); $this->progress("《{$zym_31}》更新小說完成");//ok $this->progress("《{$zym_50['data']['novelname']}》添加新書成功，書號(hào){$zym_30}"); $this->progress("《{$zym_50['data']['novelname']}》添加日志成功"); $zym_31 = $this->model->flush('novelsearch_info', $zym_21['novelid'], 'novel.name'); print_r($zym_31); var_dump($zym_31); vim /usr/share/wwwphp/ptcms/ptcms/core/model.php//刷新public function flush($table, $id, $field = ''){$this->rm($table,$id);return $this->get($table,$id.$field);} //$zym_31得到是一個(gè)采集信息數(shù)組vim /usr/share/wwwphp/ptcms/application/rule/model/collect_base.php public function progress($zym_6, $zym_7 = 'success', $zym_11 = false) { if (empty($_GET['backRun'])) { switch ($zym_7) { case 'success': $zym_13 = 'green'; break; case 'error': $zym_13 = 'red'; break; case 'warning': $zym_13 = "orangered"; break; case 'info': $zym_13 = '#333'; break; default: $zym_13 = $zym_7; } $zym_12 = $zym_11 ? 'bold' : 'normal'; echo "<span style='color:{$zym_13};font-weight:{$zym_12}'>{$zym_6}</span><br />"; @ob_flush(); @flush(); } else { log::record($zym_6); } }

錯(cuò)誤原因是

vim /usr/share/wwwphp/ptcms/application/rule/model/collect.php $zym_31 = $this->model->flush('novelsearch_info', $zym_21['novelid'], 'novel.name'); //這里得到的是信息數(shù)組改為 $zym_31 = $this->model->get('novelsearch_info', $zym_21['novelid'], 'novel.name'); //這里得到的是name

按書號(hào)采集成功！

總結(jié)

以上是生活随笔為你收集整理的探究Ptcms小说采集规则的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。

上一篇： Eclipse 导出
下一篇： android 锁屏 home,andr