From 717931166a5ea6e0931f85cb3efc195982ca7b91 Mon Sep 17 00:00:00 2001 From: hooy <56918789+hooyantsing@users.noreply.github.com> Date: Sat, 11 Feb 2023 02:14:11 +0800 Subject: [PATCH] =?UTF-8?q?=E5=90=91=20webmagic-saxon=20=E7=BB=84=E4=BB=B6?= =?UTF-8?q?=E6=8F=90=E4=BE=9B=E8=8B=A5=E5=B9=B2=E6=96=B0=20API=EF=BC=8C?= =?UTF-8?q?=E6=9B=B4=E4=BC=98=E9=9B=85=E6=9B=B4=E7=81=B5=E6=B4=BB=E6=9B=B4?= =?UTF-8?q?=E5=BC=BA=E5=A4=A7=20(#1108)?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit * Feature: * webmagic-saxon 组件新增若干新 API； * Update: 更优雅的写代码。 * Update: JaxpSelectorUtils 工具类增加 final 关键字。 --- .../webmagic/selector/JaxpSelectorUtils.java | 61 +++++++ .../webmagic/selector/NodeSelector.java | 32 ++++ .../webmagic/selector/Xpath2Selector.java | 155 ++++++++++-------- .../webmagic/selector/XpathSelectorTest.java | 57 +++++-- 4 files changed, 216 insertions(+), 89 deletions(-) create mode 100644 webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/JaxpSelectorUtils.java create mode 100644 webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/NodeSelector.java diff --git a/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/JaxpSelectorUtils.java b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/JaxpSelectorUtils.java new file mode 100644 index 000000000..b03f3a2ab --- /dev/null +++ b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/JaxpSelectorUtils.java @@ -0,0 +1,61 @@ +package us.codecraft.webmagic.selector; + +import org.w3c.dom.Node; +import org.w3c.dom.NodeList; + +import javax.xml.transform.OutputKeys; +import javax.xml.transform.Transformer; +import javax.xml.transform.TransformerException; +import javax.xml.transform.TransformerFactory; +import javax.xml.transform.dom.DOMSource; +import javax.xml.transform.stream.StreamResult; +import java.io.StringWriter; +import java.util.ArrayList; +import java.util.Collections; +import java.util.List; + +/** + * @author hooy + */ +public final class JaxpSelectorUtils { + + private JaxpSelectorUtils() { + throw new RuntimeException("The util class cannot be instanced"); + } + + public static List NodeListToArrayList(NodeList nodes) { + List list = new ArrayList<>(nodes.getLength()); + for (int i = 0; i < nodes.getLength(); i++) { + list.add(nodes.item(i)); + } + return list; + } + + public static String nodeToString(Node node) throws TransformerException { + List before = Collections.singletonList(node); + List after = nodesToStrings(before); + if (after.size() > 0) { + return after.get(0); + } else { + return null; + } + } + + public static List nodesToStrings(List nodes) throws TransformerException { + List results = new ArrayList<>(nodes.size()); + Transformer transformer = TransformerFactory.newInstance().newTransformer(); + StreamResult xmlOutput = new StreamResult(); + transformer.setOutputProperty(OutputKeys.OMIT_XML_DECLARATION, "yes"); + for (Node node : nodes) { + if (node.getNodeType() == Node.ATTRIBUTE_NODE || node.getNodeType() == Node.TEXT_NODE) { + results.add(node.getTextContent()); + } else { + xmlOutput.setWriter(new StringWriter()); + transformer.transform(new DOMSource(node), xmlOutput); + results.add(xmlOutput.getWriter().toString()); + } + } + return results; + } + +} diff --git a/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/NodeSelector.java b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/NodeSelector.java new file mode 100644 index 000000000..3e6339dda --- /dev/null +++ b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/NodeSelector.java @@ -0,0 +1,32 @@ +package us.codecraft.webmagic.selector; + +import org.w3c.dom.Node; + +import java.util.List; + +/** + * Selector(extractor) for html node.
+ * + * @author hooy
+ * @since 0.8.0 + */ +public interface NodeSelector { + + /** + * Extract single result in text.
+ * If there are more than one result, only the first will be chosen. + * + * @param node node + * @return result + */ + String select(Node node); + + /** + * Extract all results in text.
+ * + * @param node node + * @return results + */ + List selectList(Node node); + +} diff --git a/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/Xpath2Selector.java b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/Xpath2Selector.java index b63213b62..6c5d7b332 100644 --- a/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/Xpath2Selector.java +++ b/webmagic-saxon/src/main/java/us/codecraft/webmagic/selector/Xpath2Selector.java @@ -1,19 +1,10 @@ package us.codecraft.webmagic.selector; -import java.io.StringWriter; -import java.util.ArrayList; -import java.util.Iterator; -import java.util.List; -import java.util.Map; +import java.util.*; import java.util.concurrent.ConcurrentHashMap; import javax.xml.namespace.NamespaceContext; import javax.xml.parsers.ParserConfigurationException; -import javax.xml.transform.OutputKeys; -import javax.xml.transform.Transformer; -import javax.xml.transform.TransformerFactory; -import javax.xml.transform.dom.DOMSource; -import javax.xml.transform.stream.StreamResult; import javax.xml.xpath.XPathConstants; import javax.xml.xpath.XPathExpression; import javax.xml.xpath.XPathExpressionException; @@ -32,20 +23,22 @@ import net.sf.saxon.xpath.XPathEvaluator; import us.codecraft.webmagic.utils.BaseSelectorUtils; +import static us.codecraft.webmagic.selector.JaxpSelectorUtils.*; + /** * 支持xpath2.0的选择器。包装了HtmlCleaner和Saxon HE。
* - * @author code4crafter@gmail.com
+ * @author code4crafter@gmail.com, hooy
* Date: 13-4-21 * Time: 上午9:39 */ -public class Xpath2Selector implements Selector { +public class Xpath2Selector implements Selector, NodeSelector { - private String xpathStr; + private final String xpathStr; private XPathExpression xPathExpression; - private Logger logger = LoggerFactory.getLogger(getClass()); + private final Logger logger = LoggerFactory.getLogger(getClass()); public Xpath2Selector(String xpathStr) { this.xpathStr = xpathStr; @@ -56,25 +49,25 @@ public Xpath2Selector(String xpathStr) { } } + public static Xpath2Selector newInstance(String xpathStr) { + return new Xpath2Selector(xpathStr); + } + enum XPath2NamespaceContext implements NamespaceContext { INSTANCE; - private final Map prefix2NamespaceMap = new ConcurrentHashMap(); + private final Map prefix2NamespaceMap = new ConcurrentHashMap<>(); - private final Map> namespace2PrefixMap = new ConcurrentHashMap>(); + private final Map> namespace2PrefixMap = new ConcurrentHashMap<>(); private void put(String prefix, String namespaceURI) { prefix2NamespaceMap.put(prefix, namespaceURI); - List prefixes = namespace2PrefixMap.get(namespaceURI); - if (prefixes == null) { - prefixes = new ArrayList(); - namespace2PrefixMap.put(namespaceURI, prefixes); - } + List prefixes = namespace2PrefixMap.computeIfAbsent(namespaceURI, k -> new ArrayList<>()); prefixes.add(prefix); } - private XPath2NamespaceContext() { + XPath2NamespaceContext() { put("fn", NamespaceConstant.FN); put("xslt", NamespaceConstant.XSLT); put("xhtml", NamespaceConstant.XHTML); @@ -113,29 +106,18 @@ private void init() throws XPathExpressionException { @Override public String select(String text) { try { - Object result; - try { - result = xPathExpression.evaluate(parse(text), XPathConstants.NODESET); - } catch (XPathExpressionException e) { - result = xPathExpression.evaluate(parse(text), XPathConstants.STRING); - } - if (result instanceof NodeList) { - NodeList nodeList = (NodeList) result; - if (nodeList.getLength() == 0) { - return null; - } - Node item = nodeList.item(0); - if (item.getNodeType() == Node.ATTRIBUTE_NODE || item.getNodeType() == Node.TEXT_NODE) { - return item.getTextContent(); - } else { - StreamResult xmlOutput = new StreamResult(new StringWriter()); - Transformer transformer = TransformerFactory.newInstance().newTransformer(); - transformer.setOutputProperty(OutputKeys.OMIT_XML_DECLARATION, "yes"); - transformer.transform(new DOMSource(item), xmlOutput); - return xmlOutput.getWriter().toString(); - } - } - return result.toString(); + Document doc = parse(text); + return select(doc); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + @Override + public String select(Node node) { + try { + return (String) xPathExpression.evaluate(node, XPathConstants.STRING); } catch (Exception e) { logger.error("select text error! " + xpathStr, e); } @@ -144,43 +126,72 @@ public String select(String text) { @Override public List selectList(String text) { - List results = new ArrayList(); try { - Object result; - try { - result = xPathExpression.evaluate(parse(text), XPathConstants.NODESET); - } catch (XPathExpressionException e) { - result = xPathExpression.evaluate(parse(text), XPathConstants.STRING); - } - if (result instanceof NodeList) { - NodeList nodeList = (NodeList) result; - Transformer transformer = TransformerFactory.newInstance().newTransformer(); - StreamResult xmlOutput = new StreamResult(); - transformer.setOutputProperty(OutputKeys.OMIT_XML_DECLARATION, "yes"); - for (int i = 0; i < nodeList.getLength(); i++) { - Node item = nodeList.item(i); - if (item.getNodeType() == Node.ATTRIBUTE_NODE || item.getNodeType() == Node.TEXT_NODE) { - results.add(item.getTextContent()); - } else { - xmlOutput.setWriter(new StringWriter()); - transformer.transform(new DOMSource(item), xmlOutput); - results.add(xmlOutput.getWriter().toString()); - } - } - } else { - results.add(result.toString()); - } + Document doc = parse(text); + return selectList(doc); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + @Override + public List selectList(Node node) { + try { + NodeList result = (NodeList) xPathExpression.evaluate(node, XPathConstants.NODESET); + List nodes = NodeListToArrayList(result); + return nodesToStrings(nodes); } catch (Exception e) { logger.error("select text error! " + xpathStr, e); } - return results; + return null; } - private Document parse(String text) throws ParserConfigurationException { + public Node selectNode(String text) { + try { + Document doc = parse(text); + return selectNode(doc); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + public Node selectNode(Node node) { + try { + return (Node) xPathExpression.evaluate(node, XPathConstants.NODE); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + public List selectNodes(String text) { + try { + Document doc = parse(text); + return selectNodes(doc); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + public List selectNodes(Node node) { + try { + NodeList result = (NodeList) xPathExpression.evaluate(node, XPathConstants.NODESET); + return NodeListToArrayList(result); + } catch (Exception e) { + logger.error("select text error! " + xpathStr, e); + } + return null; + } + + protected static Document parse(String text) throws ParserConfigurationException { // HtmlCleaner could not parse or tag directly text = BaseSelectorUtils.preParse(text); HtmlCleaner htmlCleaner = new HtmlCleaner(); TagNode tagNode = htmlCleaner.clean(text); return new DomSerializer(new CleanerProperties()).createDOM(tagNode); } + } diff --git a/webmagic-saxon/src/test/java/us/codecraft/webmagic/selector/XpathSelectorTest.java b/webmagic-saxon/src/test/java/us/codecraft/webmagic/selector/XpathSelectorTest.java index 8ac721934..4033fcfbd 100644 --- a/webmagic-saxon/src/test/java/us/codecraft/webmagic/selector/XpathSelectorTest.java +++ b/webmagic-saxon/src/test/java/us/codecraft/webmagic/selector/XpathSelectorTest.java @@ -11,12 +11,15 @@ import org.junit.Ignore; import org.junit.Test; +import org.w3c.dom.Node; import us.codecraft.webmagic.Page; import us.codecraft.webmagic.Spider; import us.codecraft.webmagic.processor.PageProcessor; import us.codecraft.xsoup.XPathEvaluator; import us.codecraft.xsoup.Xsoup; +import javax.xml.transform.TransformerException; + /** * @author code4crafter@gmail.com
Date: 13-4-21 Time: 上午10:06 */ @@ -1388,23 +1391,6 @@ public void testXpath2Selector() { Assert.assertEquals("http://www.oschina.net/", selectList.get(0)); } - @Ignore("test parse
tag") - @Test - public void htmlCleanerParseTest() { - Spider.create(new RuoxiaPageProcessor()).addUrl("http://www.ruoxia.com/top/dianji/month").thread(1).run(); - } - - class RuoxiaPageProcessor implements PageProcessor { - @Override - public void process(Page page) { - List items = new Xpath2Selector("//div[@class=\"bd\"]//tbody/tr").selectList(page.getRawText()); - for (String item : items) { - String name = new Xpath2Selector("//td[3]/div/a[1]/text()").select(item); - System.out.println(name); - } - } - } - @Ignore("take long time") @Test public void performanceTest() { @@ -1496,4 +1482,41 @@ public void parserPerformanceTest() throws XPatherException { } + /** + * New api test + * + * @author hooy + * @since 8.0 + */ + private String rank = "
日 周 月

点击榜

排名分类书名/最新章节作者推荐更新时间
1.现实
校园妖孽高手 第三十章 求你收我为徒
白色风帆
0
11-24 22:32
2.架空
凤谋图 写给最亲爱的你们（完结感言+新书推荐）
斑陆离
1047
03-04 14:44
3.现实
女神的全职高手 第五十一章 大结局。
白玉书生
0
07-20 09:06
4.豪门
闪婚夺爱：总裁老公太霸道 第140章 大结局
丛慕然
0
12-03 09:12
5.现实
最强神眼 第72章 没羞没臊（大结局）
枫长弦
0
02-01 21:12
6.玄奇
胎楼 写在最后的私话
丫丫雅雅
3455
02-28 12:31
7.玄奇
我的未婚夫白狐大人 【免费公告】新书《道士房东，快开门》已经发布了
佚之狐
20614
03-31 12:37
8.复仇
艳骨 番外（司浔）
e小调
55
06-03 11:43
9.穿越
王爷，别动粗 第041章 看来这个女人是在乎他的
春亦盎然
0
10-27 18:50
10.宫斗
深宫胭脂乱 【263】为夫来的，可还算及时 HE版，感谢小伙伴们大半年来的不离不弃！
糖小贩
320
10-31 13:58
11.宫斗
深宫安容传 番外4 韶华不负，生生世世 （有红包哟）
鱼墨
6268
07-12 20:23
12.现实
我们的爱，未完待续 第175章 番外：人生没有太晚的开始
丛慕然
0
01-18 23:00
13.婚恋
我在时光深处忘记你 新书已开
柯三岁
0
12-14 20:50
14.修真
女神总裁的妖孽兵王 第52章 好吃的？
包仙人
0
02-03 23:40
15.豪门
攻心为上：薄情总裁求放过 第21章：别让我讨厌你
七月晚笙
0
11-06 23:38
16.穿越
妙手萌妃 九十六
糖酱不甩
191
12-02 23:37
17.穿越
炮灰女配二嫁攻略 番外
烬相思
412
10-13 22:39
18.豪门
娇妻别逃 系列文开更了！
九竹
635
07-01 13:15
19.架空
妾惊华 番外 3 正式完结 鬼月篇
温柔的小白兔
144
06-18 09:35
20.宅斗
废妾青瑶 冷玉•世上堪哀只有痴 （不无聊依旧发着玩）
梦中说梦
1032
08-15 19:03
21.宫斗
帝女长乐 第一百六十三章大结局
梅花香雨
0
09-30 20:32
22.豪门
总裁在上，萌妻不乖 新文公告
丛慕然
0
06-05 11:31
23.重生
重生之只想好好爱你 第三百三十一章 明白心意
忘忧草
80
11-25 19:56
24.异世
末世之活下去 第一百一十四章　大结局之另种结局
清风随意
68
01-12 10:06
25.豪门
以婚试爱：总裁老公太过分 第二百章 温哥华的暖冬
乔慕燃
0
05-29 18:46
26.婚恋
顾瑾，我们要好好的 新书~婚不谈爱，总裁老公住隔壁
一朵66
2778
11-04 17:48
27.玄奇
吟尸调妃 作品最后
乔沫若轩
207
12-06 16:57
28.穿越
嫡女皇商 皇商开始修文
十七帝
260
01-04 23:26
29.豪门
豪门养女：总裁请息怒 第一百三十五章 最终番外
杨家小呆
0
12-07 21:39
30.架空
这盛世，如你所愿 【免费公告】完结感言+新书公告
南风知意
1127
06-06 17:28
31.穿越
江湖有晴天 第一二零章 阴谋叠加，尘埃落定（结局篇）
洛紫晴
113
09-13 09:06
32.架空
江山不若美人顾 番外：最终章
慕容以泽
597
02-14 18:47
33.玄奇
一碰冥婚 第一百三十九章 秦无极诡上身
二手玫瑰
528
06-04 22:04
34.穿越
侯门丑媳 第202章 大结局
东方怡然
328
06-06 22:09
35.架空
将本红妆 完结感言 我们新文见
故城阿九
539
05-24 14:42
36.架空
妃卿非故：世子，有事好商量 最后的一点小内容
白玉琼楼
0
03-05 23:27
37.穿越
美人潋滟 新文《爱有余温，触手可及》
冷在
3215
08-21 16:38
38.宫斗
后宫长梧传 160 大结局
嘟嘟爱吃鱼
905
08-04 20:24
39.玄奇
冥夫别过来 新文速递（我好慌）
陌妖
1328
07-25 10:58
40.穿越
公子好倾城 番外
颜箴言
203
01-27 20:53
41.宫斗
女相倾天下 第九十三章 大结局
睡梦之城
407
08-31 09:03
42.宅斗
庶辜 请假通知
君醉
16
05-03 17:38
43.豪门
隐婚蜜爱：首席老公别太坏 第138章 筱雅，我终于等到你了！
古月初雪
0
11-10 08:00
44.婚恋
予你爱情，还我光阴 第066章 结尾
美人折
0
07-12 21:37
45.架空
王妃，王爷又来拆墙了 有红包
梅花香雨
0
06-23 21:02
46.玄奇
爱上我的阴阳先生 完本感言
魑魅魁魃
1382
05-31 20:36
47.重生
嫡女重生 完结感言
小喵家的温婉
334
07-16 19:19
48.婚恋
亲爱的，我不等你了 嘿，还有宝贝在吗？
依人茶
505
11-01 16:42
49.婚恋
爱已过期：总裁前夫请放手 第一百六十七章 余生有你陪伴 全文完
忘忧草
0
10-19 18:32
50.豪门
你的甜蜜，触手不及 圆宝的完结感言
圆八宝
540
09-19 19:18
51.婚恋
江太太，恋爱已生效 江先生和江太太的恋城旧忆（三） 怀孕篇
呆小萌的包子
226
03-18 13:09
52.穿越
倾城不过未亡人 楚木萧萧 第一章
慕容以泽
1026
03-08 16:28
53.重生
重生女二嫁攻略 算是完结感言吧
十七帝
304
02-19 10:25
54.玄奇
冥婚难测 完结感言（有惊喜哦，戳进来看看）
鬼爹
2617
02-15 20:57
55.穿越
傻王贤妃 感言
汐凉
199
09-04 19:43
56.同人
清宫瑾妃传 第220章 此生唯你（大结局）
芳小苓
768
07-19 20:00
57.宅斗
庶女世子妃 第一六五章 完美结局
魑魅魁魃
0
02-13 18:13
58.豪门
我曾卑微爱过你 第96章 大结局
懒桔不懒
0
11-12 22:23
59.架空
妾倾天下 第162章 母仪天下（全书完）
璃璃
0
07-28 23:42
60.婚恋
纵使情深如故 【175】一言不合就完结
糖小贩
0
02-03 23:09
61.豪门
爱你，可念不可说 完结感言
鬼爹
285
01-07 19:21
62.重生
美人皮，噬骨香 【完结感言】
涣茶
654
10-12 18:16
63.异能
末世之拐个系统做男神 以后的日子 番外二
TK。优酱
617
06-18 20:23
64.宫斗
笑嫁江山 第三百一十五章 伤怀
与文
27
06-02 21:05
65.种田
重生之带着装备去种田 第一百三十五章 大结局
灵山小道士
206
08-31 19:23
66.宅斗
恶毒女配的悠然生活 第240章 下辈子你还是我的妻(完)
翦语
2444
08-19 15:51
67.宅斗
一品皇妻 第158章 大结局
七月白椿
818
08-07 23:38
68.现代
龙拳 第一千八百七十章 大结局！ （六千字大章）
0
12-23 17:02
69.玄奇
民调局异闻录之勉传 第四百一十七章 归宿
0
07-23 12:00
70.婚恋
原来爱你那么伤 嘿，还有宝贝在吗？
依人茶
0
11-01 16:43
71.豪门
情深如许：霸道总裁我不约 谢谢大家，新书求收藏
余无晴
0
09-12 00:01
72.架空
戾妃倾城 番外1 几经辗转，故人坟草三尺高
凌家女孩
0
04-27 22:42
73.豪门
婚久情深：闪婚娇妻深深爱 第二十二章 大结局（完）
杨家小呆
0
04-19 13:55
74.异能
末世重生之女配归来 第98章
慕晓玥
62
07-30 00:00
75.穿越
皇帝你被征用了 新书准备ing
乔沫若轩
1307
07-20 16:41
76.玄奇
道士房东，快开门 第六百七十章 姓什么
佚之狐
12820
07-15 23:46
77.架空
欠你一世长安 【免费公告】新书《如果爱情看得见》求支持
南风知意
828
06-06 17:54
78.宅斗
鬓云香腮雪 番外 倾心。（秦相宜&太子）
萌七妹
985
05-20 23:53
79.玄奇
一纸冥婚 关于番外+新书
二手玫瑰
4960
04-12 15:58
80.玄奇
阴夫驾到 第一六零话 最后的决战（结局篇）
洛紫晴
245
03-02 23:11
81.宅斗
美人鬓 完本公告
与文
34
12-21 10:11
82.宅斗
妻居一品 第259章 墩仔和淼淼（四）【大结局】
沙提子
1411
07-21 00:00
83.现代
女总裁的超级高手 第3609章、这样挺好！（大结局下）
0
07-31 10:10
84.玄奇
活见诡 第三十六章 威风凌凌
一骑妃子笑
0
06-18 13:53
85.架空
压寨夫君请上轿 103 我说了，我已经嫁过人了 大结局
唯水眠心
0
12-03 23:41
86.玄奇
九命 第045章 柳家的秘密
渴雨
0
11-28 22:13
87.豪门
暖婚契约：腹黑总裁的呆萌妻 【118】大结局
落小妹
0
11-07 22:48
88.婚恋
眷你如火如荼 【终章】、经年后，道一句好久不见
粟越
0
08-29 23:15
89.种田
女儿香满田 新文《爱有余温，触手可及》
冷在
1831
08-21 16:38
90.豪门
千万婚约：求你放了我！ 【112】
纳兰一梦
0
07-11 21:25
91.豪门
虐爱成殇：冷傲总裁太绝情 第138章 小玥，我爱你，你愿意嫁给我吗？
古月初雪
0
06-13 15:37
92.豪门
总裁的替身小萌妻 178·尾声
沈乔
0
05-07 22:10
93.豪门
早安，小甜妻 第71章：大结局（完）
星辉熠熠
0
02-28 00:01
94.豪门
娇妻休逃 第326章 我带你飞（大结局）
九竹
304
12-16 07:30
95.婚恋
宋先生，我的爱情已过期 完结感言+新书速递《给我一场盛宴，纪念你离开》
流年mengo
669
11-07 18:16
96.仙侠
神君快到碗里来 110.最美是回忆
柒月绯然
54
09-25 19:51
97.豪门
我爱你，与你无关 大结局
南有木木
655
08-31 13:02
98.现实
你与时光皆薄凉 完结感言
七寸南季
374
06-29 09:55
99.穿越
夫君，你别跑 完结了，完结了
依人茶
373
06-19 18:07
100.婚恋
彼年豆蔻，白首不离 第一百四十二章大结局
梅花香雨
159
06-04 21:05
排行榜
"; + + @Test + public void testStringAPI() { + // testAPI: selectList(String) -> selectList(Node) + List items = new Xpath2Selector("//div[@class=\"bd\"]//tbody/tr").selectList(rank); + Assert.assertSame(100, items.size()); + // testAPI: select(String) -> select(Node) + String name = new Xpath2Selector("//td[3]/div/a[1]/text()").select(items.get(10)); + Assert.assertEquals("深宫安容传", name); + } + + @Test + public void testNodeAPI() { + // testAPI: selectNodes(String) -> selectNodes(Node) + List items = new Xpath2Selector("//div[@class=\"bd\"]//tbody/tr").selectNodes(rank); + Assert.assertSame(100, items.size()); + // testAPI: selectNode(Node) + Node item = new Xpath2Selector("./td[3]/div/a[1]").selectNode(items.get(10)); + String name = new Xpath2Selector("./text()").select(item); + Assert.assertEquals("深宫安容传", name); + } + + @Test + public void testUtilAPI() throws TransformerException { + Node item = Xpath2Selector.newInstance("//div[@class=\"bd\"]//tbody/tr[11]/td[3]/div/a[1]/text()").selectNode(rank); + // testAPI: nodeToString(Node) -> nodesToStrings(List) + String name = JaxpSelectorUtils.nodeToString(item); + Assert.assertEquals("深宫安容传", name); + } + }