自定义引擎添加案例-alibaba 2016/10/13

第一步。分析关键词页面

首先我们打开 alibaba ,在上面搜索一下。搜索时注意选择 SUPPLIERS,用您需要的关键词搜索一下。

然后alibaba就会列出跟关键词相关的 公司页面。我们拉到最下面,发现它这里最多只显示90页。

 我们翻几页看看,翻页是留意网址的变化。 翻到第二页时我们发现网址变化了。

连续发几页,观察网址,我们很明显就可以看出它的变化。

http://www.alibaba.com/corporations/led/2.html

http://www.alibaba.com/corporations/led/3.html

http://www.alibaba.com/corporations/led/4.html

http://www.alibaba.com/corporations/led/5.html

.

.

.

.

http://www.alibaba.com/corporations/led/90.html

知道它的规律 就可以用软件 快速地列出来。

新建引擎,点生产连续网址。相应地填上数值。按开始生成,再按确定。

这样我们就得到了刚才跟LED相关的90个页面了。

第二步,分析公司页面,写正则表达式。

软件是通过链接来打开这些页面,再搜索他们有用的信息的。那么那些链接才是我们需要的呢,这时候就需要通过一个“正则表达式”来告诉软件了

打开上面90个页面中的随便一页。
http://www.alibaba.com/corporations/led/1.html每一页里面都有很多做LED的公司。


很明显我们需要的就是这些 公司页面,因为这些公司页面里面有我们需要的信息。而且可以直接打开这个些公司有联系信息的页面。


 

我点开上面这两家公司的“ 从里面可以看到我们需要的信息,网址或者邮箱、


多打开几个公司页面,同样观察网址的规律。

http://xuhuilighting.en.alibaba.com/contactinfo.html

http://loyallighting.en.alibaba.com/contactinfo.html

http://loyallight.en.alibaba.com/contactinfo.html

http://en-light.en.alibaba.com/contactinfo.html

很明显不变的部分是http://             .en.alibaba.com/contactinfo.html 中间是每家公司都不同的。变化的部分就用变量 [\?&;=\#._a-zA-Z\d-]* 代替。所以正则表达式就是(表达式用小括号括着)

(http://[\?&;=\#._a-zA-Z\d-]*.en.alibaba.com/contactinfo.html)

 这个意思就是 http://www.alibaba.com/corporations/led/1.html http://www.alibaba.com/corporations/led/90.html  90个页面中,符合前面是http://  后面是.en.alibaba.com/contactinfo.html ,中间变化的链接 都抓取下来。 因为这些从上面的分析可以判断,这些链接里面有我们需要的信息。

点击测试。软件会测试第一个页面http://www.alibaba.com/corporations/led/1.html

成功搜索到38个公司的联系页面。

第三步、采集信息。

  接下来就是从这些公司页面上或者我们需要的邮箱、网站。

 

点击要采集的项目,因为上面只有公司网站,所以就勾选网址。

按确定保存。



联系我们

广州智尔信息科技有限公司

公司地址:广州市番禺区巨大创意产业园15栋A座316

深圳分公司:深圳市横岗街道深竹路2号润联大厦306

台灣分公司:台中市北區崇德路一段579號7樓之3

传真FAX:020-34720415

QQ号码:2205444444

授权经销商查询:020-84848480转8002

客服热线

全国热线

4008-771-221

广州热线

020-84848480

020-22920064

020-87981006

020-28969545

020-29132257

020-29181323

深圳热线

0755-36300750

0755-28307469

0755-32801027

台湾热线

+886 04-22993075

+886 0933-432495

关注我们

公众号

已为您自动分配客服,请您点击在线客服咨询×  

业务咨询
QQ咨询 QQ咨询
QQ咨询 QQ咨询
QQ咨询 QQ咨询
QQ咨询 QQ咨询
电话咨询
4008-771-221(全国免长途费)
020-28969545      020-22920064
020-29132257      020-29132259
0755-36300750  0755-32801027
售后客服
QQ客服 售后专线 020-84848480(分机)
渠道合作
QQ洽谈 渠道专线 4008-771-221