zxwbbs
2014-05-25 23:06:31 1 举报
zxbbs采集流程
作者其他创作
大纲/内容
打开公司介绍页面解析公司介绍页面1:遍历查找g_list_zxgongsi 更新公司介绍2:更新该公司属性到数据库中
C:公司介绍页面
zxgongsi
多线程分发创建
打开设计师主页面 并解析 1:设计师属性保存更新到g_list_shejishi中2:设计师属性保存更新到数据库[shejishi]表中
list设计师页面
遍历g_list_shejishi 通过shejishi::gongsiurl属性
打开公司属性页解析公司属性 1:公司属性保存更新到g_list_zxgongsi中2:公司属性保存更新到数据库[zxgongsi]中2:传参(公司介绍页面url)创建线程
装修公司::公司介绍需要再提取
shejishi
1:其实页码2:终止页码3:线程总数
开始采集
打开设计师list页面并解析 将解析结果保存到g_list_shejishi中
公司介绍页面
设计师页面
A:设计师页面
B:公司主页面
公司页面
收藏
收藏
0 条评论
下一页
为你推荐
查看更多
抱歉,暂无相关内容