飞飞侠官方论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 1097|回复: 2

[功能优化建议] SEO优化方面还以及几个采集程序问题

[复制链接]

签到天数: 30 天

[LV.5]常住居民I

1

主题

37

帖子

336

积分

飞飞侠付费用户

Rank: 12Rank: 12Rank: 12

积分
336
发表于 2016-8-18 15:49:46 | 显示全部楼层 |阅读模式

马上注册加入飞飞侠论坛,轻松做淘客!

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
本帖最后由 天浩 于 2016-8-18 15:53 编辑

第一个问题我用站长工具模拟了一下蜘蛛抓取网站发现抓取到最后全是 加入收藏 重复了无数次。
第二个问题我用站长工具检测一下死链,这个工具会抓取你网站的所有链接然后进行检测是不是有死链接,我网站采集了几千文章,几千商品但是只能检测到120个链接这个问题看一下是那出来问题
第三个网站后台采集器老是出错,采集不完整一刷新又要从新采集,文章采集也希望更新一下好多都不可以用了 第四个还有很多图片链接是动态的
有问题,多用论坛搜索功能;搜索的关键词尽量简洁,尽量不要用长语句搜索

签到天数: 1247 天

[LV.10]以坛为家III

726

主题

3179

帖子

1万

积分

管理员

Rank: 16

积分
13870

最佳新人活跃会员热心会员推广达人宣传达人灌水之王突出贡献论坛元老

发表于 2016-8-18 16:17:55 | 显示全部楼层
那么多【加入收藏】的解决方法:找到  Core/Index/View/default/Public/item.php
搜索 【加入收藏】 然后整体删除     title="加入收藏"



死链检测:
http://tool.chinaz.com/Links/?DA ... orstate=&lall=0
这个所谓的死链检测 原理是:抓取你检查页面的 所有 链接 然后进行访问 如果返回响应代码是:200 则正常
这也就是为啥你采集几千商品 他怎么只检测到 120个的原因
我演示站还有 20w的关键词呢,他没有那个能力去检测到

后台的商品采集:
我不在建议使用后台的商品采集功能,今后也不会在维护后台的商品采集 如果想进行商品采集 请使用桌面版采集器

文章采集:
这个正在优化,今天测试采集一天了,然后在看看有什么隐藏的错误导致采集终止,另外如果意外终止 也不用再重新采集 (马上更新)



有问题,多用论坛搜索功能;搜索的关键词尽量简洁,尽量不要用长语句搜索

签到天数: 286 天

[LV.8]以坛为家I

22

主题

400

帖子

2437

积分

高级淘客

Rank: 4

积分
2437
发表于 2016-8-18 16:03:29 | 显示全部楼层
http://s.tool.chinaz.com/tools/robot.aspx  蜘蛛模拟地址


本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|小黑屋|手机版|Archiver|飞飞侠官方论坛 ( 京ICP备14034159号-4 )

GMT+8, 2024-4-20 10:26 , Processed in 0.101734 second(s), 15 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表