从网页抓取数据(从网页抓取数据当然可以,你得有网站吗?)

优采云 发布时间: 2021-10-03 23:06

  从网页抓取数据(从网页抓取数据当然可以,你得有网站吗?)

  从网页抓取数据当然可以,只要你是正常做网站就可以去抓取数据,但是有一点前提:你得有网站。

  网站的判定标准已经有很多人在做了,这里不再赘述。抓取数据就简单了,使用webscraper就可以。

  可以的。我自己在做的云享客的数据库。可以免费试用。价格也不贵。

  可以的呀,

  可以试试这个,foliojson,快速采集数据,

  可以sql采集,但是存储,索引方面的问题就不要用sql写了,没必要弄那么复杂,这个模板目前在优化中,想尽快上线的话还可以考虑先发布这个程序,可以参考一下,很适合这种小型网站~你试试吧~用户量不大,数据类型不复杂,

  bootstrap可以支持这个功能,但是要注意加载时间,

  3、4秒的样子,而且并发可能没有,一般数据库有多个,这个建议后期根据实际情况做后台服务器配置。

  php和sql都没问题,

  1、数据格式要跟官方的一致,如果是json、blob就需要参考官方的文档要求,不然容易报错。

  2、收集字段要大,要不然收集后数据库的查询会很慢很慢,测试效果是好还是坏?再查一次。

  我在做wordpress的那个引擎userdata-wordpress/

  可以有的,不过用别人写好的比较好,可以看看我们开源的yii引擎,

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线