首页 >常见问题 > 正文

爬虫只能用python写吗

原创2019-06-14 17:31:550934
第八期线上培训班
爬虫不仅仅可以用python写,很多语言都可以实现爬虫。例C,C++、C#、Perl、 Python、Java、 Ruby都可以写爬虫,原理其实相差不大,只不过是平台问题。

什么是网络爬虫?

网络爬虫是一个自动提取网页的程序,它为搜索引擎从万维网上下载网页,是搜索引擎的重要组成。传统爬虫从一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件

爬虫有什么用?

• 做为通用搜索引擎网页收集器。(google,baidu)

• 做垂直搜索引擎.

• 科学研究:在线人类行为,在线社群演化,人类动力学研究,计量社会学,复杂网络,数据挖掘,等领域的实证研究都需要大量数据,网络爬虫是收集相关数据的利器。

• 网页搜集

• 建立索引

• 查询排序

什么语言写爬虫?

C,C++。高效率,快速,适合通用搜索引擎做全网爬取。缺点,开发慢,写起来又臭又长。

脚本语言:Perl, Python, Java, Ruby。简单,易学,良好的文本处理能方便网页内容的细致提取,但效率往往不高,适合对少量网站的聚焦爬取。

以上就是爬虫只能用python写吗的详细内容,更多请关注php中文网其它相关文章!

php中文网最新课程二维码
  • 相关标签:爬虫 python
  • 本文原创发布php中文网,转载请注明出处,感谢您的尊重!
  • 相关文章

    相关视频


    网友评论

    文明上网理性发言,请遵守 新闻评论服务协议

    我要评论
  • 专题推荐

    作者信息

    青灯夜游

    今天学习一小步,明天提升一大步

    最近文章
    phpstudy如何安装mongodb的扩展?884
    phpstudy如何配置虚拟域名?809
    nginx反向代理是什么意思1088
    推荐视频教程
  • Python实战爬虫视频教程Python实战爬虫视频教程
  • Python Scrapy 网络爬虫实战视频教程Python Scrapy 网络爬虫实战视频教程
  • 三天学会PHP爬虫视频教程三天学会PHP爬虫视频教程
  • 视频教程分类
    第八期线上培训班