2023年6月29日发(作者：)

c#和python更适合爬⾍_python和php哪个更适合写爬⾍python和PHP相⽐较，python适合做爬⾍。原因如下抓取⽹站本⾝的接⼝相⽐与其他静态编程语⾔，如java，c#，C++，python抓取⽹站⽂档的接⼝更简洁；相⽐其他动态脚本语⾔，如perl，shell，python的urllib2包提供了较为完美的访问⽹站⽂档的API。(当然ruby也是很好的选择)此外，抓取⽹站有时候需要模拟浏览器的⾏为，很多⽹址对于⽣硬的爬⾍抓取都是封杀的。这是我们需要模拟user agent的⾏为构造合适的请求，譬如模拟⽤户登录、模拟session/cookie的存储和设置。在python⾥都有⾮常优秀的第三⽅包帮你搞定，如Requests，mechanize⽹站抓取后的处理抓取的⽹站通常需要处理，⽐如过滤html标签，提取⽂本等。python的beautifulsoap提供了简洁的⽂档处理功能，能⽤极短的代码完成⼤部分⽂档的处理。其实以上功能很多语⾔和⼯具都能做，但是⽤python能够⼲得最快，最⼲净。Life is short， u need ⽤在linux上很强⼤，语⾔挺简单的。NO.1 快速开发(唯⼀能和python⽐开发效率的语⾔只有rudy)语⾔简洁，没那么多技巧，所以读起来很清楚容易。NO.2跨系统(由于python的开源，他⽐java更能体现”⼀次编写到处运⾏”NO.3解释性( ⽆须编译，直接运⾏／调试代码)NO.4构架选择太多(GUI构架⽅⾯ 主要的就有 wxPython, tkInter, PyGtk, PyQt 。PHP 脚本主要⽤于以下三个领域：版本脚本。这是 PHP 最传统，也是最主要的⽬标领域。开展这项⼯作需要具备以下三点：PHP 解析器(CGI 或者服务器模块)、web服务器和 web 浏览器。需要在运⾏ web 服务器时，安装并配置 PHP，然后，可以⽤ web 浏览器来访问 PHP 程序的输出，即浏览服务端的 PHP ⽹页。如果只是实验 PHP 编程，所有的这些都可以运⾏在⾃⼰家⾥的电脑中。请查阅安装⼀章以获取更多信息。命令⾏脚本。可以编写⼀段 PHP 脚本，并且不需要任何服务器或者浏览器来运⾏它。通过这种⽅式，仅仅只需要 PHP 解析器来执⾏。这种⽤法对于依赖 cron(Unix 或者 Linux 环境)或者 Task Scheduler(Windows 环境)的⽇常运⾏的脚本来说是理想的选择。这些脚本也可以⽤来处理简单的⽂本。请参阅 PHP 的命令⾏项⽬以获取更多信息。编写桌⾯应⽤程序。对于有着图形界⾯的桌⾯应⽤程序来说，PHP 或许不是⼀种最好的语⾔，但是如果⽤户⾮常精通 PHP，并且希望在客户端应⽤程序中使⽤ PHP 的⼀些⾼级特性，可以利⽤ PHP-GTK 来编写这些程序。⽤这种⽅法，还可以编写跨系统的应⽤程序。PHP-GTK 是 PHP 的⼀个扩展，在通常发布的 PHP 包中并不共含它。⽹友观点扩展：我⽤ PHP Python 写过抓取脚本，简单谈⼀下吧。⾸先PHP。先说优势：⽹上抓取和解析html的框架⼀抓⼀⼤把，种种⼯具直接拿来⽤就⾏了，⽐较省⼼。缺点：⾸先速度/效率很成问题，有⼀次下载电影海报的时候，由于是crontab定期执⾏，也没做完善，开的php进程太多，直接把内存撑爆了。然后语法⽅⾯也很拖沓，种种关键字 符号 太多，不够简洁，给⼈⼀种没有认真设计过的感觉，写起来很⿇烦。。好处是效率、效率还是效率，由于⽹络是异步的，所以基本如同⼏百个进程并发⼀样强⼤，内存和CPU占⽤⾮常⼩，如果没有对抓取来的数据进⾏复杂的运算加⼯，那么系统的瓶颈基本就在带宽和写⼊MySQL等数据库的I/O速度。当然，好处的反⾯也是缺点，异步⽹络代表你需要callback，这时候如果业务需求是线性了，⽐如必须等待上⼀个⽹页抓取完成后，拿到数据，才能进⾏下⼀个⽹页的抓取，甚⾄多层的依赖关系，那就会出现可怕的多层callback！基本这时候，代码结构和逻辑就会⼀团乱⿇。当然可以⽤Step等流程控制⼯具解决这些问题。最后说Python。如果你对效率没有极端的要求，那么推荐⽤Python！⾸先，Python的语法很简洁，同样的语句，可以少敲很多次键盘。然后，Python⾮常适合做数据的处理，⽐如函数参数的打包解包，列表解析，矩阵处理，⾮常⽅便。到此这篇关于python和php哪个更适合写爬⾍的⽂章就简介到这了,更多相关php和python哪个适合做爬⾍内容请搜索乐购源码以前的⽂章或继续浏览下⾯的相关⽂章希望⼤家以后多多⽀持乐购源码！