03 | HTTP世界全览（上）：与HTTP相关的各种概念
网络世界
请订阅文章所属专栏。
精选留言(50)
小美1. CDN 应当是不区分的，因为爬虫本身也是对 Web 资源的访问，且对于爬虫识别并不是 100% 准确的，因此 CDN 只会去计算实际使用了多少资源而不管其中多少来自爬虫；
2. 个人理解，Web Service 是网络服务实体，而 Web Server 是网络服务器，后者的存在是为了承载前者。作者回复: √
2019-06-05 12
飒～老师 ，暗网是如何规避搜索引擎的爬虫的，它又是怎么被人访问的呢作者回复: 这个问题比较高端，有其他知道的同学吗？
2019-06-12 10
Amark老师，能不能通俗地讲讲RPC, SOAP, restful，之间的区别作者回复: 这个话题比较大。rpc就是把网络通信封装成了函数调用的形式，所以叫rpc。soap是web service的消息格式。RESTful是一种web服务接口的设计理念。
这三章都是与应用服务有关，但领域不同。2019-06-03 8
耿斌1. CDN可以根据User-Agent来判断发起请求的一端是浏览器还是爬虫，对待爬虫可以特殊处理返回特定内容
2. WebService是基于Web（HTTP）的服务器架构技术，基于HTTP协议传输xml或soap数据。WebServer分硬件和软件，硬件指服务器、云之类，软件如Nginx、Apache等作者回复: √
2019-06-06 2 4
patsun1.CDN在对待浏览器和爬虫时没有差异，因为如果没有验证码或者其他验证方式区分的话，浏览器和爬虫都被视为User Agent（客户代理）
2.Webservice是服务，Web Server是服务器作者回复: ✅
2019-06-03 4
不靠谱～1.不是太清楚，个人认为不会区别对待，因为在正常程序应用来说，看不出是谁发起的请求。
2.web server是软件服务器，承载应用。
web service是一种服务方式。作者回复: √
2019-06-03 3
Vickey Cheung老师，web服务器和web容器区别是什么呢？作者回复: web服务器主要提供静态资源，而web容器可以运行Java、php等程序提供动态服务。
2019-09-09 2
壹笙☞漂泊1、应该不会有差异，因为爬虫主要就是无限模仿浏览器行为
2、Web Server 是服务器，Web Service 是一种应用服务开发规范作者回复: √
2019-06-03 2
-W.LI-第一个有差别，因为有烦爬虫技术
第二个:web server 。web服务提供者，web服务器。web应用程序。 web service。。。。不知道了作者回复: 这个具体还要看cdn的策略，如果配置了反爬虫就会区别对待。
2019-06-03 1 2
永钱老师把tomcat放在web服务器中比较，说速度慢，不公平呀作者回复: 抱歉啦，的确，tomcat应该是web容器。
2019-06-03 2
redrain有些网站全新上线的，没有外链，也没特意提交过，为什么也会有爬虫经过呢，入口在哪里作者回复: 这可能是从dns域名服务商那里获取了你的网站。
2019-06-03 2
Berry He第一个不太清楚，不敢妄加评论。
第二个:web server和web service是两个概念，前者是web服务器，像iis apache nginx这种。web service他只是一个或多个提供web请求响应的api，用来获取或提交更新web server资源的作者回复: 最后一句话不太准确，web service是应用服务，它的客户端不一定是web service。
2019-06-03 2
刘志兵老师，服务器只有这么少的几个吗，有一些grpc 服务算服务器吗，finagle, grpc等，还有spring不是也可以提供服务吗作者回复: 里面说的特指的是“Web服务器”，也就是说专门提供http服务的服务器软件。
其他的像tomcat、netty等虽然也有http服务，但不是专门做这个的，http只是“副业”，功能远不如专业的Apache、Nginx强大。
grpc属于服务开发框架，用的是基于http/2的grpc协议。2019-08-02 1
鸟人你觉得 CDN 在对待浏览器和爬虫时会有差异吗？为什么？
不管是否反爬虫 应该都没区别 爬虫本质不就是模拟浏览器么作者回复: 最后一句话不太准确，爬虫应该是user agent的一种，不一定非要模拟浏览器。
2019-06-04 1
lfn不是很理解web server和web service的区别。难道我们的服务不用nginx就不能用了么？我自己写个tcp server, 根据用户请求调用特定的handler返回数据，那我自己就是个server啊，也是service.老师能不能更清晰地定义下server.习惯了tcp编程的概念，这里的server就显得怪怪的，给人一种router的感觉.作者回复: 这里首先要理解web，web就是指的http。web server就是提供http服务的server、web service就是运行在http协议上的服务接口规范。
自己写的是tcp server，就不是web server。
service通常是指服务程序，跑在server上，server可以理解成容器、平台。2019-06-04 1
磊爷1.正常情况下没有差异，客户端访问服务器，cdn加速缓存。
2.websevice是一种服务，提供相应的内容。
Web sever是服务器，可获得内容不受限。作者回复: 多补充一点，web server只能用http协议（因为是web），而websevice的接口就不固定了，有很多种。
2019-06-03 1
古夜tomcat不也是阿帕奇的吗？啥时候变成JAVA的了作者回复: tomcat属于Apache基金会，用于Java开发，这里说的Apache是web服务器，可能我说的不清楚，让你误解了。
2019-06-03 1
nora1.CDN在对待浏览器和爬虫时没有差异，因为如果没有验证码或者其他验证方式区分的话，浏览器和爬虫都被视为User Agent
2.Webservice是服务，Web Server是服务器，Web Server 用于承载 Web Service作者回复: good。
2019-11-06
蓝配鸡你觉得 CDN 在对待浏览器和爬虫时会有差异吗？为什么？
会， 因为CDN作为缓存，其存下来的信息都是爬虫产生的话，无疑会对真是用户的相应时间产生影响。
你怎么理解 WebService 与 Web Server 这两个非常相似的词？
web service更像是一种用于Web开发的协议
web Server则是HTTP协议响应端的一个统称。作者回复:
1.cdn的处理方式各不一样，如果爬虫严重占用了cdn的资源，影响了cdn的用户，就会阻止爬虫。
大多数爬虫不会做的特别过分，所以cdn也就会“放行”。
2.基本正确，Web Service是一种开发协议， Web Server特指提供http服务的应用软件，如Apache、Nginx。2019-10-28
qiezitx1、CDN不做区分。但可不可以在CDN做区分呢？不清楚，做了有什么好处呢？应该没有😂
2、WebService是一种架构设计，Web server是Web服务器，有了Web服务器之后，我们可以准守WebService设计来提供服务。作者回复:
1.通常cdn是不区分爬虫的，但因为cdn本质上也是web服务，所以要加这个功能也没有问题的，例如应源站的要求反爬虫。
2.对。2019-09-23