当前位置:  技术问答>linux和unix

udp方式抓取网页

    来源: 互联网  发布时间:2016-08-24

    本文导语:  不知道大家有多少是做搜索引擎的,我在搜索引擎 的书上看到说用UDP抓网页很快——通常都是用TCP嘛,我当时也些了个UDP方式的,根本不能运行,还有个问题就是我一个网页的源文件可能非常大,也就是一次UDP数据...

不知道大家有多少是做搜索引擎的,我在搜索引擎 的书上看到说用UDP抓网页很快——通常都是用TCP嘛,我当时也些了个UDP方式的,根本不能运行,还有个问题就是我一个网页的源文件可能非常大,也就是一次UDP数据包可能不能发送完,我就用while循环读取每个数据包,我如何判断该数据包是第一个还是第二个数据包呢——UDP数据包的发送时无序的嘛对吧?
 请大家指教了,我知道每次接收UDP数据包 可以用recvfrom中的 参数获得 数据来源于哪个IP 但是没法确定该数据是在该网页中的顺序啊——我这个数据包是网页的开头数据呢,还是中间数据呢?

TCP就没有这样的问题嘛,因为TCP是保证次序的嘛,请教咯

|
http 协议都是基于tcp的,你用udp,牛!

|
google,一下应该,可以解决吧!!!

    
 
 
 
本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • Qt:UDP:如何划分接收到的UDP包的界限
  • udp包大于1500字节网络传输会分包吗?udp tcp多大的包比较合适?
  • http走的是tcp还是udp?ssh是tcp还是udp?
  • tcp和udp套接字有何不同?在什么情况下用tcp什么情况下用udp????
  • 50求教一个菜鸟级别的UDP套接字问题,关于UDP server端只能接收一次数据的问题?在线等,一直等............
  • python网络编程之UDP通信实例(含服务器端、客户端、UDP广播例子)
  • udp socket客户端和udp服务端程序示例分享
  • TCP与UDP通信问题!
  • 请问下怎么关闭SUSE 9.1下UDP的checksum?
  • 如何判断udp端口可达
  • 关于epoll&udp的问题?
  • UDP包怎么生成啊?用什么函数??简单问题,帮个忙哈
  • 对于socket UDP传输,一个端口只能被一个进程绑定?
  • IP,UDP,TCP的校验和计算
  • UDP协议在实现时有没有在发送端或者接收端设置缓冲区?
  • 基于UDP的数据传输 UDT
  • 服务进程收到的第一个UDP包的远端地址不对?
  • udp问题
  • 关于udp sendto时候端口选定问题
  • jme 0000:07:00.5:eht0:udp checksum error


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3