Fri, 29 Aug 2008 21:12:00 GMThttp://blog.csdn.net/bigtang5/http://blog.csdn.net/bigtang5/archive/2008/08/29/2850366.aspxhttp://blog.csdn.net/bigtang5/comments/2850366.aspx2http://blog.csdn.net/bigtang5/comments/commentRss/2850366.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=2850366网页出来慢当然是服务器速度慢，但有的网页 调用了多个服务器的内容，想知道具体是哪项内容，例如是那个图片，还是网页的统计，影响了网页的速度？ 糖果浏览器有一项功能是能显示 浏览器下载网页的全HTTP协议过程（查看菜单 | 网页内部元素查看器 | 查看HTTP通信过程），可以清楚的看到下载一个图片，htm, js到底用了多少时间，例如 CSDN就是很慢的，我们来看看到底慢在什么地方？ CSDN首页的 HTTP协议过程 如下：<img src ="http://blog.csdn.net/bigtang5/aggbug/2850366.aspx" width = "1" height = "1" />Sat, 30 Aug 2008 05:12:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2008/08/29/2850366.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2008/08/29/2850366.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2008/08/29/2850366.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265579/1296236http://blog.csdn.net/bigtang5/archive/2007/09/18/1789396.aspxhttp://blog.csdn.net/bigtang5/comments/1789396.aspx18http://blog.csdn.net/bigtang5/comments/commentRss/1789396.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=1789396随着网络的迅速发展，万维网成为大量信息的载体，如何有效地提取并利用这些信息成为一个巨大的挑战。搜索引擎(Search Engine)，例如传统的通用搜索引擎AltaVista，百度,Yahoo!和Google等，作为一个辅助人们检索信息的工具成为用户访问万维网的入口和指南。 网络爬虫是一个自动提取网页的程序（网络蜘蛛），它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成。传统爬虫从一个或若干初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件.<img src ="http://blog.csdn.net/bigtang5/aggbug/1789396.aspx" width = "1" height = "1" />Tue, 18 Sep 2007 20:20:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2007/09/18/1789396.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2007/09/18/1789396.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2007/09/18/1789396.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265581/1296236http://blog.csdn.net/bigtang5/archive/2007/09/13/1783073.aspxhttp://blog.csdn.net/bigtang5/comments/1783073.aspx9http://blog.csdn.net/bigtang5/comments/commentRss/1783073.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=1783073中文VC8的程序员可能会常常看见这个warning: warning C4819: 该文件包含不能在当前代码页(936)中表示的字符。请将该文件保存为 Unicode 格式以防止数据丢失. 这个警告没有什么坏影响，但会影响心情：） 所以还是要治理一下： 哪个文件出现这个警告错误，打开它， 用VS2005的查找替换功能，打开允许正则表达式选项，选择当前窗口，查找替换 \n 为 \n , 然后，这个世界就清净了。 <img src ="http://blog.csdn.net/bigtang5/aggbug/1783073.aspx" width = "1" height = "1" />Thu, 13 Sep 2007 15:32:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2007/09/13/1783073.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2007/09/13/1783073.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2007/09/13/1783073.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265582/1296236http://blog.csdn.net/bigtang5/archive/2007/08/29/1763529.aspxhttp://blog.csdn.net/bigtang5/comments/1763529.aspx1http://blog.csdn.net/bigtang5/comments/commentRss/1763529.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=1763529CSocket 是一个同步的socket类，如“接收”(Receive)、“发送”(Send) 和“连接”(Connect) 均是阻塞操作，即要等到操作成功执行完毕或套接字上出现错误后，对这些函数的调用才有返回结果。如果连接不上，只有超时以后才能返回。 在某些情况下，操作可能永远不能成功完成，这将导致程序无限循环等待操作完成。例如错误的域名解释，连接不上的IP地址，这回让用户等待近 40秒钟的时间（可能是默认的超时时间），而且等待期间，程序将会"假死", 如果这种情况频繁出现，软件就无法使用了。<img src ="http://blog.csdn.net/bigtang5/aggbug/1763529.aspx" width = "1" height = "1" />Wed, 29 Aug 2007 20:17:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2007/08/29/1763529.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2007/08/29/1763529.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2007/08/29/1763529.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265583/1296236http://blog.csdn.net/bigtang5/archive/2007/08/24/1757676.aspxhttp://blog.csdn.net/bigtang5/comments/1757676.aspx3http://blog.csdn.net/bigtang5/comments/commentRss/1757676.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=1757676由于目前HTTP应用最广泛，因为http代理的实现也是最重要的。http代理又有两种认证方式： Proxy Basic认证和Proxy NTLM认证。<img src ="http://blog.csdn.net/bigtang5/aggbug/1757676.aspx" width = "1" height = "1" />Sat, 25 Aug 2007 00:03:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2007/08/24/1757676.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2007/08/24/1757676.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2007/08/24/1757676.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265584/1296236http://blog.csdn.net/bigtang5/archive/2007/08/24/1757624.aspxhttp://blog.csdn.net/bigtang5/comments/1757624.aspx4http://blog.csdn.net/bigtang5/comments/commentRss/1757624.aspxhttp://tb.blog.csdn.net/TrackBack.aspx?PostId=1757624SOCKET 编程的难点就在于 它一定是与多线程接合在一起的， 由于网络是一种延时很大地外部设备，与网络打交道处处要使用多线程。SOCKET的原理也不难理解，但要做出好产品，要点就是不要有时延性。<img src ="http://blog.csdn.net/bigtang5/aggbug/1757624.aspx" width = "1" height = "1" />Fri, 24 Aug 2007 23:35:00 +0800bigtang5http://blog.csdn.net/bigtang5/archive/2007/08/24/1757624.aspx#Feedbackhttp://blog.csdn.net/bigtang5/archive/2007/08/24/1757624.aspxbigtang5http://blog.csdn.net/bigtang5/archive/2007/08/24/1757624.aspxhttp://blog.csdn.net/bigtang5/rss.aspxcsdn.net/bigtang5/~1293407/206265585/1296236