Asp.net2.0开发专栏

[原]使用 JSONP 实现跨域通信，第 1 部分: 结合 JSONP 和 jQuery 快速构建强大的 mashup

web718 — Wed, 01 Feb 2012 16:47:15 +0800

Asynchronous JavaScript and XML (Ajax) 是驱动新一代 Web 站点（流行术语为 Web 2.0 站点）的关键技术。Ajax 允许在不干扰 Web 应用程序的显示和行为的情况下在后台进行数据检索。使用 XMLHttpRequest 函数获取数据，它是一种 API，允许客户端 JavaScript 通过 HTTP 连接到远程服务器。Ajax 也是许多 mashup 的驱动力，它可将来自多个地方的内容集成为单一 Web 应用程序。

不过，由于受到浏览器的限制，该方法不允许跨域通信。如果尝试从不同的域请求数据，会出现安全错误。如果能控制数据驻留的远程服务器并且每个请求都前往同一域，就可以避免这些安全错误。但是，如果仅停留在自己的服务器上，Web 应用程序还有什么用处呢？如果需要从多个第三方服务器收集数据时，又该怎么办？

理解同源策略限制

同源策略阻止从一个域上加载的脚本获取或操作另一个域上的文档属性。也就是说，受到请求的 URL 的域必须与当前 Web 页面的域相同。这意味着浏览器隔离来自不同源的内容，以防止它们之间的操作。这个浏览器策略很旧，从 Netscape Navigator 2.0 版本开始就存在。

克服该限制的一个相对简单的方法是让 Web 页面向它源自的 Web 服务器请求数据，并且让 Web 服务器像代理一样将请求转发给真正的第三方服务器。尽管该技术获得了普遍使用，但它是不可伸缩的。另一种方式是使用框架要素在当前 Web 页面中创建新区域，并且使用 GET 请求获取任何第三方资源。不过，获取资源后，框架中的内容会受到同源策略的限制。

克服该限制更理想方法是在 Web 页面中插入动态脚本元素，该页面源指向其他域中的服务 URL 并且在自身脚本中获取数据。脚本加载时它开始执行。该方法是可行的，因为同源策略不阻止动态脚本插入，并且将脚本看作是从提供 Web 页面的域上加载的。但如果该脚本尝试从另一个域上加载文档，就不会成功。幸运的是，通过添加 JavaScript Object Notation (JSON) 可以改进该技术。

JSON 和 JSONP

JSON 是用于在浏览器和服务器之间交换信息的轻量级数据格式（与 XML 相比）。JOSON 依赖于 JavaScript 开发人员，因为它是 JavaScript 对象的字符串表示。例如，假设有一个含两个属性的 ticker 对象：symbol 和 price。这是在 JavaScript 中定义 ticker 对象的方式：

var ticker = {symbol: 'IBM', price: 91.42};

并且这是它的 JSON 表示方式：

{symbol: 'IBM', price: 91.42}

从参考资料查找更多有关 JSON 和将其作为数据内部交换格式的信息。清单 1 定义了一个 JavaScript 函数，调用该函数时会显示 IBM 的股价。（我们没有详细介绍如何将该函数添加到 Web 页面）。

清单 1. 定义 showPrice 函数

function showPrice(data) {
    alert("Symbol: " + data.symbol + ", Price: " + data.price);
}

可以将 JSON 数据作为参数传递，以调用该函数：

showPrice({symbol: 'IBM', price: 91.42}); // alerts: Symbol: IBM, Price: 91.42

现在准备将这两个步骤包含到 Web 页面，如清单 2 所示。

清单 2. 在 Web 页面中包含 showPrice 函数和参数

<script type="text/javascript">
function showPrice(data) {
    alert("Symbol: " + data.symbol + ", Price: " + data.price);
}
</script>
<script type="text/javascript">showPrice({symbol: 'IBM', price: 91.42});</script>

加载页面后，应该看如图 1 所示的警告。

图 1. IBM ticker

至此，本文已展示了如何将静态 JSON 数据作为参数调用 JavaScript 函数。不过，通过在函数调用中动态包装 JSON 数据可以用动态数据调用函数，这是一种动态 JavaScript 插入的技术。要查看其效果，将下面一行放入名为 ticker.js 的独立 JavaScript 文件中。

showPrice({symbol: 'IBM', price: 91.42});

现在改变 Web 页面中的脚本，使其和清单 3 一样。

清单 3. 动态 JavaScript 插入代码

<script type="text/javascript">
// This is our function to be called with JSON data
function showPrice(data) {
    alert("Symbol: " + data.symbol + ", Price: " + data.price);
}
var url = “ticker.js”; // URL of the external script
// this shows dynamic script insertion
var script = document.createElement('script');
script.setAttribute('src', url);

// load the script
document.getElementsByTagName('head')[0].appendChild(script); 
</script>

在清单 3 所示的例子中，动态插入的 JavaScript 代码位于 ticker.js 文件中，它将真正的 JSON 数据作为参数调用 showPrice()函数。

前面已经提到，同源策略不阻止将动态脚本元素插入文档中。也就是说，可以动态插入来自不同域的 JavaScript，并且这些域都携带 JSON 数据。这其实是真正的 JSONP（JSON with Padding）：打包在函数调用中的 JSON 数据。注意，为了完成该操作，Web 页面必须在插入时具有已经定义好的回调函数，也就是我们例子中的 showPrice()。

不过，所谓的 JSONP 服务（或 Remote JSON Service）是一种带有附加功能的 Web 服务，该功能支持在特定于用户的函数调用中打包返回的 JSON 数据。这种方法依赖于接受回调函数名作为请求参数的远程服务。然后该服务生成对该函数的调用，将 JSON 数据作为参数传递，在到达客户端时将其插入 Web 页面并开始执行。

回页首

jQuery 的 JSONP 支持

从 1.2 版本开始，jQuery 拥有对 JSONP 回调的本地支持。如果指定了 JSONP 回调，就可以加载位于另一个域的 JSON 数据，回调的语法为：url?callback=?。

jQuery 自动将 ? 替换为要调用的生成函数名。清单 4 显示了该代码。

清单 4. 使用 JSONP 回调

jQuery.getJSON(url+"&callback=?", function(data) {
    alert("Symbol: " + data.symbol + ", Price: " + data.price);
});

为此，jQuery 将一个全局函数附加到插入脚本时需要调用的窗口对象。另外，jQuery 也能优化非跨域调用。如果向同一个域发出请求，jQuery 就将其转化为普通 Ajax 请求。

使用 JSONP 支持的示例服务

在上一个例子中，使用了静态文件（ticker.js）将 JavaScript 动态插入到 Web 页面中。尽管返回了 JSONP 回复，但它不允许您在 URL 中定义回调函数名。这不是 JSONP 服务。因此，如何才能将其转换为真正的 JSONP 服务呢？可使用的方法很多。这里我们将分别使用 PHP 和 Java 展示两个示例。

首先，假设您的服务在所请求的 URL 中接受了一个名为 callback 的参数。（参数名不重要，但是客户和服务器必须都同意该名称）。另外假设向服务发送的请求是这样的：

http://www.yourdomain.com/jsonp/ticker?symbol=IBM&callback=showPrice

在这种情况下，symbol 是表示请求 ticker symbol 的请求参数，而 callback 是 Web 应用程序的回调函数的名称。使用清单 5 所示的代码可以通过 jQuery 的 JSONP 支持调用该服务。

清单 5. 调用回调服务

jQuery.getJSON("http://www.yourdomain.com/jsonp/ticker?symbol=IBM&callback=?", 
function(data) {
    alert("Symbol: " + data.symbol + ", Price: " + data.price);
});

注意，我们使用 ? 作为回调函数名，而非真实的函数名。因为 jQuery 会用生成的函数名替换 ?。所以您不用定义类似于 showPrice() 的函数。

清单 6 显示了用 PHP 实现的 JSONP 服务的一段代码。

清单 6. 用 PHP 实现的 JSONP 服务的代码片段

$jsonData = getDataAsJson($_GET['symbol']);
echo $_GET['callback'] . '(' . $jsonData . ');';
// prints: jsonp1232617941775({"symbol" : "IBM", "price" : "91.42"});

清单 7 显示了具有同样功能的 Java™ Servlet 方法。

清单 7. 用 Java servlet 实现的 JSONP 服务

@Override
protected void doGet(HttpServletRequest req, HttpServletResponse resp) 
  throws ServletException, IOException {
	String jsonData = getDataAsJson(req.getParameter("symbol"));
	String output = req.getParameter("callback") + "(" + jsonData + ");";

	resp.setContentType("text/javascript");
          
	PrintWriter out = resp.getWriter();
	out.println(output);
	// prints: jsonp1232617941775({"symbol" : "IBM", "price" : "91.42"});
}

那么，如果要构建 mashup 应该怎么办，是从第三方服务器收集内容，并在单一的 Web 页面中显示它们吗？答案很简单：您必须使用第三方 JSONP 服务。这种服务并不少。

现成的 JSONP 服务

知道如何使用 JSONP 之后，可以开始使用一些现成的 JSONP Web 服务来构建应用程序和 mashup。下面为接下来的开发项目做准备。（提示：您可以复制特定的 URL 并将其粘贴到浏览器的地址栏，以检查生成的 JSONP 响应）。

Digg API：来自 Digg 的头条新闻：

http://services.digg.com/stories/top?appkey=http%3A%2F%2Fmashup.com&type=javascript
&callback=?

Geonames API：邮编的位置信息：

http://www.geonames.org/postalCodeLookupJSON?postalcode=10504&country=US&callback=?

Flickr API：来自 Flickr 的最新猫图片：

http://api.flickr.com/services/feeds/photos_public.gne?tags=cat&tagmode=any
&format=json&jsoncallback=?

Yahoo Local Search API：在邮编为 10504 的地区搜索比萨：

http://local.yahooapis.com/LocalSearchService/V3/localSearch?appid=YahooDemo&query=pizza
&zip=10504&results=2&output=json&callback=?

回页首

重要提示

JSONP 是构建 mashup 的强大技术，但不幸的是，它并不是所有跨域通信需求的万灵药。它有一些缺陷，在提交开发资源之前必须认真考虑它们。第一，也是最重要的一点，没有关于 JSONP 调用的错误处理。如果动态脚本插入有效，就执行调用；如果无效，就静默失败。失败是没有任何提示的。例如，不能从服务器捕捉到 404 错误，也不能取消或重新开始请求。不过，等待一段时间还没有响应的话，就不用理它了。（未来的 jQuery 版本可能有终止 JSONP 请求的特性）。

JSONP 的另一个主要缺陷是被不信任的服务使用时会很危险。因为 JSONP 服务返回打包在函数调用中的 JSON 响应，而函数调用是由浏览器执行的，这使宿主 Web 应用程序更容易受到各类攻击。如果打算使用 JSONP 服务，了解它能造成的威胁非常重要。（参见参考资料了解更多信息）。

回页首

结束语

在该系列的第一篇文章中，我们讲解了如何结合使用 JSONP 和 jQuery 快速构建强大的 mashup。主要主题包括：

浏览器同源策略的限制以及解决办法
作为一种有效的跨域通信技术，JSONP 能够绕过当前浏览器的同源策略限制
JSONP 使 Web 应用程序开发人员能够快速构建 mashup
示例 JSONP 服务及其使用：Ticker 服务

本系列的下一篇文章将介绍 Yahoo! 查询语言（YQL），这种单端点 JSONP 服务允许您跨 Web 查询、过滤和合并数据。最后还使用 YQL 和 jQuery 构建 mashup 应用程序。

作者：web718 发表于2012-2-1 16:47:15 原文链接

阅读：17 评论：0 查看评论

[原]Facebook网站所使用的开源软件一览表

web718 — Fri, 10 Jun 2011 10:25:00 +0800

Facebook是全球首屈一指的社交网络平台，该网站采用了很多开源软件，Facebook采用的编程语言包括：Java,Ruby,PHP,Python,Objective-C.

下面是Facebook正在使用或者贡献的开源软件详细列表和介绍：

Apache Cassandra 是一套开源分布式Key-Value存储系统。它最初由Facebook开发，用于储存特别大的数据。

MySQL 这个不需要在介绍什么了吧，使用最为广泛的开源数据库。

Memcached 是一个高性能的、分布式的内存对象缓存系统。

Scribe 旨在帮助Facebook处理服务器上的大量数据，正像Scribe网页所述“如经常访问Facebook，请使用Scribe。”具体而言，Scribe就是一台服务器，实时收集用网站日志信息。

Thrift 是一个可伸缩的跨语言的服务开发框架。Key-Value存储服务器Cassandra 就是使用Thrift作为其客户端API的。

FlashCache 是一个适合一般应用场景的MySQL缓存优化模块。

Hadoop 并不仅仅是一个用于存储的分布式文件系统，而是设计用来在由通用计算设备组成的大型集群上执行分布式应用的框架。

Hive 是一个基于Hadoop 的数据仓库平台。通过hive，我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言：HQL，能够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。

Open Graph protocol可让你的任何网页变成社交图谱。http://ogp.me/

OpenCompute - 一个开源硬件项目，提供高能效的数据中心。http://opencompute.org/

Tornado web server 是使用Python编写出來的一个极轻量级、高可伸缩性和非阻塞IO的Web服务器软件，著名的Friendfeed网站就是使用它搭建的。

Varnish cache 是一款高性能的开源HTTP加速器，挪威最大的在线报纸 Verdens Gang (http://www.vg.no ) 使用3台Varnish代替了原来的12台squid ，性能居然比以前更好。

原文出处：开源中国社区

作者：web718 发表于2011-6-10 10:25:00 原文链接

阅读：68 评论：0 查看评论

[原]HTTP请求错误400、401、402、403、404、405、406、407、412、414、500、501、502解析

web718 — Thu, 21 Jan 2010 09:24:00 +0800

HTTP 错误 400
400 请求出错
由于语法格式有误，服务器无法理解此请求。不作修改，客户程序就无法重复此请求。

HTTP 错误 401
401.1 未授权：登录失败
此错误表明传输给服务器的证书与登录服务器所需的证书不匹配。
请与 Web 服务器的管理员联系，以确认您是否具有访问所请求资源的权限。
401.2 未授权：服务器的配置导致登录失败
此错误表明传输给服务器的证书与登录服务器所需的证书不匹配。此错误通常由未发送正确的 WWW 验证表头字段所致。
请与 Web 服务器的管理员联系，以确认您是否具有访问所请求资源的权限。
401.3 未授权：由于资源中的 ACL 而未授权
此错误表明客户所传输的证书没有对服务器中特定资源的访问权限。此资源可能是客户机中的地址行所列出的网页或文件，也可能是处理客户机中的地址行所列出的文件所需服务器上的其他文件。
请记录试图访问的完整地址，并与 Web 服务器的管理员联系以确认您是否具有访问所请求资源的权限。
401.4 未授权：授权服务被筛选程序拒绝
此错误表明 Web 服务器已经安装了筛选程序，用以验证连接到服务器的用户。此筛选程序拒绝连接到此服务器的真品证书的访问。
请记录试图访问的完整地址，并与 Web 服务器的管理员联系以确认您是否具有访问所请求资源的权限。
401.5 未授权：ISAPI/CGI 应用程序的授权失败
此错误表明试图使用的 Web服务器中的地址已经安装了 ISAPI 或 CGI程序，在继续之前用以验证用户的证书。此程序拒绝用来连接到服务器的真品证书的访问。
请记录试图访问的完整地址，并与 Web服务器的管理员联系以确认您是否具有访问所请求资源的权限

HTTP 错误 403
403.1 禁止：禁止执行访问
如果从并不允许执行程序的目录中执行 CGI、ISAPI或其他执行程序就可能引起此错误。
如果问题依然存在，请与 Web 服务器的管理员联系。
403.2 禁止：禁止读取访问
如果没有可用的默认网页或未启用此目录的目录浏览，或者试图显示驻留在只标记为执行或脚本权限的目录中的HTML 页时就会导致此错误。
如果问题依然存在，请与 Web 服务器的管理员联系。
403.3 禁止：禁止写访问
如果试图上载或修改不允许写访问的目录中的文件，就会导致此问题。
如果问题依然存在，请与 Web服务器的管理员联系。
403.4 禁止：需要 SSL
此错误表明试图访问的网页受安全套接字层（SSL）的保护。要查看，必须在试图访问的地址前输入https:// 以启用 SSL。
如果问题依然存在，请与 Web服务器的管理员联系。
403.5 禁止：需要 SSL 128
此错误消息表明您试图访问的资源受 128位的安全套接字层（SSL）保护。要查看此资源，需要有支持此SSL 层的浏览器。
请确认浏览器是否支持 128 位 SSL安全性。如果支持，就与 Web服务器的管理员联系，并报告问题。
403.6 禁止：拒绝 IP 地址
如果服务器含有不允许访问此站点的 IP地址列表，并且您正使用的 IP地址在此列表中，就会导致此问题。
如果问题依然存在，请与 Web服务器的管理员联系。
403.7 禁止：需要用户证书
当试图访问的资源要求浏览器具有服务器可识别的用户安全套接字层（SSL）证书时就会导致此问题。可用来验证您是否为此资源的合法用户。
请与 Web服务器的管理员联系以获取有效的用户证书。
403.8 禁止：禁止站点访问
如果 Web服务器不为请求提供服务，或您没有连接到此站点的权限时，就会导致此问题。
请与 Web 服务器的管理员联系。
403.9 禁止访问：所连接的用户太多
如果 Web太忙并且由于流量过大而无法处理您的请求时就会导致此问题。请稍后再次连接。
如果问题依然存在，请与 Web 服务器的管理员联系。
403.10 禁止访问：配置无效
此时 Web 服务器的配置存在问题。
如果问题依然存在，请与 Web服务器的管理员联系。
403.11 禁止访问：密码已更改
在身份验证的过程中如果用户输入错误的密码，就会导致此错误。请刷新网页并重试。
如果问题依然存在，请与 Web服务器的管理员联系。
403.12 禁止访问：映射程序拒绝访问
拒绝用户证书试图访问此 Web 站点。
请与站点管理员联系以建立用户证书权限。如果必要，也可以更改用户证书并重试。

HTTP 错误 404
404 找不到
Web 服务器找不到您所请求的文件或脚本。请检查URL 以确保路径正确。
如果问题依然存在，请与服务器的管理员联系。

HTTP 错误 405
405 不允许此方法
对于请求所标识的资源，不允许使用请求行中所指定的方法。请确保为所请求的资源设置了正确的 MIME 类型。
如果问题依然存在，请与服务器的管理员联系。

HTTP 错误 406
406 不可接受
根据此请求中所发送的“接受”标题，此请求所标识的资源只能生成内容特征为“不可接受”的响应实体。
如果问题依然存在，请与服务器的管理员联系。

HTTP 错误 407
407 需要代理身份验证
在可为此请求提供服务之前，您必须验证此代理服务器。请登录到代理服务器，然后重试。
如果问题依然存在，请与 Web 服务器的管理员联系。

HTTP 错误 412
412 前提条件失败
在服务器上测试前提条件时，部分请求标题字段中所给定的前提条件估计为FALSE。客户机将前提条件放置在当前资源 metainformation（标题字段数据）中，以防止所请求的方法被误用到其他资源。
如果问题依然存在，请与 Web 服务器的管理员联系。

HTTP 错误 414
414 Request-URI 太长
Request-URL太长，服务器拒绝服务此请求。仅在下列条件下才有可能发生此条件：
客户机错误地将 POST 请求转换为具有较长的查询信息的 GET 请求。
客户机遇到了重定向问题（例如，指向自身的后缀的重定向前缀）。
服务器正遭受试图利用某些服务器（将固定长度的缓冲区用于读取或执行 Request-URI）中的安全性漏洞的客户干扰。
如果问题依然存在，请与 Web 服务器的管理员联系。

HTTP 错误 500
500 服务器的内部错误
Web 服务器不能执行此请求。请稍后重试此请求。
如果问题依然存在，请与 Web服务器的管理员联系。

HTTP 错误 501
501 未实现
Web 服务器不支持实现此请求所需的功能。请检查URL 中的错误，如果问题依然存在，请与 Web服务器的管理员联系。

HTTP 错误 502
502 网关出错
当用作网关或代理时，服务器将从试图实现此请求时所访问的upstream 服务器中接收无效的响应。
如果问题依然存在，请与 Web服务器的管理员联系。

作者：web718 发表于2010-1-21 9:24:00 原文链接

阅读：542 评论：1 查看评论

[原]C# 集合类

web718 — Thu, 21 Jan 2010 09:21:00 +0800

HashTable 中的 key/value均为 object类型，由包含集合元素的存储桶组成。存储桶是 HashTable中各元素的虚拟子组，与大多数集合中进行的搜索和检索相比，存储桶可令搜索和检索更为便捷。每一存储桶都与一个哈希代码关联，该哈希代码是使用哈希函数生成的并基于该元素的键。 HashTable的优点就在于其索引的方式，速度非常快。如果以任意类型键值访问其中元素会快于其他集合，特别是当数据量特别大的时候，效率差别尤其大。

HashTable的应用场合有：做对象缓存，树递归算法的替代，和各种需提升效率的场合。

    // Hashtable sample
    System.Collections.Hashtable ht = new System.Collections.Hashtable();

    // --Be careful: Keys can't be duplicated, and can't be null----
    ht.Add( 1 , " apple " );
    ht.Add( 2 , " banana " );
    ht.Add( 3 , " orange " );

    // Modify item value:
    if (ht.ContainsKey( 1 ))
        ht[ 1 ] = " appleBad " ;

    // The following code will return null oValue, no exception
    object oValue = ht[ 5 ];

    // traversal 1:
    foreach (DictionaryEntry de in ht)
    {
        Console.WriteLine(de.Key);
        Console.WriteLine(de.Value);
    }

    // traversal 2:
    System.Collections.IDictionaryEnumerator d = ht.GetEnumerator();
    while (d.MoveNext())
    {
        Console.WriteLine( " key：{0} value：{1} " , d.Entry.Key, d.Entry.Value);
    }

    // Clear items
    ht.Clear();

Dictionary 和 HashTable内部实现差不多，但前者无需装箱拆箱操作，效率略高一点。

    // Dictionary sample
    System.Collections.Generic.Dictionary < int , string > fruits =
        new System.Collections.Generic.Dictionary < int , string > ();

    fruits.Add( 1 , " apple " );
    fruits.Add( 2 , " banana " );
    fruits.Add( 3 , " orange " );

    foreach ( int i in fruits.Keys)
    {
        Console.WriteLine( " key：{0} value：{1} " , i, fruits);
    }

    if (fruits.ContainsKey( 1 ))
    {
        Console.WriteLine( " contain this key. " );
    }

ArrayList 是一维变长数组，内部值为 object类型，效率一般：

    // ArrayList
    System.Collections.ArrayList list = new System.Collections.ArrayList();
    list.Add( 1 ); // object type
    list.Add( 2 );
    for ( int i = 0 ; i < list.Count; i ++ )
    {
        Console.WriteLine(list[i]);
    }

HashTable是经过优化的，访问下标的对象先散列过，所以内部是无序散列的，保证了高效率，也就是说，其输出不是按照开始加入的顺序，而 Dictionary遍历输出的顺序，就是加入的顺序，这点与 Hashtable不同。如果一定要排序 HashTable输出，只能自己实现：

    // Hashtable sorting
    System.Collections.ArrayList akeys = new System.Collections.ArrayList(ht.Keys); // from Hashtable
    akeys.Sort(); // Sort by leading letter
    foreach ( string skey in akeys)
    {
        Console.Write(skey + " : " );
        Console.WriteLine(ht[skey]);
    }

HashTable 与线程安全 ：

为了保证在多线程的情况下的线程同步访问安全，微软提供了自动线程同步的 HashTable:

如果 HashTable 要允许并发读但只能一个线程写 , 要这么创建 HashTable 实例 :

// Thread safe HashTable
System.Collections.Hashtable htSyn = System.Collections.Hashtable.Synchronized( new System.Collections.Hashtable());

这样 , 如果有多个线程并发的企图写 HashTable 里面的 item, 则同一时刻只能有一个线程写 , 其余阻塞 ; 对读的线程则不受影响。

另外一种方法就是使用 lock 语句，但要 lock 的不是 HashTable ，而是其 SyncRoot ；虽然不推荐这种方法，但效果一样的，因为源代码就是这样实现的 :

//Thread safe

private

 static

 System.Collections.Hashtable htCache = new

 System.Collections.Hashtable ();
 
public

 static

 void

 AccessCache ()
{
    lock

 ( htCache.SyncRoot )
    {
        htCache.Add ( "key"

, "value"

 );
 
        //Be careful: don't use foreach to operation on the whole collection

        //Otherwise the collection won't be locked correctly even though indicated locked

        //--by MSDN

    }
}
 
//Is equivalent to 等同于 (lock is equivalent to Monitor.Enter and Exit()

public

 static

 void

 AccessCache ()
{
    System.Threading.Monitor.Enter ( htCache.SyncRoot );
 
    try

    {
        /* critical section */

        htCache.Add ( "key"

, "value"

 );
 
        //Be careful: don't use foreach to operation on the whole collection

        //Otherwise the collection won't be locked correctly even though indicated locked

        //--by MSDN

    }
    finally

    {
        System.Threading.Monitor.Exit ( htCache.SyncRoot );
    }
}

作者：web718 发表于2010-1-21 9:21:00 原文链接

阅读：59 评论：0 查看评论

[转]C#集合类(HashTable, Dictionary, ArrayList)与HashTable线程安全

web718 — Wed, 30 Dec 2009 13:18:00 +0800

HashTable的应用场合有：做对象缓存，树递归算法的替代，和各种需提升效率的场合。

Dictionary 和 HashTable内部实现差不多，但前者无需装箱拆箱操作，效率略高一点。

ArrayList 是一维变长数组，内部值为 object类型，效率一般：

HashTable 与线程安全 ：

为了保证在多线程的情况下的线程同步访问安全，微软提供了自动线程同步的 HashTable:

如果 HashTable 要允许并发读但只能一个线程写 , 要这么创建 HashTable 实例 :

// Thread safe HashTable
System.Collections.Hashtable htSyn = System.Collections.Hashtable.Synchronized( new System.Collections.Hashtable());

这样 , 如果有多个线程并发的企图写 HashTable 里面的 item, 则同一时刻只能有一个线程写 , 其余阻塞 ; 对读的线程则不受影响。

另外一种方法就是使用 lock 语句，但要 lock 的不是 HashTable ，而是其 SyncRoot ；虽然不推荐这种方法，但效果一样的，因为源代码就是这样实现的 :

//Thread safe

private
 static
 System.Collections.Hashtable htCache = new
 System.Collections.Hashtable ();
 
public
 static
 void
 AccessCache ()
{
    lock
 ( htCache.SyncRoot )
    {
        htCache.Add ( "key"
, "value"
 );
 
        //Be careful: don't use foreach to operation on the whole collection

        //Otherwise the collection won't be locked correctly even though indicated locked

        //--by MSDN

    }
}
 
 
//Is equivalent to 等同于 (lock is equivalent to Monitor.Enter and Exit()

public
 static
 void
 AccessCache ()
{
    System.Threading.Monitor.Enter ( htCache.SyncRoot );
 
    try

    {
        /* critical section */

        htCache.Add ( "key"
, "value"
 );
 
        //Be careful: don't use foreach to operation on the whole collection

        //Otherwise the collection won't be locked correctly even though indicated locked

        //--by MSDN

    }
    finally

    {
        System.Threading.Monitor.Exit ( htCache.SyncRoot );
    }
}

作者：web718 发表于2009-12-30 13:18:00 原文链接

阅读：363 评论：1 查看评论

[原][AsyncHandle]什么引发了ObjectDisposedException？

web718 — Fri, 11 Dec 2009 09:02:00 +0800

Version	Date	Creator	Description
1.0.0 .1	2006-9-19	郑昀	草稿

继续阅读之前，我们假设您熟悉以下知识：

n 用 IDisposable 接口释放 dotNET 资源

如果不熟悉这些知识点，可以看本文最后资源列表中的文章。

本文讨论了出现不可捕获的 ObjectDisposedException 异常崩溃，寻找可能的原因，并试图解决。

[ 现象 ]

关键词 ： ObjectDisposedException 。

表象：我的 dotNET C# 服务偶尔会彻底崩溃，时机没有规律可循，崩溃时在 Windows 事件日志中有来自于“ .NET Runtime 2.0 Error Reporting ”的报告，描述的错误也颇让人费思量。

错误描述 ：

事件类型 : 错误

事件来源 : .NET Runtime 2.0 Error Reporting

事件种类 : 无

事件 ID: 5000

描述 :

EventType clr20r3, P1 juiceextractor.exe, P2 1.0.0.0, P3 450d5160, P4 mscorlib, P5 2.0.0.0, P6 4333ab80, P7 10ed, P8 0, P9 system.objectdisposedexception , P10 NIL.

通过 ObjectDisposedException 对我们的提醒，可以了解到这是因为前面已经使用了一个 disposed 对象。在一个使用过 disposed 对象上调用其他方法时是会引发致命异常的，服务也不知道该在哪里捕获这个异常，似乎也不可捕获。但是，问题是，是谁引发的？

引申：看到微软的一个对 dotnet framework 的 servicepack 公告中提到：当一个异步 Web 请求在接收到响应之前如果被中止，则会引发 ObjectDisposedException 。

唯一和异步请求有点关系的是，本服务向一个 socket 服务器发送请求，并等候一段一段地循环接收服务器的大量数据反馈。这中间，使用了 C# 的异步方法 BeginReceive 来告知 socket 如何接收数据。

这个逻辑的代码如下：

C# code

/// <summary>

/// 调用异步方法 BeginReceive 来告知 socket 如何接收数据

/// </summary>

IAsyncResult ar =

_socket.BeginReceive(_recvBuffer.Buffer, 0, _recvBuffer.Buffer.Length,

SocketFlags.None, _recvCallback, _socket);

// 设定一个期限， 10 分钟内如果还没有结果返回，

// 我们可以认为必须关掉当前 socket 连接了，不要再等了 !

ar.AsyncWaitHandle.WaitOne(new TimeSpan(0, 10, 0), true);

ar.AsyncWaitHandle.Close();

….

public void RecvCallback(IAsyncResult result)

{…

也就是利用回调函数 “ _recvCallback ”，每次有数据的话，都直接调用它。但是，规定了如果 10 分钟内都没有完整结果返回，那么这个异步等候句柄将被关闭。

很简单的想法。

但是如果数据量大的话， socket 服务器计算的过程非常漫长，导致返回数据的过程超过了 10 分钟，会发生什么事情呢？

[ 回答前面的问题 ]

这个时候，“ ar.AsyncWaitHandle.Close(); ”是不是就导致了 ObjectDisposedException 呢？

假设如此的话。

第一，那我们需要调用 AsyncWaitHandle.Close() 这句话吗？

The Thread Pool and Asynchronous Methods 中说道：“ Note the call to ar.AsyncWaitHandle.Close() . This prevents the WaitHandle leaking until garbage collection. The leak wouldn't cause any problems in most cases (unlike, for instance, file handles leaking), but in situations where FireAndForget would be called many, many times in quick succession, you could end up with a vast number of handles until the garbage collector started finalizing them. (This is also a bad thing in terms of performance - you shouldn't leave things to be finalised when it can be avoided.) ”

那么，也许我们可以不调用它，来规避 ObjectDisposedException 异常崩溃？

第二，把 ar.AsyncWaitHandle.WaitOne(new TimeSpan(0, 10, 0), true); 等候的时间延长？比如说延长到 40 分钟。这样也可以避免 ObjectDisposedException 。

[ 改变接收模式 ]

第三，对于这种长时间执行的 socket 服务器，可以不用在一个端口上干等，可以发送请求用一个端口，接收数据反馈用另外一个 socket 端口号。

以前没有考虑到计算时间如此之长，所以才做成了 socket 异步接收模式。后来算法作了改变，有时候十分钟的等候都不够了。

[ 参考资料 ]

作者：web718 发表于2009-12-11 9:02:00 原文链接

阅读：380 评论：0 查看评论

[原]利用 squid 反向代理提高网站性能

web718 — Mon, 09 Nov 2009 11:53:00 +0800

本文在介绍 squid 反向代理的工作原理的基础上，指出反向代理技术在提高网站访问速度，增强网站可用性、安全性方面有很好的用途。作者在具体的实验环境下，利用 DNS 轮询和 Squid 反向代理技术，实现了网站的负载均衡，从而提高了网站的可用性和可靠性。

本文在介绍 squid 反向代理的工作原理的基础上，指出反向代理技术在提高网站访问速度，增强网站可用性、安全性方面有很好的用途。作者在具体的实验环境下，利用 DNS 轮询和 Squid 反向代理技术，实现了网站的负载均衡，从而提高了网站的可用性和可靠性。

现在有许多大型的门户网站如 SINA 都采用 squid 反向代理技术来加速网站的访问速度，可将不同的 URL 请求分发到后台不同的 WEB 服务器上，同时互联网用户只能看到反向代理服务器的地址，加强了网站的访问安全。

反向代理的概念

反向代理服务器又称为 WEB 加速服务器，它位于 WEB 服务器的前端，充当 WEB 服

务器的内容缓存器。其系统结构如图 1

图 1. 系统结构

反向代理服务器是针对 WEB 服务器设置的，后台 WEB 服务器对互联网用户是透明的，用户只能看到反向代理服务器的地址，不清楚后台 WEB 服务器是如何组织架构的。当互联网用户请求 WEB 服务时，DNS 将请求的域名解析为反向代理服务器的 IP 地址，这样 URL 请求将被发送到反向代理服务器，由反向代理服务器负责处理用户的请求与应答、与后台 WEB 服务器交互。利用反向代理服务器减轻了后台 WEB 服务器的负载，提高了访问速度，同时避免了因用户直接与 WEB 服务器通信带来的安全隐患。

回页首

Squid 反向代理的实现原理

目前有许多反向代理软件，比较有名的有 Nginx 和 Squid 。 Nginx 是由 Igor Sysoev 为俄罗斯访问量第二的 Rambler.ru 站点开发的，是一个高性能的 HTTP 和反向代理服务器，也是一个 IMAP/POP3/SMTP 代理服务器。

Squid 是由美国政府大力资助的一项研究计划，其目的为解决网络带宽不足的问题，支持HTTP ，HTTPS，FTP 等多种协议，是现在 Unix 系统上使用、最多功能也最完整的一套软体。下面将重点介绍 Squid 反向代理的实现原理和在提高网站性能方面的应用。

Squid 反向代理服务器位于本地 WEB 服务器和 Internet 之间 , 组织架构如图 2：

图 2. 组织架构

客户端请求访问 WEB 服务时，DNS 将访问的域名解析为 Squid 反向代理服务器的 IP 地址，这样客户端的 URL 请求将被发送到反向代理服务器。如果 Squid 反向代理服务器中缓存了该请求的资源，则将该请求的资源直接返回给客户端，否则反向代理服务器将向后台的 WEB 服务器请求资源，然后将请求的应答返回给客户端，同时也将该应答缓存在本地，供下一个请求者使用。

Squid 反向代理一般只缓存可缓冲的数据（比如 html 网页和图片等），而一些 CGI 脚本程序或者 ASP、JSP 之类的动态程序默认不缓存。它根据从 WEB 服务器返回的 HTTP 头标记来缓冲静态页面。有四个最重要 HTTP 头标记：

Last-Modified: 告诉反向代理页面什么时间被修改
Expires: 告诉反向代理页面什么时间应该从缓冲区中删除
Cache-Control: 告诉反向代理页面是否应该被缓冲
Pragma: 用来包含实现特定的指令，最常用的是 Pragma:no-cache

回页首

利用 Squid 反向代理加速网站实例

本实例的域名是 wenjin.cache.ibm.com.cn ，通过DNS 的轮询技术，将客户端的请求分发给其中一台 Squid 反向代理服务器处理，如果这台 Squid 缓存了用户的请求资源，则将请求的资源直接返回给用户，否则这台 Squid 将没有缓存的请求根据配置的规则发送给邻居 Squid 和后台的 WEB 服务器处理，这样既减轻后台 WEB 服务器的负载，又提高整个网站的性能和安全性。该系统结构图 3 如下：

图 3. 系统结构

配置的系统环境：

一台 DNS 服务器：操作系统 Freebsd，软件 BIND 9.5，IP 192.168.76.222 ；
三台 Squid 服务器：操作系统 Linux AS 4，软件 Squid 3.0，相应的 IP 如下：

Squid1：192.168.76.223 

 Squid2：192.168.76.224 

 Squid3：192.168.76.225

三台 WEB 服务器：操作系统 Linux AS 4，应用软件 Tomcat 5.0+Mysql，相应的 IP 地址如下：

webServer1：210.82.118.195 

 webServer2：192.168.76.226 

 webServer1：192.168.76.227

应用软件的安装和配置

配置 DNS 服务器

软件利用 Freebsd 自带的 bind 9.5 。然后针对该系统配置 bind，首先修改 bind 的配置文件 /etc/namedb/named.conf，在文件中添加

zone "cache.ibm.com.cn"{ 

        type master; 

        file "master/ cache.ibm.com.cn "; 

 };

再在 /etc/namedb/master 目录下添加 cache.ibm.com.cn 文件，该文件的内容如下：

$TTL    3600 

 @       IN      SOA     search. ibm.com.cn. root. ibm.com.cn.  ( 

                                20080807        ; Serial 

                                3600    ; Refresh 

                                900     ; Retry 

                                3600000 ; Expire 

                                3600 )  ; Minimum 

        IN      NS      search.ibm.com.cn. 

 1       IN      PTR     localhost.ibm.com.cn. 

 wenjin  IN      A       192.168.76.223 

 wenjin  IN      A       192.168.76.224 

 wenjin  IN      A       192.168.76.225

这样当用户请求的时候，DNS 通过轮询机制将 wenjin.cache.ibm.com.cn 的域名解析为 192.168.76.223、192.168.76.224 和 192.168.76.225 其中之一。

配置完成后，运行 rndc star t 启动 bind 服务。可在 /etc/rc.conf 中设置 named_enable="YES" 使得开机自启动。

用 ps – A |grep named 查看 bind 服务是否起来；

用 nslookup wenjin.cache.ibm.com.cn 测试 bind 服务是否正常运行。

配置 Squid1 服务器

下载 squid-3.0.STABLE8.tar.gz 源码包，将其放在 /home 目录下
解压缩tar – zxvf squid-3.0.STABLE8.tar.gz
设置配置参数：cd squid-3.0.STABLE10
./configure – prefix=/usr/local/squid
将 squid 安装在 /usr/local 目录下
编译安装：make&make install 安装完以后会在 /usr/local 目录下看见 squid 目录。

配置 squid 配置文件

编辑 squid.conf 文件，vi /usr/local/squid/etc/squid.conf

cache_effective_user squid 

 cache_effective_group squid 

 ######### 设定 squid 的主机名 , 如无此项 squid 将无法启动

 visible_hostname squid1.nlc.gov.cn 

 ############# 配置 squid 为加速模式 ################# 

 http_port 80 accel vhost vport 

 icp_port 3130 

 ##### 配置 squid2、squid3 为其邻居，当 squid1 在其缓存中没有找到请求的资源时，

          通过 ICP 查询去其邻居中取得缓存

 cache_peer squid2.ibm.com.cn sibling 80 3130 

 cache_peer squid3.ibm.com.cn sibling 80 3130 

 ##### squid1 的三个父节点，originserver 参数指明是源服务器，

 round-robin  参数指明 squid 通过轮询方式将请求分发到其中一台父节点；

 squid 同时会对这些父节点的健康状态进行检查，如果父节点 down 了，

那么 squid 会从剩余的 origin 服务器中抓取数据

 cache_peer 210.82.118.195 parent 8080 0 no-query originserver round-robin / 

                                              name=webServer1 

 cache_peer 192.168.76.226 parent 8080 0 no-query originserver round-robin / 

                                              name=webServer2 

 cache_peer 192.168.76.227 parent 8080 0 no-query originserver round-robin / 

                                            name=webServer3 

 #### 将 wenjin.cache.ibm.com.cn 域的请求通过 RR 轮询方式转发到三个父节点中的一个

 cache_peer_domain webServer1 webServer2 webServer3 wenjin.cache.ibm.com.cn 

 ##### 下面是一些访问控制、日志和缓存目录的设置

 acl localnet src 192.168.76.223 192.168.76.224 192.168.76.225 

 acl all src 0.0.0.0/0.0.0.0 

 http_access allow all 

 icp_access allow localnet 

 cache_log /usr/local/squid/var/logs/cache.log 

 access_log /usr/local/squid/var/logs/access.log squid 

 cache_dir ufs /usr/local/squid/var/cache/ 1000 16 256 

 ####### 对 squid 的一些优化 ############### 

 maximum_object_size 10240 KB  ### 能缓存的最大对象为 10M 

 maximum_object_size_in_memory 512 KB ### 内存中缓存的最大对象 512K 

 cache_mem 256 MB  ###squid 用于缓存的内存量

保存后 :wq 退出。

在 /etc/hosts 文件中添加

192.168.76.223  squid1.ibm.com.cn 

 192.168.76.224  squid2.ibm.com.cn 

 192.168.76.225  squid3.ibm.com.cn

保存后 : wq 退出。

检查 squid 配置文件正确与否：/usr/local/squid/bin/squid – k parse

生成缓存目录/usr/local/squid/bin/squid – z

启动squid：/usr/local/squid/bin/squid

配置 squid2 和 squid3 服务器

squid2 和 squid3 服务器的配置方法和配置参数和 squid1 一样，配置完成后，分别启动这两个服务器上的 squid 服务。

在 squid 的日志文件 cache.log 中，出现如下日志信息则说明三台 squid 之间成功配置为 sibling，且配置了三个父代理。

2008/11/17 10:08:47| Configuring Sibling squid1.ibm.com.cn/80/3130 

 2008/11/17 10:08:47| Configuring Sibling squid3.ibm.com.cn/80/3130 

 2008/11/17 10:08:47| Configuring Parent 210.82.118.195/8080/0 

 2008/11/17 10:08:47| Configuring Parent 192.168.76.226/8080/0 

 2008/11/17 10:08:47| Configuring Parent 192.168.76.227/8080/0 

 2008/11/17 10:08:47| Ready to serve requests.

测试

测试之前，保证 DNS 服务、三台 squid 服务和三台 web 服务都正常起来。在客户端输入http://wenjin.cache.ibm.com.cn ，则正确的显示该网页。服务器端的响应对客户端是透明的，客户端不知道请求是由哪台 WEB 服务器处理的；而且其中某台 Squid 服务器或 WEB 服务器发生故障，也不影响服务的正常运行。

作者：web718 发表于2009-11-9 11:53:00 原文链接

阅读：104 评论：0 查看评论

[原]多服务器负载均衡引起上传数据存储问题

web718 — Fri, 24 Jul 2009 17:16:00 +0800

描述：
在中国移动部署M校园项目时，其中WEB使用了2台负载均衡服务器。并且没有外网的IP,外部是无法识别其中的一台。网站会员有很多的上传操作。如上传文件，上传视频，上传照片.

需要解决的问题：文件不能直接上传在WEB服务器。因为上传的时候是上传在其中的一台。另外一台没有物理文件。访问其中一台会找不到资源。

解决办法:

增加一台文件服务器
将数据上传到存储文件的服务器上,使用Url转向服务器实现上传的操作

也可以使用以下其它的方式：
1.post发送,直接使用Form表单发送到文件服务器 (文件较小的时候使用)
2.WebService发送. (文件较小的时候使用)
3.xcopy
4.rsync

作者：web718 发表于2009-7-24 17:16:00 原文链接

阅读：187 评论：1 查看评论

[原]asp.net 控制windows服务

web718 — Thu, 23 Jul 2009 17:36:00 +0800

1、为网站添加新的引用，加入：system.serviceproces.dll

2、在代码文件头部加如：using System.ServiceProcess;

3、服务的启动使用如下代码：
         ServiceController sc = new ServiceController("service1");
        if (sc.Status == ServiceControllerStatus.Stopped)
        {
            sc.Start();
        }
     4、服务的关闭使用如下代码：
        ServiceController sc = new ServiceController("service1");
        if (sc.Status == ServiceControllerStatus.Running)
        {
            sc.Stop();
        }
     5、服务的控制权限的解决办法
        windows2003等服务器系统都提供了完善的权限访问机制，这就是我为什么不用前面说过的在asp.net 中调用另一个程序的办法来通过net 命令启动和停止服务。因为首先用net命令显然比较麻烦，而调用新进程的发放程序运行依然是在aspnet的用户下（通过网页访问的默认用户），当网页关闭，会话结束时间到达就会自动释放该用户运行的相关程序。而net命令同样需要相应权限。asp.net 中可以在web.config的下添加
    从而解决用户的登入权限问题。
      以上五步就可以完成对服务器服务的控制了！

<system.web>
<identity impersonate="true" userName="admin" password="admin"/>

作者：web718 发表于2009-7-23 17:36:00 原文链接

阅读：312 评论：1 查看评论

[原]System.Web.HttpUtility.UrlEncode编码转换

web718 — Mon, 01 Jun 2009 18:10:00 +0800

今天在做一个小程序发现C#的System.Web.HttpUtility.UrlEncode函数产生的编码和我们正常使用的有出入，如：

用System.Web.HttpUtility.UrlEncode产生的编码如下

南京：%e5%8d%97%e4%ba%ac

而正常的我们期待的结果是：%C4%CF%BE%A9

比较后发现两者前者认为一个汉字3个字节，而后者则是两个字节，这下恍然大悟原来在C#中如果直接用System.Web.HttpUtility.UrlEncode("南京")则程序用UTF-8编码处理汉字。

解决方法：

System.Web.HttpUtility.UrlEncode("南京",Encoding.GetEncoding("GB2312"))

加一个参数即可！

作者：web718 发表于2009-6-1 18:10:00 原文链接

阅读：884 评论：0 查看评论