空间有形 梦想无限

hi,it's onebird‘s blog。My homepage is onebird.net.

支持gzip的爬虫 gzip zlib deflate 相关介绍

onebird | 01 十月, 2006 00:23

最近给Httpdownload 封装了支持gzip传输

 

从HTTP的角度

1 客户端 在http Request  Header上带上 Accept-Encoding:gzip,deflate

 2服务器若是支持gzip压缩则在http reponse eader

部分返回Content-Encoding: gzip 或者Content-Type: application/x-gzip

3将body部分用gzip解压缩 则得到网页内容.

传说中ie有bug 在处理js css压缩的时候有bug,我不理解 挺简单的怎么会有bug呢.

从gzip的角度

gzip是一种数据格式 默认且目前仅使用deflate算法压缩data部分

zlib也是一种数据格式,使用defalte算法压缩数据部分.

deflate是一种压缩算法,是huffman编码的一种加强


 (查看全文)

一次郁闷系统升级和一个老bug

onebird | 30 九月, 2006 23:26

系统升级的一个故障 ,排查,和总结.

 

 (查看全文)

Django 学习中

onebird | 29 九月, 2006 22:12

争取下周发布一个小作品。 

 (查看全文)

又到一年找工作时(1)

onebird | 09 九月, 2006 01:32

这就工作一年了,新的大四学生又开始工作实习了。


 

 (查看全文)

g++ 不支持 & 引用无名对象

onebird | 09 九月, 2006 00:45

我认为这是非常不合理的! 主要是无法给形参默认参数了。

error: invalid initialization of non-const reference of type 'std::string&' from a temporary of type 'std::string' 

 (查看全文)

解决Linux 超过2G File Size Limit 问题

onebird | 05 九月, 2006 00:37

公司的log出过几次由于日志文件太大而系统当机的情况。

后来改了分日志文件的办法。

其实解决Linux 读写文件编程 2G限制很简单:

 (查看全文)

酷讯搜索的三个特点

onebird | 29 八月, 2006 21:37

从功能上说,酷讯搜索包括三个特征.这三个特征是酷讯的核心竞争力

 (查看全文)

六间房百日记 (转载自水木创版)

onebird | 27 八月, 2006 15:51

http://6rooms.com 是一家新兴的视频发布网站。

我不认识他们团队中的任何一人,也没上传过视频。不过先把此文转载过来。 关注这个团队:

 (查看全文)

推荐,yahoo收藏+

onebird | 27 八月, 2006 12:49

每次装机器总是忘记备份收藏夹,在公司浏览的网页也总是需要放到邮箱发会家继续看。现在推荐一个好用的网页收藏+

http://myweb.cn.yahoo.com/

 (查看全文)

软件业的混乱(1)

onebird | 27 八月, 2006 01:06

软件业的混乱。

其实软件业还是很混乱的,之所以混乱是因为它跟高科技扯上边,然后懂的人又不是那么多,成本也比较不好估算。

 (查看全文)
 

Accessible and Valid XHTML 1.0 Strict and CSS
Powered by LifeType - Design by BalearWeb