| Home | Sign up | Sign in |
Rui's Log
My Home
Explore
Life(111)
2010-08-29 
主题： 阿里巴巴 - 淘宝网图片的存储与CDN系统
章文嵩 - LVS创始人
TFS - Taobao File System, 分布式存储系统，大规模图片存储，9月份开源(code.taobao.org)； 生产环境 1PB 运行记录, 存储原始图片； 单节点配置 1000M x4 网卡； CDN 节点 SSD + SAS + SATA 混合存储结构，热点迁移； 低功耗图片服务器，高密度机架部署 主题：百度 - 系统部分布式计算平台介绍
马如悦 - “说得不好的，都是我的错；说得好的，都是百度的栽培”
这位很风趣，也敢说，抱怨上 …
章文嵩 - LVS创始人
TFS - Taobao File System, 分布式存储系统，大规模图片存储，9月份开源(code.taobao.org)； 生产环境 1PB 运行记录, 存储原始图片； 单节点配置 1000M x4 网卡； CDN 节点 SSD + SAS + SATA 混合存储结构，热点迁移； 低功耗图片服务器，高密度机架部署 主题：百度 - 系统部分布式计算平台介绍
马如悦 - “说得不好的，都是我的错；说得好的，都是百度的栽培”
这位很风趣，也敢说，抱怨上 …
网络设备IO 瓶颈～ 现在可以关注下 Linux 2.6.35, 包含 Google 提交的两项改进网络处理性能的新特性: Receive packet steering, Receive flow steering, 在多核环境下并行处理网络负载！
Release Notes: http://kernelnewbies.org/Linux_2_6_35
Transparent spreading of incoming network traffic load across CPUs
Recommended LWN articles: “Receive packet steering” and “Receive flow steering”
Network …
Release Notes: http://kernelnewbies.org/Linux_2_6_35
Transparent spreading of incoming network traffic load across CPUs
Recommended LWN articles: “Receive packet steering” and “Receive flow steering”
Network …
最近订阅到两则消息:
1. RackSpace.com 发布 OpenStack.org 开源云计算平台，包含核心组件 Object Storage 和 Compute
2. 美国国家宇航局 Nebula 云计算平台采用 OpenStack 构建.
RackSpace 是全球企业级IDC服务的领导者之一，几个基于 Cloud 的产品已经成熟运行多年，如今以 Apache 2.0 开源，其自信指数颇高。
有时间得研究下这个，目前开放、开源的，号称 “云” 的框架非常多，眼晕～
卖软件，任何软件，已经少有“技术含量”了，商业软件在整合 …
1. RackSpace.com 发布 OpenStack.org 开源云计算平台，包含核心组件 Object Storage 和 Compute
2. 美国国家宇航局 Nebula 云计算平台采用 OpenStack 构建.
RackSpace 是全球企业级IDC服务的领导者之一，几个基于 Cloud 的产品已经成熟运行多年，如今以 Apache 2.0 开源，其自信指数颇高。
有时间得研究下这个，目前开放、开源的，号称 “云” 的框架非常多，眼晕～
卖软件，任何软件，已经少有“技术含量”了，商业软件在整合 …
Sphinx 1.10 版本令人激动，在实时搜索、高并发、分布搜索效率、稳定性、功能、接口上都有不凡的表现：
# added RT indexes support (新功能，很可能会马上测试它)
# added prefork and threads support (workers directives) (非常好的改进，经简单测试，开启 prefork 后，一台双核 Xen 550x，并发从 600 提升到 2500, 数据量 180w; 如果把 poll 换成 epoll, 效率能否再高点？)
# added multi-threaded local searches in distributed indexes (d …
# added RT indexes support (新功能，很可能会马上测试它)
# added prefork and threads support (workers directives) (非常好的改进，经简单测试，开启 prefork 后，一台双核 Xen 550x，并发从 600 提升到 2500, 数据量 180w; 如果把 poll 换成 epoll, 效率能否再高点？)
# added multi-threaded local searches in distributed indexes (d …
Network Driver issue:
1. skip: select “No Device” for network detects.
2. download the latest “firmware-bnx2_{version}_all.deb” from packages.debian.org
3. save the firmware in your usb or cdrom… mount… then “dpkg -i firmware-bnx2__all.deb”
4. command:
rmmod bnx2
modprobe bnx2
update-initramfs -u
5. command:
vi /etc/network/interfaces …
/etc/init.d/udev restart
/etc/init. …
1. skip: select “No Device” for network detects.
2. download the latest “firmware-bnx2_{version}_all.deb” from packages.debian.org
3. save the firmware in your usb or cdrom… mount… then “dpkg -i firmware-bnx2_
4. command:
rmmod bnx2
modprobe bnx2
update-initramfs -u
5. command:
vi /etc/network/interfaces …
/etc/init.d/udev restart
/etc/init. …
互联网应用中，除了文本和视频，还有很多富媒体内容(doc,ppt,pdf…)应用
如:
www.slideshare.net
www.scribd.com
www.docstoc.com
国内有:
www.docin.com
doc.baidu.com
以上应用以共享为主，不难实现 :)
步骤大概是
doc,ppt,xls,txt,jpg… -> Convert to PDF -> Convert to SWF -> Flash Player
Step 1. 将所有文档格式转换到 PDF
核心部件: OpenOffice， 它几乎支持目前所有的主流文档格式转换，至少有两种接口:
1) 命令行接口，unocon …
如:
www.slideshare.net
www.scribd.com
www.docstoc.com
国内有:
www.docin.com
doc.baidu.com
以上应用以共享为主，不难实现 :)
步骤大概是
doc,ppt,xls,txt,jpg… -> Convert to PDF -> Convert to SWF -> Flash Player
Step 1. 将所有文档格式转换到 PDF
核心部件: OpenOffice， 它几乎支持目前所有的主流文档格式转换，至少有两种接口:
1) 命令行接口，unocon …
今天在曙光公司呆了一天，听他们讲解主要产品：服务器、刀片、存储、超算、解决方案。
当然，如果在同等硬件参数、价格差异不大的情况下，个人还是倾向买 Dell,HP,IBM,SUN 的产品，作为一个对 IDC 深有接触的程序员，我坚持认为“国外的苹果就是甜”。
但～ 如果非要比较这几个国产服务器厂商（曙光、浪潮、联想）中挑一个，就是曙光了，为了减少一家之言的影响，特意去浪潮、联想官网查资料：
浪潮：浪潮官方网站(刀片，存储)，内容很粗糙，描述很简略，可能他们的 …
当然，如果在同等硬件参数、价格差异不大的情况下，个人还是倾向买 Dell,HP,IBM,SUN 的产品，作为一个对 IDC 深有接触的程序员，我坚持认为“国外的苹果就是甜”。
但～ 如果非要比较这几个国产服务器厂商（曙光、浪潮、联想）中挑一个，就是曙光了，为了减少一家之言的影响，特意去浪潮、联想官网查资料：
浪潮：浪潮官方网站(刀片，存储)，内容很粗糙，描述很简略，可能他们的 …
微软发布一个概念短片，畅想下一代触摸交互技术，非常有意思：
视频地址(1) http://v.youku.com/v_show/id_XMTcyMzYwMzgw.html
视频地址(2) http://v.youku.com/v_show/id_XMTUxNjYxNDI4.html
当前，“云计算” 延伸了很多概念，要产品化，被用户接受，大规模使用，需要很多努力。 从客户那听得一句话，讲如何作产品设计，“从哲学上无法解释的，就是错的”～ 所以，工程师要懂点哲学、艺术 … :)
* 教育. 教育是种群延续的基础，教育资 …
视频地址(1) http://v.youku.com/v_show/id_XMTcyMzYwMzgw.html
视频地址(2) http://v.youku.com/v_show/id_XMTUxNjYxNDI4.html
当前，“云计算” 延伸了很多概念，要产品化，被用户接受，大规模使用，需要很多努力。 从客户那听得一句话，讲如何作产品设计，“从哲学上无法解释的，就是错的”～ 所以，工程师要懂点哲学、艺术 … :)
* 教育. 教育是种群延续的基础，教育资 …
Zend 官方网站发布了一个好东西: Simple Cloud API 1.0.0 alpha 1
相信，这个模块会并入正在开发中的 Zend Framework 2.x, 面向云计算通用数据接口.
SC API 包含三个核心:
File Storage 文件存储 Document Storage 文档存储 Simple Queues 简单队列 Zend Simple Cloud API 通过这三个通用接口，适配各主流云计算平台，并尝试将其标准化，简单化～
目前，Simple Cloud API已经实现 Amazon S3/SQS/SimpleDB, Mi …
相信，这个模块会并入正在开发中的 Zend Framework 2.x, 面向云计算通用数据接口.
SC API 包含三个核心:
File Storage 文件存储 Document Storage 文档存储 Simple Queues 简单队列 Zend Simple Cloud API 通过这三个通用接口，适配各主流云计算平台，并尝试将其标准化，简单化～
目前，Simple Cloud API已经实现 Amazon S3/SQS/SimpleDB, Mi …
加班到困乏，同事在测试 iphone 中翻到一首歌 《我相信》，歌词听不详，旋律很好，感觉亢奋，比几十杯咖啡、浓茶有效果！
小时候的很多梦想，不能让社会给“被现实”了，很幼稚，很曲折，无法实现… 但改变的过程，是精彩的！
我相信，去改变，世界就是我的！
—————————————————
《我相信》杨培安
[00:18.94] 想飞上天，和太阳肩并肩
[00:23.21] 世界等着我去改变
[00:27.21] 想做的梦从不怕别人看见
[00:31.79] 在这里我 …
小时候的很多梦想，不能让社会给“被现实”了，很幼稚，很曲折，无法实现… 但改变的过程，是精彩的！
我相信，去改变，世界就是我的！
—————————————————
《我相信》杨培安
[00:18.94] 想飞上天，和太阳肩并肩
[00:23.21] 世界等着我去改变
[00:27.21] 想做的梦从不怕别人看见
[00:31.79] 在这里我 …