优酷网(Youku.com)架构经验

向右看齐 2022-08-13 14:46 195阅读 0赞

原贴: [http://www.dbanotes.net/arch/youku\_arch.html][http_www.dbanotes.net_arch_youku_arch.html]

# [优酷网(Youku.com)架构经验][http_www.dbanotes.net_arch_youku_arch.html] #

作者: **[Fenng][]** | 可以转载, 转载时务必以超链接形式标明文章原始出处和作者信息及[版权声明][Link 1]  
 网址: [http://www.dbanotes.net/arch/youku\_arch.html][http_www.dbanotes.net_arch_youku_arch.html]

这次 [QCon (北京)会议][QCon]网站架构案例分析这个 Track ，虽然话题不多，但课程设计时候考虑覆盖的面还是比较广的。作为视频网站代表，优酷带来了一场包含不少实战经验的技术分享。[邱丹][Link 2](优酷网开发副总裁，核心架构师)可能公司的事情比较忙，一直到第二天中午才赶到会场。还半开玩笑说，'怎么这么多人，还以为是小型的会议呢'...

![Youku\_Qiu.jpg][Youku_Qiu.jpg]

**缓存**

缓存黄金原则：**让数据更靠近 CPU**。

CPU-->CPU 一级缓存-->二级缓存-->内存-->硬盘-->LAN-->WAN

讲到了 Youku 自己的内部项目，针对大文件缓存的。目前开源软件中，Squid 的 write() 用户进程空间有消耗，Lighttpd 1.5 的 AIO(异步I/O) 读取文件到用户内存导致效率也比较低下。Youku 不用内存做缓存(避免内存拷贝，避免内存锁)。值得注意的是，缓存技术容易被滥用，也有副作用，比如接到老大哥通知要把某个视频撤下来，如果在缓存里是比 较麻烦的。

**数据库**

优酷对数据库 Sharding 做了不少尝试，而且实现效果应该不错。DB 读写分离上有比较丰富的经验。

![Youku\_Sharding.png][Youku_Sharding.png]

为了提升数据库 I/O 能力，启用了 SSD 。6 块 SSD 做 RAID 。我在 Twitter 上发了一则 Youku 使用了 SSD 的消息，很多朋友以为是用来存储视频文件，这里需要澄清一下--只是局部使用。

**网络吞吐量优化**

这是我强烈要求加上来的一节内容。网络优化，视频网站肯定都做得不错。这一节的关键词是 "事件(event)驱动"，令人深刻的一句话是 "ePoll 推动当今 Web" ，的确，现在很多比较热的 Web 组件都是以 [ePoll ][ePoll]为卖点。

延伸阅读: [The C10K problem][] (我一直想翻译一下这个页面，苦于腾不出时间) 与 [Libevent][] 如果做互联网，遇到扩展性问题，这两个信息点还是避不过去的。

最后一个例子是针对 Memcached 的 Agent 的，这一点和 [Facebook 架构中的 Memcached 处理][Facebook _ Memcached]可以对照来看。

演讲结束的时候，有人提问优酷对视频缓存上有什么特别的地方? 回答是一个大视频可能分成多个小文件，这样缓冲的时候就效果更好一点--(并行啦)...其实访问优酷的确比土豆快那么一点点。

\--EOF--

PPT 过几天[ InfoQ 中文站][InfoQ]会发布。稍安勿躁。

# [优酷网(Youku.com)架构经验][http_www.dbanotes.net_arch_youku_arch.html] #

![Youku\_Qiu.jpg][Youku_Qiu.jpg]

**缓存**

缓存黄金原则：**让数据更靠近 CPU**。

CPU-->CPU 一级缓存-->二级缓存-->内存-->硬盘-->LAN-->WAN

**数据库**

优酷对数据库 Sharding 做了不少尝试，而且实现效果应该不错。DB 读写分离上有比较丰富的经验。

![Youku\_Sharding.png][Youku_Sharding.png]

**网络吞吐量优化**

最后一个例子是针对 Memcached 的 Agent 的，这一点和 [Facebook 架构中的 Memcached 处理][Facebook _ Memcached]可以对照来看。

\--EOF--

PPT 过几天[ InfoQ 中文站][InfoQ]会发布。稍安勿躁。

[http_www.dbanotes.net_arch_youku_arch.html]: http://www.dbanotes.net/arch/youku_arch.html
[Fenng]: http://www.dbanotes.net/
[Link 1]: http://creativecommons.org/licenses/by-nc-sa/2.5/
[QCon]: http://www.qconbeijing.com/
[Link 2]: http://www.qconbeijing.com/Speaker.aspx?Id=29
[Youku_Qiu.jpg]: http://www.dbanotes.net/Images/Youku_Qiu.jpg
[Youku_Sharding.png]: http://www.dbanotes.net/Images/Youku_Sharding.png
[ePoll]: http://lse.sourceforge.net/epoll/index.html
[The C10K problem]: http://www.kegel.com/c10k.html
[Libevent]: http://www.monkey.org/%7Eprovos/libevent/
[Facebook _ Memcached]: http://www.dbanotes.net/arch/facebook_arch_note.html
[InfoQ]: http://www.infoq.com/cn/