Fusion-io为Spotify音乐数据库提速
合集下载
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
ቤተ መጻሕፍቲ ባይዱ
F u s i o n — i o为 S p o t i f y音 乐 数 据 库 提 速
F u s i o n — i o近 日宣 布 ,全球 在 线音 乐 的 领 导 者 S p o t i f y
在其数据中心采用 F u s i o n i o Me mo r y平 台 之后 ,提 升 了 其 音乐 数 据 库 的速 度 , 从 而能 够 更 快 速 地 向世 界 各 地 的
C a s s a n d r a数 据 库 , 而 它正 是助 力 S p o t i f y音 乐 平 台 运 行 的
杂性换 取编 码端的简单化 , 并 且能 够实现 高效 的压缩 , 重建图 像质量接近传统 编码方式 。 另外 , 由于它是对个信源应用独立 编码器进行编码 , 避免了传感器节点间的信 息交互 , 简化了传 感器网络分 布结构的设计 ,节省了 由于信息交换带来的带宽 要求和能量消耗 。
r 7 】 李 文. 大规模低功耗无线传 感器网络安全技术研 究【 D 】 . 浙 江大学研 究生学位论 文, 2 0 1 1 : 5 8 — 6 8 .
【 8 】 A K YI L DI Z I , ME L OD I A T , CHOW DH URY K. Wi r e l e s s Mu lt i me ia d S e n s o r Ne wo t r k s : A s u r v e y [ 1 ] . I E E E Wi r e l e s s
⑤ 应用 层 :应用层 包括一 系列 基于 监测任务 的应用软
件, 如多媒 体编 码和 网内数据处理等。 目前 多媒体编码的研 究
主要集 中在分布式信源编码方 面。在无 线多媒体传感器 网络 中 ,不同节点采集的图像 以及 同一节点 采集 的视频信 息帧之 间都有非常强的空间及时间相关性 ,若 采用传统 的联合解码
【 4 】 郑国强、 李建 东等. 无线传 感器网络 MAC协议研 究进展 Ⅱ 】
.
自动化 学报, 2 0 0 8 , 3 4 ( 3 ) : 3 0 5 - 3 1 6 .
[ 5 ] 董武世, 柯 宗武, 陈年生. 无线多媒体传感器 网络的 Qo S 路
由算法Ⅱ 】 . 武汉理 工大学学 ̄ I L O ) . 2 0 0 9 , 3 3 ( 4 ) : 7 8 3 — 7 8 6 . 拥 塞 控 制和 报 头 控制 信 息容 易产 生时 延 抖 动 ,限 制 了 在 f 6 】 A K YI L DI Z I , ME L ODI A T , C HOW DHUKY K . Wi r e l e s s
关键 。如 S p o t i f y这 样 的 Hy p e r s c a l e领 导 者 在 其 服 务 器 中 使用 F u s i o n i o S c a l e ,有 效地 保 持 了 其 在 日渐 增 长 的 全球 网 络 流 行 文 化 业 务 上 的 速 度 优 势 。不 同 于 固 态 盘 ,
技 术 论 坛
计 算 机 与 网 络 创 新 生 活
6 7
④ 传输层 : 在传输层有 2 个协议 , T C P和 U DP 。传输 层 【 2 】 马 超, 叶湘滨, 胡 冰. 无线多媒体传感 器网络 中相机节点的
的作用是负责将数据可靠地传输至节点或基站。在流媒体 等 实时应用 中 , 实时性比可靠性 更要求更高 , 所以 UDP协议 比 较适用 。 而在 WMS N 中, 由于节点能量有限 , 数据在源节点处 进行 了大规模的压缩处理 , 冗余尽可能地减少 , 这 样从源节点 传输 出的数据大都是不可恢复的重要 内容 。 而 UDP协议在拥 塞时会简单地丢包 , 造成重要数据丢失并且无法恢复 , 所 以在 WMS Ns 中 UDP 协 议并不合适 。 T C P协议 以及类似协议由于
方式 对无线 多媒体传 感器网络节点采集的 图像进行编 码 , 为
了消除冗余信息 , 节点间 须进行大量的无线收发 , 若对视频 进行编码 , 编码端节点进行复杂的运动估计及运动补偿 , 这将 使得编码端复杂f 受能耗远远 高于解码 端。但在无线 多媒体 传感器网络中 , 编码端节点资源和能量严重受限 , 而解码端节
设 计 与 实现 Ⅱ 】 . 传 感 器 与微 系统 , 2 0 0 8 , 2 7 ( 1 2 ) : 7 9 — 8 1 .
[ 3 】 马华 东, 陶 丹. 多媒 体传 感器网络及其研究进展 [ J ] J o u r n a l
o f S o f t wa r e , 2 0 0 6 , 1 7 ( 9 ) : 2 0 1 3 — 2 0 2 8 .
W MS Ns 中 的 应用 ;
Mu l t i me d i a S e n s o r Ne t wo r k s : A p p l i c a t i o n s a n d Te s t b e d s Ⅱ 】 .
P r o c e e in d g s o f t h e I E E E , 2 0 0 8 , 9 6 ( 1 0 ) : 1 — 1 8 .
点处理能力很强 , 因此传统的编解码方式不再合适。 针对这种
情况 , 分布式信 合, 它 以增加解码端的复
听 众提 供 更 优质 的 音 乐服 务 。
集 成到 S p o t i f y数 据 中 心 服 务 器 的 F u s i o n i o Me mo r y 平 台 ,能 够 为 其 最 重 要 的 应 用 提 速 ,如 开 源 的 A p a c h e
6结束 语
分析 了 WMS N 的背景 、 研究进展 、 关键技术和应用前景 , 并且在 WMS N 中的应 用 、 MAC协议 、 Qo s 路 由和 分布式 源
F u s i o n — i o为 S p o t i f y音 乐 数 据 库 提 速
F u s i o n — i o近 日宣 布 ,全球 在 线音 乐 的 领 导 者 S p o t i f y
在其数据中心采用 F u s i o n i o Me mo r y平 台 之后 ,提 升 了 其 音乐 数 据 库 的速 度 , 从 而能 够 更 快 速 地 向世 界 各 地 的
C a s s a n d r a数 据 库 , 而 它正 是助 力 S p o t i f y音 乐 平 台 运 行 的
杂性换 取编 码端的简单化 , 并 且能 够实现 高效 的压缩 , 重建图 像质量接近传统 编码方式 。 另外 , 由于它是对个信源应用独立 编码器进行编码 , 避免了传感器节点间的信 息交互 , 简化了传 感器网络分 布结构的设计 ,节省了 由于信息交换带来的带宽 要求和能量消耗 。
r 7 】 李 文. 大规模低功耗无线传 感器网络安全技术研 究【 D 】 . 浙 江大学研 究生学位论 文, 2 0 1 1 : 5 8 — 6 8 .
【 8 】 A K YI L DI Z I , ME L OD I A T , CHOW DH URY K. Wi r e l e s s Mu lt i me ia d S e n s o r Ne wo t r k s : A s u r v e y [ 1 ] . I E E E Wi r e l e s s
⑤ 应用 层 :应用层 包括一 系列 基于 监测任务 的应用软
件, 如多媒 体编 码和 网内数据处理等。 目前 多媒体编码的研 究
主要集 中在分布式信源编码方 面。在无 线多媒体传感器 网络 中 ,不同节点采集的图像 以及 同一节点 采集 的视频信 息帧之 间都有非常强的空间及时间相关性 ,若 采用传统 的联合解码
【 4 】 郑国强、 李建 东等. 无线传 感器网络 MAC协议研 究进展 Ⅱ 】
.
自动化 学报, 2 0 0 8 , 3 4 ( 3 ) : 3 0 5 - 3 1 6 .
[ 5 ] 董武世, 柯 宗武, 陈年生. 无线多媒体传感器 网络的 Qo S 路
由算法Ⅱ 】 . 武汉理 工大学学 ̄ I L O ) . 2 0 0 9 , 3 3 ( 4 ) : 7 8 3 — 7 8 6 . 拥 塞 控 制和 报 头 控制 信 息容 易产 生时 延 抖 动 ,限 制 了 在 f 6 】 A K YI L DI Z I , ME L ODI A T , C HOW DHUKY K . Wi r e l e s s
关键 。如 S p o t i f y这 样 的 Hy p e r s c a l e领 导 者 在 其 服 务 器 中 使用 F u s i o n i o S c a l e ,有 效地 保 持 了 其 在 日渐 增 长 的 全球 网 络 流 行 文 化 业 务 上 的 速 度 优 势 。不 同 于 固 态 盘 ,
技 术 论 坛
计 算 机 与 网 络 创 新 生 活
6 7
④ 传输层 : 在传输层有 2 个协议 , T C P和 U DP 。传输 层 【 2 】 马 超, 叶湘滨, 胡 冰. 无线多媒体传感 器网络 中相机节点的
的作用是负责将数据可靠地传输至节点或基站。在流媒体 等 实时应用 中 , 实时性比可靠性 更要求更高 , 所以 UDP协议 比 较适用 。 而在 WMS N 中, 由于节点能量有限 , 数据在源节点处 进行 了大规模的压缩处理 , 冗余尽可能地减少 , 这 样从源节点 传输 出的数据大都是不可恢复的重要 内容 。 而 UDP协议在拥 塞时会简单地丢包 , 造成重要数据丢失并且无法恢复 , 所 以在 WMS Ns 中 UDP 协 议并不合适 。 T C P协议 以及类似协议由于
方式 对无线 多媒体传 感器网络节点采集的 图像进行编 码 , 为
了消除冗余信息 , 节点间 须进行大量的无线收发 , 若对视频 进行编码 , 编码端节点进行复杂的运动估计及运动补偿 , 这将 使得编码端复杂f 受能耗远远 高于解码 端。但在无线 多媒体 传感器网络中 , 编码端节点资源和能量严重受限 , 而解码端节
设 计 与 实现 Ⅱ 】 . 传 感 器 与微 系统 , 2 0 0 8 , 2 7 ( 1 2 ) : 7 9 — 8 1 .
[ 3 】 马华 东, 陶 丹. 多媒 体传 感器网络及其研究进展 [ J ] J o u r n a l
o f S o f t wa r e , 2 0 0 6 , 1 7 ( 9 ) : 2 0 1 3 — 2 0 2 8 .
W MS Ns 中 的 应用 ;
Mu l t i me d i a S e n s o r Ne t wo r k s : A p p l i c a t i o n s a n d Te s t b e d s Ⅱ 】 .
P r o c e e in d g s o f t h e I E E E , 2 0 0 8 , 9 6 ( 1 0 ) : 1 — 1 8 .
点处理能力很强 , 因此传统的编解码方式不再合适。 针对这种
情况 , 分布式信 合, 它 以增加解码端的复
听 众提 供 更 优质 的 音 乐服 务 。
集 成到 S p o t i f y数 据 中 心 服 务 器 的 F u s i o n i o Me mo r y 平 台 ,能 够 为 其 最 重 要 的 应 用 提 速 ,如 开 源 的 A p a c h e
6结束 语
分析 了 WMS N 的背景 、 研究进展 、 关键技术和应用前景 , 并且在 WMS N 中的应 用 、 MAC协议 、 Qo s 路 由和 分布式 源