110 likes | 401 Views
大数据与云计算系统评测论坛 (2nd BPOE). 詹剑锋 中科院计算所 http://prof.ict.ac.cn/jfzhan 2013 年 10 月 31 日 , 桂林. 什么是基准测试程序 (Benchmarks)?. 系统结构、系统、数据管理 尺子 “If you cannot measure it, you cannot improve it”. Lord Kelvin 计算机应用 : 竞赛题目 信息检索: TREC KDD: KDD Cup. Benchmarks 对工业界和用户的重要性. 工业界 系统设计的依据
E N D
大数据与云计算系统评测论坛 (2nd BPOE) 詹剑锋 中科院计算所 http://prof.ict.ac.cn/jfzhan 2013年10月31日, 桂林
什么是基准测试程序(Benchmarks)? • 系统结构、系统、数据管理 • 尺子 • “If you cannot measure it, you cannot improve it”. Lord Kelvin • 计算机应用: • 竞赛题目 • 信息检索:TREC • KDD: KDD Cup
Benchmarks 对工业界和用户的重要性 • 工业界 • 系统设计的依据 • 产品优劣的参考标准 • 用户 • 世上有三种谎言: 谎言,该死的谎言和benchmarks
Benchmark对研究者的重要性 • Benchmark是研究问题的具体场景。 • 系统领域研究生:没找到Benchmark去开题,风险很大 • 评价和比较方法好坏的基准。 • 选择Benchmark的代表性和多样性直接决定研究的深度 • 副产品:发表论文的水平。
什么是BPOE? 一系列研讨会 主页: http://prof.ict.ac.cn/bpoe B: Big Data Benchmarks PO: Performance Optimization E: Emerging Hardware
Workshop 计划 • 国际 (发表论文+邀请报告):一年两次 • Data management conference • IEEE Big data • 系统+体系结构 • ASPLOS ? • 国内(邀请报告) • HPC China 和大数据技术大会(原Hadoop in China) • 欢迎加入!
BPOE: a series of workshops • 1st BPOE in conjunction with IEEE Big Data 2013 • Santa Clara, CA, USA • Paper presentations + 2 Invited talks • 2st BPOE in conjunction with CCF HPC China 2013, • 组织者: 詹剑锋,喻之斌 • Program Chair: Xiaoyi Lu (OSU) , 朱妤晴(ICT, CAS) • Guilin, Guangxi, China • 8 invited talks • 所有报告都放到网上 http://prof.ict.ac.cn/bpoe
Workshop program (1) (1) OSU,Panda教授, Challenges in Benchmarking and Evaluating Big Data Processing Middleware Modern Clusters (2) 网安,刘欣然主任,虚拟计算环境下的大数据处理实践 (3) 中科院计算所,王磊高工, BigDataBench: 大数据基准测试程序,开源系统(提供光盘) (4) 网易公司高级研究员,王健宗,网易的大数据实践之路
Workshop program (2) (5)中科院计算所史英杰博士,BigDataBench, 大数据平台的性能和能耗效率评测, 开源系统, 提供光盘 (6) 中科院大学徐俊刚教授, 云平台的调度评测, 开源系统, 提供光盘 (7) 中科院计算所,贾禛博士生, DCBench: 数据中心基准测试程序, IISWC Best paper award , 开源系统,提供光盘 (8) 南洋理工大学,Haikun Liu, Bingsheng He ,面向虚拟云平台的资源分配评测
预告 • 3st BPOE in conjunction with CCF Big Data Technology Conference 2013 (大数据技术大会,原Hadoop in China) • 组织者:詹剑锋, 杜小勇教授, • 12月5号-6号 • Beijing, China • 7 invited talks • 两个Session: 系统(3)+数据管理(4) • TPC Co-chair Raghu