竞赛通知

第六届全国并行应用挑战赛评分规则发布

浏览次数:888 发布时间:2018-07-02 10:07:00

PAC2018作品提交规则与评分细则发布如下,请报名参赛的各参赛队仔细阅读并按照规则要求完成预选赛作品提交。祝你们取得好成绩!

 

应用组

比赛平台及题目

 

1.采用Intel平台作为参赛队资源;

2.应用程序为自研软件或开源软件的优化,面向实际应用领域,参赛作品为非既定的基准测试代码。

评分规则

 

1.实用科学性(20%)

a.应用的科学意义,参赛应用是否具有解决实际问题的科学意义,说明其应用领域、可产生的效益等。

2.算法创新性(30%)

a.算法及其实现的创新性,重点在新型计算模型与计算方法、解决大规模应用问题,解决系统瓶颈问题(如内存容量和带宽,网络通讯和IO问题),及如何获得性能提升等方面的创新。

b.技术创新性和再创新性,重点评价所提交的应用成果的水平,包括数据、论文、可视化展示等,所提交作品均需提供相比上一版本的创新性说明。

c. 如果是人工智能相关的应用,将特别评估机器学习算法的创新,并行分布式机器学习的实现,应用的最终识别、理解的精度,以及泛化能力。

3.并行化实现(30%)

a.实际应用性能,参赛应用所能达到的实际浮点运算性能评估。

b.可扩展性,参赛应用的最大运算规模、加速比和运行效率。

4.方法普适性与应用推广(20%)

a.成果的可推广性:参赛应用及其核心方法是否可被业界其他科研人员借鉴和推广。

作品提交规则

 

1.自行命题应用程序

a.应用程序源代码建议提交,以便组委会用来审查结果的真实性,组委会保证不会将代码外泄或用于商业传播。

b.参赛者应确保代码可以重新编译运行。

2.性能优化过程记录表

3.应用运行特征数据文件

4.技术报告录音PPT

a.提交一份录音PPT文件(限时3分钟内),包含讲解演示 PPT,代码运行结果。

5.创新性说明文件

a.提交一份原创性说明文件,申明算法原创性或优化改进部分,并说明对其他作品的引用和区别。

6.论文

a.进入决赛的队伍要求提交论文,选优推荐到EI、SCI期刊上发表。

 

优化组

比赛平台

 

1.代码基准编译器为:Intel Compiler 2018 Update2

默认编译选项为 -O3

2.优化组采用Intel至强处理器平台

比赛规则

 

1.比赛成绩使用百分制

2.优化组比赛分为两个阶段。初赛和决赛

a.预选赛包括线上答题部分(30%),线下优化(70%)。

b.预选赛的线下优化部分成绩计入决赛成绩(20%)。

3.优化后代码必须通过结果正确性验证不得改动代码的计时部分违反任何一项,成绩作废。

4.每场比赛的具体评分规则和标准会和赛题一起发布。

5.预选赛一题,成绩带入决赛;

决赛两题,按题目难度设置分值(分值同赛题一起公布)。

评分规则

 

优化代码评分按照程序的运行时间进行排名。

作品提交规则

 

1.优化版源代码

a.提供的源代码包含Makefile,可进行重新编译,并且能够正确生成可执行文件

b.要求提供的源代码不涉及版权问题;大赛组委会不负责保障源代码安全

2.性能优化过程记录表

3.技术报告录音PPT

 

人工智能组

评分规则

 

1.题材可用性&实用性(30%)

a.所递交方案是否能在实际场景中部署应用及解决相关问题

b.所递交方案是否有实用性(性价比)

 

2.算法先进性(40%)

a.所递交方案是否提供所需端对端(数据源至输出结果)完整算法功能

b.所递交方案是否具有效率先进性

c.所递交方案是否提出创新性算法来解决问题

d.所递交方案是否可以使用可视化方式来展现最终结果

侧重考查点:

具体到本题侧重考查以下三点

a.选手对门店文字区域是否能有效识别

b.选手对多文字的门店图片是否能够有效甄别店铺名称和宣传性文字

c.选手是否能够对金融行业中需进行人工审核的工作提出有效的人工智能辅助方案

 

3.构架先进性及易用性(30%)

a.所递交方案是否具有可扩展性来适应大数据量大吞吐业务扩展

b.所递交方案是否使用通用计算平台

c.所递交方案是否方便地与现有应用构架所整合(如实时处理、流式处理、BI系统等)

作品提交方案

 

1.给定命题实现源代码

建议全部提交,但应说明代码只用来审查结果的真实性,而不用于商业传播,参赛者应确保代码可以重新编译运行。

2.性能优化过程记录表

3.应用原始数据和运行特征数据文件

4.技术报告录音PPT文件

建议提交一份技术报告录音PPT(限时3分钟以内) 包含讲解演示 PPT和必要的演示代码运行结果。

5.创新性说明文件

建议提交一份版权说明文件,申明算法原创性,并说明对其他作品的引用和区别。

6.如果参赛应用跑在具体硬件平台上得到了具体结果,需要提交硬件详细配置。

 

以上为本次竞赛各赛道作品提交规则与评分规则。如有疑问,请联系竞赛官方邮箱:pac@paratera.com

 

PAC2018报名日期截止至2018年7月25日

报名方式:

扫描二维码关注竞赛官方微信了解详情

                             \

 

 

 

上一条:PAC2018人工智能组赛题发布 下一条:第六届全国并行应用挑战赛参赛通知