智源研究院开源 AI 硬件评测引擎FlagPerf v1.0
站长网2023-09-28 08:46:260阅
智源研究院发布了 FlagPerf v1.0,这是一个开源开放的 AI 硬件评测引擎。
FlagPerf 的评测指标体系包括功能正确性指标、性能指标、资源使用指标和生态适配指标。其中,功能正确性指标验证芯片对模型运行的支持,性能指标评估芯片的训练时间和计算吞吐量,资源使用指标衡量芯片和服务器其他零部件的使用情况,生态适配指标考察芯片对不同框架和软件生态的支持能力。
FlagPerf 已经涵盖了自然语言处理、计算机视觉、语音和多模态等领域的20余个经典模型,50余个训练样例,并与多家 AI 软硬件厂商进行深度合作,完成了与不同芯片和框架的适配和评测。
此外,FlagPerf 还支持多样例场景和任务,覆盖大模型训练推理场景。它不仅支持多种训练框架和推理引擎,还支持多种测试环境,包括单卡、单机和多机,以全面评估 AI 芯片的性能和适用性。
在评测过程中,FlagPerf 严格审核参评代码,确保结果公平、过程公正。所有测试代码都已开源,测试过程和数据可复现。
FlagPerf 开源项目:https://github.com/FlagOpen/FlagPerf
0000
评论列表
共(0)条相关推荐
研究发现:AI机器人传教士导致宗教信任度下降,捐款减少
随着人工智能在各行各业的应用越来越广泛,机器人传教士和人工智能程序为分享宗教信仰提供了新的方式,不过美国心理学会研究表明,这可能会降低宗教的可信度并减少依赖宗教团体的捐款。站长网2023-07-26 09:59:250004在夜校,年轻人用五百元“重启人生”
图源备注:图片由AI生成,图片授权服务商Midjourney“夜校”的概念,正在全国风靡。11月6日,央视新闻报道,上海夜校的秋季班火爆到65万人同时在线抢课,达到了一课难求的程度。短时间内,夜校风吹遍了全国各地,打开小红书,北京夜校、西安夜校、深圳夜校、成都夜校、天津夜校、长沙夜校纷纷开启了学员招募。站长网2023-11-12 10:29:100000魅族21正面照公布 1.74mm四等边
魅族21的正面照片近日被曝光,魅族集团董事长兼CEO沈子瑜在微博上发布了这一消息,并强调这是通过物理四等边技术实现的。魅族21的正面设计极具视觉冲击力,采用了6.55英寸三星直屏,其上下左右边框宽度均为1.74mm,上部中间有一个摄像头,带来了极致的视觉效果。这一设计理念源于魅族对产品完美无缺的追求,希望给用户带来真正的物理四等边体验,而非视觉上的四等边。站长网2023-11-15 18:27:300000阿里巴巴推AI画图框架SCEdit 可显著减少训练参数
阿里巴巴的新项目SCEdit是一个AI画图框架,可以显著减少训练参数、内存使用率和计算开销。在训练阶段,它减少了52%的内存消耗,仅利用ControlNet所需参数的7.9%,并实现内存使用量减少30%。项目地址:https://scedit.github.io/站长网2023-12-27 11:22:070000GitHub放大招!CEO现场挑战18分钟开发小游戏,人还在台上网友已经玩到了
GitHubCEO,直播AI写代码,挑战18分钟完成一个小游戏。结果只用了不到15分钟,直接成功在线部署,这边人还在讲台上,全球网友已经能玩上了。整个项目从一片空白的新建文件夹开始。全程只需要提出需求,看AI表演,然后一键导入代码,连CtrlC、CtrlV都省了。超额完成任务,节省下来的时间还可以用来演讲,以实际行动说明了什么叫“10倍程序员”。站长网2023-05-04 15:06:520001