VidChapters-7M:更全面的视频导航新工具
站长网2023-10-27 22:14:530阅
VidChapters-7M 是一个拥有700万个用户制作章节标记的大型视频集合。这个新的数据集有助于创建和测试将视频分割成章节并为其命名的方法,从而使观众更容易找到他们想要的内容。
VidChapters-7M 的创建者希望这个工具能够改善目前视频导航的不足,让用户更轻松地找到感兴趣的内容。
项目地址:https://antoyang.github.io/vidchapters.html
该数据集的章节标记是由用户手动添加的,所以每个标记都是根据他们自己的理解和需求添加的。这个数据集将有助于开发更好的自动标记方法,从而更好地满足用户的需求。
核心功能:
视频章节生成:VidChapters-7M支持视频章节生成任务,包括将视频在时间上进行切割,并为每个片段生成章节标题。这有助于用户更轻松地定位和浏览视频内容。
三项任务定义:该数据集不仅包括视频章节生成任务,还定义了两个任务变种。一是在给定地面真实边界的情况下生成视频章节标题,二是根据章节标题找到章节的时间位置。
性能基准测试:VidChapters-7M为这三项任务提供了性能基准测试,包括简单基线方法和最先进的视频-语言模型,帮助研究者评估和改进他们的模型。
预训练应用:这个数据集不仅用于章节研究,还表现出在密集视频字幕任务中的出色性能。它可以在零样本学习和微调设置下,大幅提高相关任务的性能。
实验证明:研究还揭示了预训练数据集的规模对下游任务性能的显著影响,为模型训练提供了有力的支持。
0000
评论列表
共(0)条相关推荐
美团宣布收购光年之外 后者为王慧文AI创业公司
6月29日,美团在港交所公告称,已订立交易协议以收购光年之外的全部权益,总代价包括现金233,673,600美元;债务承担人民币366,924,000元;及现金人民币1.00元。光年之外由美团联合创始人、公司前董事及关连人士王慧文创立及控制。于转让协议(互为条件)交割完成后,美团将持有光年之外集团的100%权益。站长网2023-06-30 08:40:200000AGI时代下,谁还会用小程序?
因AI带来的商业挑战,促使人思考「商业容器」,进而重估小程序。我们会发现奇特的中国互联网现象:大抵是有正确的出发点和目标,走到半途目标一变。全然扭曲。自2022年底以来,在ChatGPT于全球范围引爆“iPhone时刻”之后,身处时代变局之中的各路企业们也开始思考这样一个问题:是否需要自有「商业容器」(BussinessDocker)?当然,这种想法并非杞人忧天。站长网2023-05-25 09:25:550000支付宝与华为合作 启动鸿蒙原生应用开发
支付宝与华为终端宣布合作,启动鸿蒙原生应用开发,进一步完善鸿蒙生态布局。双方合作将满足用户在不同终端和场景下的智慧生活服务需求。据悉,支付宝作为数字支付和数字互联开放平台,已服务8000万商家和10亿消费者。华为表示,鸿蒙原生应用的开发体现了鸿蒙原生应用的新发展。双方将在数字化服务等领域拓展合作,共建新生态,服务国内用户和市场。0000微信公众平台要求短剧小程序缴纳保证金
据上证报报道,今日有用户陆续收到微信公众平台发布的保证金缴纳通知。通知称,根据《小程序交易保证金管理规定》,你的小程序“XX剧场”需要缴纳保证金。微信公众平台提醒,需在2023年12月17日前完成缴纳,否则相关功能可能收到限制,包括但不限于限制小程序搜索等。0000苹果计划2024年彻底改革iPad产品线 使每款产品有独特卖点
彭博社记者MarkGurman表示,苹果有意在2024年对其iPad系列进行全面革新。目前,苹果的iPad系列包括五种主要型号:Pro、Air、Mini,以及第九代和第十代基础款iPad。尽管它们在屏幕尺寸、芯片和功能上有所区别,但这些差异对于大多数消费者来说可能并不明显。0000