久久国产精品视频在线
栏目分类
精品福利你的位置:久久国产精品视频在线 > 精品福利 > 全球最大的第一视角视频数据集开源,取自真实生活,还能提升厨艺
全球最大的第一视角视频数据集开源,取自真实生活,还能提升厨艺

2021-10-23 12:23    点击次数:107

  安妮 编译整理量子位 出品 | 公众号 QbitAI

最近,一个有趣的视频数据集被打开了,它不仅可以帮助你的研究事业,还可以提高你的烹饪技能。

这个把平底锅和视频播放键结合在一起的图像,就是刚刚打开的Epic Kitchens数据集的logo。

你可能已经猜到了,这个数据集与厨房有关。

没错,在第一视角的这段视频的数据集中,记录了很多多角度、无脚本的局部环境中的厨房场景。

都来源于摄影师真实的日常饮食,采用新颖的实时音频评论方式收集评论,因为摄影师做饭的时候总喜欢自言自语~

世界上最大的烹饪第一视角视频数据包里有什么?这是一个介绍性的视频——

Https://www.zhihu.com/video/968147555759063040【/S2/】成分分析【/S2/】Epic Kitchens数据集包含哪些内容?我们来看看这个数据集的“组成”表-

视频采集城市:4个包含的厨房数:32个视频总时长:55小时(全高清,60fps)总帧数:11500000帧动作片段:39594个物体边界框数:454158个

数据集中的视频由操作员的头戴式摄像机收集,包含多种语言的描述,包括125个动词和331个名词。

组件统计研究人员对Epic Kitchens中的视频数据进行了分类,想看看这个数据集是什么样的场景。

统计显示,数据集中的视频大多来自晚餐时间,晚上7-8点是采集的高峰期。9-10: 00也是小聚高峰,所以数据的来源群体似乎有吃早午餐的文化。

数据集中,43.14%的视频处于烹饪阶段,17.55%是做相关准备的数据采集员,16.48%的视频是供他们刷洗的。

研究人员利用视频中的标注生成标签云,“开”“关”“拿”“锅”“叉”“勺”“刀”都是占比很大的关键词。

在标注的动作统计中,“放”、“拿”、“洗”等关键动作出现了上千次。做饭就是捡了又放下~

视频中提到最多的对象是各种厨具,其次是各种调味料和蔬菜。

研究团队这项研究由来自布里斯托大学、多伦多大学和卡塔尼亚大学的11名研究人员完成,研究论文《缩放自我中心视觉:史诗般的厨房数据集》也发表在arXiv上。

第一篇论文是一个叫马頔·达曼的年轻姐姐,她目前是布里斯托大学的高级讲师,负责计算机视觉研究。

达曼的研究经常名列前茅。今年2月,她的论文《谁更好,谁最棒》获CVPR2018,而《跨越边界:为以自我为中心的视频中的对象交互标注临时边界》获ICCV2017。她还被评为ICCV2017最佳评论者。

获取方式

要获取这个数据集的相关信息,有几种方法可以打开~

项目地址:

epic-kitchens.github.io/2018

论文地址:

arxiv.org/abs/1804.02748

数据集下载地址:

data.bris.ac.uk/data/dataset/3h91syskeag572hl6tvuovwv4d

代码地址:

github.com/epic-kitchens/annotations

祝你们俩学习和烹饪都有好的收获~

作者是网易新闻网易号的签约作者。“各有各的态度”。

-结束-

欢迎来到我们的专栏:量子位-知乎专栏。

真诚招聘

量子正在招聘编辑/记者,在北京中关村工作。期待有才华、有热情的同学加入我们!详情请回复QbitAI对话界面的“招聘”二字。

量子qbitai头条号签名作者。

跟踪人工智能技术和产品的新发展。



Powered by 久久国产精品视频在线 @2013-2021 RSS地图 HTML地图

2013-2021 版权所有