作者qazsd (天际线)
看板Soft_Job
标题[请益] 将影片内容提取出大意的技术
时间Thu Jul 7 13:40:55 2022
请教一下
有没有哪门技术可以将影片内容提取出摘要
这似乎牵涉到影像辨识跟语音辨识等技术
深度学习及AI不知道是否有办法达成?
因为常常看到YT上感兴趣的影片但觉得从头看到尾蛮花时间的
如果有这门技术(影片摘要)那就太好了
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 180.177.0.90 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/Soft_Job/M.1657172459.A.F44.html
1F:推 FXW11314: GPT3或许可以吧 07/07 13:49
2F:→ DrTech: 这我以前做过,我们叫VCA,video content analysis。我们 07/07 13:52
3F:→ DrTech: 当时有卖云端服务,或自己做。後来我自己有做直接从影片产 07/07 13:52
4F:→ DrTech: 生剧情摘要。我的做法是,分析声音哪一段是剧情高潮,然後 07/07 13:52
5F:→ DrTech: 撷取声音或字幕片段,成为精彩片段。最後再将精彩片段的语 07/07 13:52
6F:→ DrTech: 音或字幕,转换成文字产生剧情大纲。 07/07 13:52
7F:→ DrTech: 应用上,可以透过文字搜到任意剧情片段。或产生精彩片段推 07/07 13:54
8F:→ DrTech: 荐。例如,当时我们可搜:某某明星的武打片,就直接给片段 07/07 13:54
9F:→ DrTech: 。这在中国的影音平台都有在做。 07/07 13:54
10F:→ DrTech: 这个在爱奇艺,以及我前公司,都是有上产品的功能。 07/07 13:55
11F:→ DrTech: 这技术最大的问题除了技术,重点是:非常耗费计算资源,所 07/07 14:00
12F:→ DrTech: 以大家都只做热门院线片,而且真的是赔钱做居多。 07/07 14:00
13F:→ DrTech: 我也有写过影评摘要的专利。直接输入一个影片,与需要摘要 07/07 14:02
14F:→ DrTech: 的时间长度。产生:该长度的影片摘要。 07/07 14:02
15F:→ DrTech: 这样就能,你搭飞机时,剩下30分钟,可看完一部电影摘要。 07/07 14:07
16F:→ DrTech: 拉屎5分钟,也可设定5分钟看完一部电影摘要。 07/07 14:08
17F:推 mistel: google video summarization应该就有很多paper了 07/07 15:57
18F:推 neo5277: 推推 07/07 16:10
19F:推 labbat: Google Auto Summary for Business 07/07 19:09
20F:推 knme: 推 07/07 23:33
21F:推 viper9709: 二楼好猛 07/08 00:16
22F:→ eva19452002: 我想知道如果是默剧也能提取出摘要吗? 07/08 07:17
23F:→ eva19452002: 或是没有配音的动物或旅游影片,输入关键字就会搜到 07/08 07:19
24F:→ eva19452002: 我想看的片段,比如说输入狮子狩猎或是海边沙滩就跳 07/08 07:20
25F:→ eva19452002: 该片段 07/08 07:20
26F:→ DrTech: 楼上说的动物辨识,与场景 scene辨识的功能都有,,动物辨 07/08 10:06
27F:→ DrTech: 识是最好做的因为open soure都有基本的语料,各家的差别在 07/08 10:06
28F:→ DrTech: 於後续愿意投入多少资源持续维护。特殊自订的场景辨识scen 07/08 10:06
29F:→ DrTech: e也能做,成本问题而已。 07/08 10:06
30F:→ DrTech: 默剧,可做到基础的搜寻,可以对辨识到的object 打上标签 07/08 10:11
31F:→ DrTech: 。搜寻object出现的时间点。但是要抽摘要片段,最大的问题 07/08 10:11
32F:→ DrTech: 是,如何定义与评价什麽是"好"。光是人来看,每个人的看法 07/08 10:11
33F:→ DrTech: 就不一样了。院线片是因为有音效,剧情,结尾通常比较精彩 07/08 10:11
34F:→ DrTech: 等强特徵,所以效果比较好。 07/08 10:11
35F:→ lance70176: 2F 说的内容好酷... 07/08 13:31
36F:推 ntpuisbest: 感谢D大分享,谢谢 07/09 14:53
37F:→ qazsd: 感谢D大分享,赞! 07/09 19:43
38F:推 stiiveo: 感谢科技博士分享! 07/23 01:02