第一句子大全,网罗天下好句子,好文章尽在本站!

美学评价和图像语义信息识别在人类认知层面上是相互关联的

时间:2018-11-08

但用户通常是在理解了图像语义的基础上来进行评估图像的美学质量,即对一幅图像进行美学评价时,用户会首先感知到图像内容,然后再进行评价,所以美学评

友情提示:本文共有 955 个字,阅读大概需要 2 分钟。

在现有工作中,图像美学评价学习大多被处理成一个独立的任务。但用户通常是在理解了图像语义的基础上来进行评估图像的美学质量,即对一幅图像进行美学评价时,用户会首先感知到图像内容,然后再进行评价,所以美学评价和图像语义信息识别在人类认知层面上是相互关联和相互作用的。

为提升图像美学质量评价和语义分析的精度,现有的研究是通过使用参数硬共享的多任务方法来实现。但目前深度模型无法精确确定分离层位置,只能使用暴力穷举法,导致在训练过程中费时费力。

另一方面,由于人类的审美不尽相同,对于同一张图像,不同的人具有不同的美学感知。由于图像的美学质量评价具有主观性,而且现有美学分析数据集中图像的美学评分一般也是多人打分得到的,因此,在设计图像美学质量评价网络模型中模拟人的主观评价过程非常重要。

本文的第一个研究工作以使用深度网络训练方法来建立美学与语义的多任务学习框架为着力点,提出了一种新颖的深度神经网络模型,用于图像美学质量评价和语义内容识别的多任务学习。

该方法通过利用多任务学习中参数软共享方法制定学习策略,将图像美学质量评价和语义内容识别任务耦合起来统筹解决,有效地学习任务间的关联关系和各自任务的特征。

其中该方法在通道维度学习全局信息,在空间维度学习局部信息后,在通道和空间两个维度来进行任务间的特征自适应融合,使每个任务有效特征进行增强、无效特征进行抑制。

并且通过加入自学习的参数来保证任务学习过程中的稳定。该方法使用独立分支的多任务学习框架最终提升了图像美学质量评价与语义识别任务共同的实验性能。

本文通过详细的消融实验,证明方法的可行性,并确定了模型的配置细节。另外本文通过全面的对比实验,与目前典型的方法进行了对比,实验结果验证了该方法的先进性和稳定性。

本文第二个研究工作借鉴美学分析数据集设计的思想,通过模拟图像美学质量的评估过程,构建了由三个深度卷积神经网络组成的多分支网络来模拟多个用户从不同角度对同一幅图像进行美学评价的过程。

在网络学习过程中,通过在各个分支网络学习图像美学表达过程中插入了多分支特征融合模块进行特征交互,从而可以组合和构造出更有效的图像美学特征,来提升图像美学质量评价任务的准确率。

经过在两个公开的基准图像美学分析数据库上的实验对比,充分验证了该方法在图像美学质量评价任务上的优异性能。

本文如果对你有帮助,请点赞收藏《美学评价和图像语义信息识别在人类认知层面上是相互关联的》,同时在此感谢原作者。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。
相关阅读
有道文档翻译系统全面升级 可一键翻译图像型PDF文档

有道文档翻译系统全面升级 可一键翻译图像型PDF文档

...件就是其中一种,转换的时候就需要用到OCR技术,把图像识别出来变成文字。在遇到大量PDF文档需要翻译时,一般的做法是将PDF复制到Word文档中或者用第三方软件将文档转化,然后再利用翻译网站上进行翻译。在转化过程中会...

2023-12-11 #经典句子

【学术中国·文学】文学 文化与现代化

【学术中国·文学】文学 文化与现代化

...自信是文化建设的起点,终点是他信、互信、共信,实现人类命运共同体。这是一种连续性和整体性的思考。就中国文学来说,文化自信是基础,是文学之根。文化自信应该包含个人文化、族群文化和人类文化的自信。而人类文...

2014-08-13 #经典句子

NASA公开“立方体飞船”图像!太阳附近采集能量?疑似高等级文明

NASA公开“立方体飞船”图像!太阳附近采集能量?疑似高等级文明

随着科技的发展,越来越多的人类科技进入太空当中,很多科学家早已经不满足于让人类科技停留在地球上了,科学家们已经做好了探索宇宙的打算,并且也是不断地向太空当中发射人类科技,为的就是能够对宇宙奥秘多一些了...

2017-12-26 #经典句子

汉人们对于良马已有了相当统一的标准 通过文物图像可以反映出来

汉人们对于良马已有了相当统一的标准 通过文物图像可以反映出来

...阳杨家湾汉墓丛葬坑出土东汉名将马援喜欢骑马,也善于识别良马。他曾经在交趾获得很多当地人使用的铜鼓,用它们铸造「马式」,并且给皇帝上表,说自己的「马式」采用了当时流传的几家相马法综合而成。这样的铜马曾经...

2015-10-11 #经典句子

美术研究|艺术符号学在李泽厚美学话语体系建构中的肯綮之功!

美术研究|艺术符号学在李泽厚美学话语体系建构中的肯綮之功!

...、语言、符号的相关情感心灵研究》将哲学、符号学以及人类的心灵情感有机联系起来,并最终在洋洋洒洒的三卷本《心灵:论人类情感》中将上述问题回归到人的本身,在范围最为广泛的人类文化建构的基础上,形成了完整的...

2023-07-26 #经典句子

微软研发绘图机器人 根据文字描述画出相应图像

微软研发绘图机器人 根据文字描述画出相应图像

...有帮助的事物。至于人工智能艺术家在现实世界中如何为人类服务,微软公司有一些想法。这表明该机器人可以作为画家或室内设计师的素描助手,或者可以作为声控美化照片的工具来被使用。 (“Cortana,请你为我画一只鸟”...

2023-05-09 #经典句子

通过语言与图像制造悬念

通过语言与图像制造悬念

...可视的叙事背景带来的感染力和沉浸感会使影片外观众的认知和判断被影片内的语言和图像引导,从而难以真正理性地对影片内的事件做出判断,这样一来,影片便能够通过语言和图像建构悬念。语言配合图像制造和消解悬念语...

2023-09-24 #经典句子

ACM MM最佳论文全文:通过多对抗训练 从图像生成诗歌

ACM MM最佳论文全文:通过多对抗训练 从图像生成诗歌

...者收集了两个诗歌数据集,它们有如下性质:1) 第一个是人类注解的“图像-诗歌”对数据集(共8,292对),以及2)迄今为止最大的公共英文诗歌语料数据集(共有92,265首不同的诗歌)。我们应用自己的模型生成了八千张图像,进...

2023-08-26 #经典句子