《中国人工智能学会通讯》——9.8 发展趋势

简介: 本节书摘来自CCAI《中国人工智能学会通讯》一书中的第9章,第9.8节, 更多章节内容可以访问云栖社区“CCAI”公众号查看。

9.8 发展趋势

目前哈希学习已被广泛关注并在某些应用领域取得了初步成效, 但还有很多重要的问题有待解决。我们认为以后的工作可以从如下五个方面进行进一步探索。

(1)目前哈希学习理论分析方面的工作还很少。 用哈希码表示数据后 , 数据相当于进行了有损压缩。在后续的处理中 , 比如检索或者挖掘过程中 ,基于哈希码表示的数据得到的模型能在多大程度上逼近从原始数据得到的模型 , 即精确度如何 , 目前还没有相关的理论分析。另外 , 针对一个具体问题或应用 , 到底需要多少位编码才能保证结果达到一定的精确度 , 目前都是根据在验证集上的实验结果来进行选择 , 是否存在一些理论上的指导也非常值得研究。

(2)在基于松弛的两步学习策略中,虽然按位参数优化策略能自动地弥补量化过程中损失的信息 , 但目前大部分模型的目标函数并不适合于这种优化方式。为其他模型设计能弥补量化过程信息损失的优化策略 , 还需要进行进一步的研究。另外 ,基于图的哈希学习(图哈希学习)中,需要构建样本对之间的关系来指导哈希码的学习。例如 , 在基于图的监督哈希学习中,如果样本 i 和 j 属于同一类 ,则 Y(i, j)=1, 否则 Y(i, j)=0。 然后再基于 Y 矩阵来建模。如果要利用所有样本对之间的关系,存储和计算开销都至少是训练样本数的平方级。 哈希学习研究近几年之所以这么热 , 正是因为它能够被用来处理大数据。 当存在海量的训练数据 , 图哈希学习模型的参数训练和优化过程将变得非常慢,甚至不可行。我们近期在可扩展的快速图哈希学习方面取得了初步的进展[60] ,但该工作只是针对非监督场景和一类特殊的目标函数。针对其他的图哈希学习模型,如何设计快速的参数优化算法 , 也是有待解决的关键问题之一。还有,在基于松弛的两步学习策略中,虽然最近出现的量化策略[28,47,61]已经取得了比传统量化策略更好的性能 , 但相关工作还不多,没有形成系统的研究。

(3)相对于基于松弛的两步学习策略,离散哈希学习更接近于哈希学习的原始目标。因此,在相同的训练集规模上,离散哈希学习方法的表现往往优于基于松弛的两步学习策略。但离散哈希学习面临的问题是参数优化的复杂度较高,从而导致能处理的训练集规模有限。因此,如何设计快速的离散优化策略,将是离散哈希学习中最重要,也是最具挑战性的问题。

(4)深度哈希学习中最具有前景的思路是将特征学习过程和哈希码学习过程整合到一个统一的端到端的框架中,让这两个过程相互提供反馈。现有的很多深度哈希学习方法只是直接采用或者简单改进已有的深度网络结构来完成特征学习。针对哈希学习任务,是否需要设计专门的深度网络结构,还值得我们进一步探索和验证。此外,深度哈希学习也面临着计算复杂度高的问题。目前大部分深度哈希学习方法采用的训练集规模都较小(几千个样本点的规模)。因此,设计快速的学习策略以有效利用更大规模的训练数据,也是深度哈希学习中值得进一步探索的关键问题。

(5)在有些大数据应用中,数据会以在线(流式)的方式或者分布式的方式收集和存储,因此,需要设计在线哈希学习[62-63]和分布式哈希学习[64]算法来处理此类应用。目前这两方面的工作还不多,还有很多值得深入探索的问题。

相关文章
|
人工智能 自然语言处理 搜索推荐
讲解人工智能在现代科技中的应用和未来发展趋势。
讲解人工智能在现代科技中的应用和未来发展趋势。
|
机器学习/深度学习 人工智能 运维
未来人工智能发展趋势探析
【2月更文挑战第3天】随着人工智能技术的迅速发展,未来的人工智能将呈现出令人瞩目的发展趋势。本文将从数据驱动、自动化、跨学科融合等方面进行探讨,展望未来人工智能的发展方向。
279 1
|
机器学习/深度学习 人工智能 自然语言处理
ChatGPT的应用与发展趋势:解析人工智能的新风口
ChatGPT的应用与发展趋势:解析人工智能的新风口
692 0
|
人工智能 自然语言处理 监控
讲解人工智能在现代科技中的应用和未来发展趋势。
讲解人工智能在现代科技中的应用和未来发展趋势。
185 0
|
11月前
|
数据采集 人工智能 缓存
深挖“全栈智算”之力 中兴通讯开启AI普惠新纪元
深挖“全栈智算”之力 中兴通讯开启AI普惠新纪元
316 1
|
机器学习/深度学习 人工智能 资源调度
未来人工智能技术的发展趋势与应用前景
随着人工智能技术的快速发展,未来在各个领域都将有更广泛的应用。本文探讨了人工智能技术的发展趋势以及在前端、后端开发等领域的应用前景,展望了未来人工智能将如何改变我们的生活和工作方式。
|
机器学习/深度学习 人工智能 物联网
《未来智能时代下的人工智能发展趋势与挑战》
【2月更文挑战第5天】随着人工智能技术的不断发展,我们迎来了智能时代的到来。本文将探讨人工智能在未来的发展趋势和面临的挑战,分析其在各个领域的应用前景和影响。
692 1
|
人工智能
从《2024年人工智能指数报告》 看AI的最新发展趋势
【斯坦福HAI发布2024年AI指数报告】揭示AI发展10大趋势:AI在特定领域超人但复杂任务仍有挑战;产业界主导AI创新,推出大量模型;训练成本飙升,如GPT-4训练耗资近8千万美元;美国领先,中国持续突破;大模型责任评估缺失;生成式AI投资增长;AI提升工作效率,缩小技能差距;加速科学进步;法规增多;全球对AI既期待又担忧。关注公众号AntDream获取更多详情!
2149 3
从《2024年人工智能指数报告》 看AI的最新发展趋势
|
人工智能 安全 Anolis
中兴通讯分论坛邀您探讨 AI 时代下 OS 的安全能力 | 2024 龙蜥大会
操作系统如何提供符合场景要求的安全能力,构建更加安全可信的计算环境。
|
搜索推荐 物联网 语音技术
未来智能家居中的人工智能技术发展趋势
智能家居已经成为当今科技领域的热门话题,而人工智能技术在智能家居中的应用更是成为了未来的关键发展方向。本文将探讨未来智能家居中人工智能技术的发展趋势,包括语音识别、智能推荐、情感交互等方面的创新应用,展望未来智能家居的美好前景。
372 27

热门文章

最新文章