图如何双曲建模?弗吉尼亚理工Amazon最新WWW2022「双曲神经网络:理论、架构和应用」教程

简介: 图如何双曲建模?弗吉尼亚理工Amazon最新WWW2022「双曲神经网络:理论、架构和应用」教程

【新智元导读】TheWebConf即将召开,来自弗吉亚理工和亚马逊等学者的《双曲神经网络》教程,值得关注!


TheWebConf是中国计算机学会(CCF)推荐的A类国际学术会议,由国际万维网会议委员会(IW3C2)和主办地地方团队合作组织,每年召开一次,今年是第31届会议,本年度论文录用率为17.7%,



图是普遍存在的数据结构,广泛应用于许多数据存储场景,包括社交网络、推荐系统、知识图谱和电子商务。这导致了GNN架构的兴起,用于分析和编码来自图的信息,以便在下游任务中获得更好的性能。


虽然图分析领域的初步研究是由神经结构驱动的,但最近的研究已经揭示了图数据集特有的重要属性,如层次结构和全局结构。这推动了对双曲空间的研究,因为它们能够有效地编码图数据集中存在的固有层次。


随后,该研究也被应用到其他领域,如自然语言处理和计算机视觉,取得了令人惊叹的结果。然而,进一步发展的主要挑战是双曲网络的晦涩,以及更好地理解必要的代数操作,以扩大应用到不同的神经网络结构。


在本教程中,我们的目标是向网络领域的研究人员和实践者介绍欧几里得运算的双曲等变,这是处理它们在神经网络架构中的应用所必需的。


此外,我们描述了GNN架构的流行双曲线变体,如递归网络、卷积网络和注意力网络,并解释了它们的实现,而不是欧几里得网络。


此外,我们还通过图分析、知识图谱推理、产品搜索、NLP和计算机视觉等领域的现有应用来激发我们的教程,并将性能提高与欧几里得的同类方法进行比较。


演讲内容



专知

,赞10


目录


结构


讲者介绍



Nurendra Choudhary是弗吉尼亚理工大学计算机科学系的博士生,在导师Chandan Reddy博士的指导下,他的研究重点是图分析和产品搜索领域的表示学习。


他在WWW、NeurIPS、WSDM和COLING等顶级会议上发表相关论文。他获得了国际信息技术学院计算语言学硕士学位,期间他获得了2018年CICLING的最佳论文奖。



Nikhil Rao是亚马逊的一名高级科学家,他在那里从事大规模图建模和算法的研究,以改进亚马逊搜索。在加入亚马逊之前,他是帕洛阿尔托Technicolor AI Labs的研究员。


Nikhil的研究兴趣和专长包括大规模优化、数据建模和挖掘,以及开发利用数据结构的算法。Nikhil在顶级会议和期刊上发表了几篇论文。他获得了来自UT Austin的ICES博士后奖学金和IEEE最佳学生论文奖。他拥有UW Madison的电气和计算机工程博士学位。



Karthik Subbian是亚马逊的首席科学家,拥有超过17年的行业经验。他领导着一个由科学家和工程师组成的团队来提高搜索质量和信任度。


在亚马逊,他领导了一个由科学家和工程师组成的团队,利用社交网络结构及其交互来探索信息传播和用户建模问题。此前,他在IBM T.J. Watson研究中心的商业分析和数学科学部门工作,是Facebook的一名研究科学家和负责人。


他的专业领域包括机器学习、信息检索和大规模网络分析。更具体地说,网络中的半监督和监督学习、个性化和推荐、信息扩散和表示学习。他拥有印度科学研究所(IISc)的硕士学位和明尼苏达大学的博士学位,都是计算机科学专业。


Karthik获得了许多著名奖项,包括IBM博士奖学金、2013年SIAM数据挖掘(SDM)会议的最佳论文奖和2013年INFORMS Edelman桂冠奖。


教程节选



参考资料:

[1]Code Library: GraphZoo: Facilitating learning, using, and designing graph processing pipelines/models systematically.

[2]Choudhary, N., Rao, N., Katariya, S., Subbian, K., & Reddy, C. K. (2022, February). ANTHEM: Attentive Hyperbolic Entity Model for Product Search. In Proceedings of the International Conference on Web Search and Data Mining 2022. (pdf)

[3]Choudhary, N., Rao, N., Katariya, S., Subbian, K., & Reddy, C. (2021). Probabilistic Entity Representation Model for Reasoning over Knowledge Graphs. Advances in Neural Information Processing Systems, 34. (pdf)

[4]Choudhary, N., Rao, N., Katariya, S., Subbian, K., & Reddy, C. K. (2021, April). Self-Supervised Hyperboloid Representations from Logical Queries over Knowledge Graphs. In Proceedings of the Web Conference 2021 (pp. 1373-1384). (pdf)

[5]Chami, I., Ying, Z., Ré, C., & Leskovec, J. (2019). Hyperbolic graph convolutional neural networks. Advances in neural information processing systems, 32, 4868-4879. (pdf) Ganea, O. E., Bécigneul, G., & Hofmann, T. (2018). Hyperbolic neural networks. Advances in neural information processing systems, 5345-5355. (pdf) Shimizu, R., Mukuta, Y., & Harada, T. (2021). Hyperbolic neural networks++. Interna

相关文章
|
6月前
|
运维 监控 数据可视化
Python 网络请求架构——统一 SOCKS5 接入与配置管理
通过统一接入端点与标准化认证,集中管理配置、连接策略及监控,实现跨技术栈的一致性网络出口,提升系统稳定性、可维护性与可观测性。
|
7月前
|
安全 网络协议 算法
Nmap网络扫描工具详细使用教程
Nmap 是一款强大的网络发现与安全审计工具,具备主机发现、端口扫描、服务识别、操作系统检测及脚本扩展等功能。它支持多种扫描技术,如 SYN 扫描、ARP 扫描和全端口扫描,并可通过内置脚本(NSE)进行漏洞检测与服务深度枚举。Nmap 还提供防火墙规避与流量伪装能力,适用于网络管理、渗透测试和安全研究。
1095 1
|
11月前
|
小程序 前端开发
2025商业版拓展校园圈子论坛网络的创新解决方案:校园跑腿小程序系统架构
校园跑腿小程序系统是一款创新解决方案,旨在满足校园配送需求并拓展校友网络。跑腿员可接单配送,用户能实时跟踪订单并评价服务。系统包含用户、客服、物流、跑腿员及订单模块,功能完善。此外,小程序增设信息咨询发布、校园社区建设和活动组织等功能,助力校友互动、经验分享及感情联络,构建紧密的校友网络。
411 1
2025商业版拓展校园圈子论坛网络的创新解决方案:校园跑腿小程序系统架构
|
9月前
|
JSON 监控 API
在线网络PING接口检测服务器连通状态免费API教程
接口盒子提供免费PING检测API,可测试域名或IP的连通性与响应速度,支持指定地域节点,适用于服务器运维和网络监控。
1434 0
|
11月前
|
人工智能 监控 安全
NTP网络子钟的技术架构与行业应用解析
在数字化与智能化时代,时间同步精度至关重要。西安同步电子科技有限公司专注时间频率领域,以“同步天下”品牌提供可靠解决方案。其明星产品SYN6109型NTP网络子钟基于网络时间协议,实现高精度时间同步,广泛应用于考场、医院、智慧场景等领域。公司坚持技术创新,产品通过权威认证,未来将结合5G、物联网等技术推动行业进步,引领精准时间管理新时代。
|
8月前
|
网络协议 Python
水声网络(UAN)仿真的信道建模(Matlab代码实现)
水声网络(UAN)仿真的信道建模(Matlab代码实现)
258 0
|
10月前
|
机器学习/深度学习 移动开发 供应链
基于时间图神经网络多的产品需求预测:跨序列依赖性建模实战指南
本文展示了如何通过学习稀疏影响图、应用图卷积融合邻居节点信息,并结合时间卷积捕获演化模式的完整技术路径,深入分析每个步骤的机制原理和数学基础。
366 1
|
数据采集 存储 监控
Python 原生爬虫教程:网络爬虫的基本概念和认知
网络爬虫是一种自动抓取互联网信息的程序,广泛应用于搜索引擎、数据采集、新闻聚合和价格监控等领域。其工作流程包括 URL 调度、HTTP 请求、页面下载、解析、数据存储及新 URL 发现。Python 因其丰富的库(如 requests、BeautifulSoup、Scrapy)和简洁语法成为爬虫开发的首选语言。然而,在使用爬虫时需注意法律与道德问题,例如遵守 robots.txt 规则、控制请求频率以及合法使用数据,以确保爬虫技术健康有序发展。
1522 31
|
11月前
|
机器学习/深度学习 算法 测试技术
图神经网络在信息检索重排序中的应用:原理、架构与Python代码解析
本文探讨了基于图的重排序方法在信息检索领域的应用与前景。传统两阶段检索架构中,初始检索速度快但结果可能含噪声,重排序阶段通过强大语言模型提升精度,但仍面临复杂需求挑战
393 0
图神经网络在信息检索重排序中的应用:原理、架构与Python代码解析
|
11月前
|
Cloud Native 区块链 数据中心
Arista CloudEOS 4.32.2F - 云网络基础架构即代码
Arista CloudEOS 4.32.2F - 云网络基础架构即代码
247 1

热门文章

最新文章