用Scrapy从SAP Firoi应用程序库中提取tile名称

我最近不得不创建一个所有部门使用的SAP tiles的列表。所以我以一种无聊的方式访问了https://fioriappslibrary.hana.ondemand.com/sap/fix/externalViewer/，这是找到你想要使用的应用程序的tile的主要来源。 因为这是一个有点长，缓慢和不愉快的方式来做，我试图使用Scrapy，我可以用来报废的网页数据。 当我用浏览器访问页面和搜索应用程序时，我可以复制和过去我想要的每个应用程序的这些信息。当用Chrome检查网站时，我可以看到包含我需要的数据的HTML部分。使用Scrapy并让它通过更改URL来搜索数据根本不起作用。每次我废弃一个站点时，都会抓取开始页面而不是我想要的页面。 是否有人遇到过类似的问题，或者知道如何“等待”合适的站点出现? 问题来源StackOverflow 地址：/questions/59380362/extract-tile-name-from-sap-firoi-apps-library-with-scrapy