火车头高铁采集器采集加密的*下载链接,搜索排名行业关键词怎么做

今天分享一个用高铁采集器采集加密的*下载链接的思路和经历。

要获取的内容位于一个Json页面，该页面的url是动态的，而且有个d值是加密的，比如：www.is96.com/movie/684c0100bbef8f211ea40a7f/downloadList?downloadUrlParam=886006dd089e3236334516cf1f8d2c4b0f08a70cda656cac33553e002aa905e0&d9957y1ow5soiXQ27r5fJbYcwxE3CzsjglwtIdwEZm4UV%2BeT6W1kAcqLjAMfd9km=tK%2Bj9bus4dRTAUTOLxJspw%3D%3D

源码中的js加密部分如下：

加密的d值，解密后得到886006dd089e3236334516cf1f8d2c4b0f08a70cda656cac33553e002aa905e0，然后拼接动态的dd值获得最终的包含下载链接的url。

这个解密的过程可谓是一波三折，开始拿d值去各个AI平台测试写脚本，折腾了好几天，都无法成功得到正确的结果。

今天还是有些不甘心，试着将所有源码丢给AI，让它给解密思路，没想到一下就成功了。

注意这里要用火车头中的C#来写脚本，因为解密之后才能拼接出完整的Json的url，还需要读取这个url才能获得里面的下载链接等信息。这里如果直接用插件的话，步骤会很复杂。

在得到url后，就方便多了，写一个简单的php插件，因为python插件的话需要安装环境，拿给别人用的话还有替他部署py环境，比较麻烦。所以还是php更方便。

插件比较简单，只需要读取上一步的url获取源码并返回即可。需要注意的是，要将头信息写入插件，或者写入标签，让插件来读取。

最后大功告成，顺便加一个替换规则，以便于过滤掉json源码中的不需要的内容。