相信大家都有被下载限速折腾的时候，为了解决这个问题，我们可以把某网盘的下载链接提取出来，用一些不限速的软件或者买了 VIP 的软件来下载。大致看了一下，网上的方法大致分为三类：
 
安装插件法、手动提取法、代码法 (AJAX)
 
安装插件法
 
实际上只是增加了一个外壳，而且还有可能存在安全隐患，而且还容易被和谐，我尝试了两个插件，最后都以失败告终。
 
手动提取法
 
本质就是从 Response 中找到下载链接(dlink)，图文步骤参见「百度百科 - 获取百度网盘下载链接」。
 
代码法（推荐）
 
实质是使用代码自动提取下载链接，如果懒得去翻网页源代码可以用这种方式，使用步骤如下：
 
1 创建链接
 
把需要下载的资源存到自己的网盘中，然后创建公开链接。
 
 
 
2 输入代码
 
使用浏览器（带有调试功能的，推荐 chrome）打开创建的链接，按 F12 进入开发者模式，找到 Console 控制台，粘贴下面的代码：
 
$.ajax({
type: "POST",
url: "/api/sharedownload?sign="+yunData.SIGN+"&timestamp="+yunData.TIMESTAMP,
data: "encrypt=0&product=share&uk="+yunData.SHARE_UK+"&primaryid="+yunData.SHARE_ID+"&fid_list=%5B"+yunData.FS_ID+"%5D",
dataType: "json",
success: function(d){
window.location.href = d.list[0].dlink;
}
});
 
然后回车，浏览器就会自动下载文件啦！
 
 如果想使用迅雷等工具，可以在浏览器的下载栏里右键选择复制链接，然后在迅雷里新建任务，再也不用担心网盘下载限速了！因为我用了 IDM 下载器，输入代码后直接就弹出了下载页面，很给力哟。
 

Htmlunit 添加接口方法->拦截获取下载链接
 
 
 
 
htmlunit是一款很不错的爬虫工具，它可以模拟不同浏览器进行网页的请求，然后进行页面数据的爬取，根据你选择的浏览器，会有不同的爬虫效果和速度的差异，而且还能获取到下载链接。
 
 
 
 
 
在此处要讨论的是htmlunit爬取酷安时，虽能获取APP的下载链接，但却是酷安的认证链接（会失效），在请求认证链接后，进行重定向后才能获取最终的链接，然而，在重新请求时，因为时下载链接，故会进行下载文件，最终才会返回请求结果（真实的下载链接）。 
 由于此过程会进行下载文件，故爬取速度非常慢，因此想到在htmlunit中添加一个接口到请求的链接中，当发现是最终的请求链接时，则记录此链接，并终止此请求的处理，从而实现快速获取下载链接。
 
 
0.准备htmlunit源码并导入Eclipse
 
 
 
下载链接（教程选择版本2.29，以maven3.5.2版导入成功）： 
 https://sourceforge.net/projects/htmlunit/files/htmlunit/
 
 
 
1.添加拦截接口
 
定位到WebClient.java文件[com.gargoylesoftware.htmlunit.WebClient]中。 
 添加如下接口方法：
 
    /**
     * 需要匹配的链接组
     */
    private static ConcurrentHashMap<String, MatchHref> needMatchHrefMap=new ConcurrentHashMap<String, MatchHref>();

    /**
     * @param origionUrl 原始的链接
     * @param matchHref 需要匹配的链接
     */
    public static void RegisterListenHref(String origionUrl,MatchHref matchHref){
        if (matchHref!=null&&!needMatchHrefMap.containsKey(origionUrl)) {
            needMatchHrefMap.put(origionUrl, matchHref);
        }
    }
    /**
     * 匹配新的链接，提供接口给用户自定义
     * 当有url符合要求时结束任务
     */
    public interface MatchHref{
        /** 判断该链接是否符合要求
         * @param url 链接
         * @return 是否符合
         */
        public boolean isMatched(String url);
    }
 
 
 
将接口方法添加到的loadWebResponseFromWebConnection方法中调用， 
 直接搜索定位到此处：：
 
 
newUrl = expandUrl(url, locationString);
 
 
 
在其前面添加如下接口方法：
 
 
                //-----额外部分
                String fromUrl=null;
                try {
                    fromUrl=webResponse.getWebRequest().getAdditionalHeaders().get("Referer");
                } catch (Exception e) {
                    System.out.println("获取来源Url错误"+e.getMessage());
                }
                if (fromUrl!=null&&!fromUrl.isEmpty()) {
                    boolean qualify = needMatchHrefMap.get(fromUrl).isMatched(locationString);
                    if (qualify) {//当符合时结束后续进程
                        needMatchHrefMap.remove(fromUrl);
                        throw new MalformedURLException("获取到下载链接:downUrl=["+locationString+"]");
                    }
                }
                //------结束

                newUrl = expandUrl(url, locationString);
 
2.测试
 
 
 
新建一个test.java文件，然后添加如下内容:
 
 
public static void main(String[] args) {
        System.out.println("Hello World!");
        try {
            Crawler("https://www.coolapk.com/apk/com.kingsoft.calendar");
            Crawler("https://www.coolapk.com/apk/tv.danmaku.bili");
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    private static String urlResult;

    public static String Crawler(String url) {
        WebClient client = new WebClient(BrowserVersion.CHROME);
        try {
            client.getOptions().setUseInsecureSSL(true);
            client.getOptions().setCssEnabled(false);
            HtmlPage page = client.getPage(url);
            // 定位下载按钮位置（酷安改版过一个次，所以请按情况找到Xpath并替换）
            List<Object> byXPath = page.getByXPath("//button[@class='apk_topbar_btn']");
            HtmlButton object = (HtmlButton) byXPath.get(0);

            WebClient.RegisterListenHref(url,new MatchHref() {
                // 实现监听
                @Override
                public boolean isMatched(String url) {
                    if (!url.contains(".coolapk.com")&&!url.contains("url=") && url.contains(".apk")) {
                        urlResult = url;
                        return true;
                    }
                    return false;
                }
            });
            Page pageNew = object.click();
        } catch (Exception e) {
            System.out.println("获取的下载链接:" + urlResult);
            client.close();
            return urlResult;
        }
        return urlResult;
    }
 
运行结果如下： 
 

相信大家都比较困惑，百度网盘客户端限速后一般只有几十K的下载速度，Windows有百度网盘破解版，但MAC的破解版似乎不存在，要提速的话，一般的做法是开超级会员(27元/月)，身为程序员的我们，是不是有更黑科技一点的方法呢？答案是肯定的，接下来我介绍一种正在使用的方法。（此方法不需要百度网盘客户端）
 
第一步：下载所需工具：（①②步我放在同一个文件夹，可一起下载，链接失效请留言）
 
工具地址：链接: https://pan.baidu.com/s/1raicYzM 密码: ve3n
 
①下载Aria2GUI主程序，完成Aria2GUI的安装
 
 ②下载chrome插件包，解压后随便放到一个地方(以后勿删除)
 
第二步：配置Chrome浏览器
 
①：打开Chrome浏览器，点击偏好设置-扩展程序-勾上”开发者模式“，随后将第一步②中解压后的整个chrome文件夹拖入Chrome浏览器界面，即可完成插件的安装。
 
第三步：下载你网盘里想下载的内容
 
①：打开第一步①中安装好的Aria2GUI
 
②：找到你要下载的东西，分享（无密码分享），然后会获得一个分享链接，复制这个链接，新建浏览器窗口打开，浏览器会提示”初始化完成“，界面中会多了一个”导出下载“选项，鼠标移动到这个选项上，点击ARIA2 RPC选项（请看注意部分）。
 
注意：（如果提示请先勾选需要下载的文件，勾选后导出下载按钮不见了的话；刷新浏览器，在页面尚未加载完时勾选文件或者文件夹，浏览器加载完以后，文件还会是勾选状态，而导出下载按钮不会消失，此时问题解决，可进行下一步)
 
③：随后返回第一步①中安装好的Aria2GUI，点击refresh，可发现任务已经在下载，速度取决于你的网速。
 
以下是我的网速的截图，本人使用的宽带小，所以突破限速也只是700K/s。
 

 百度云的限速简直丧心病狂。下载居然只有几百KB，所以找了几个破解版，奈何都不好用。只好研究怎么获取下载地址，结果在某博客找到以下代码：
 
 
 $.ajax({
 type: “POST”,
 url: “/api/sharedownload?sign=”+yunData.SIGN+”&timestamp=”+yunData.TIMESTAMP,
 data: “encrypt=0&product=share&uk=”+yunData.SHARE_UK+”&primaryid=”+yunData.SHARE_ID+”&fid_list=%5B”+yunData.FS_ID+”%5D”,
 dataType: “json”,
 success: function(d){
 window.location.href = d.list[0].dlink;
 }
 });
 
 就是上边这段代码。具体用法。进入某个百度云的地址（只能是单文件）。比如测试地址：http://pan.baidu.com/s/1pKSUoo7。
 测试浏览器：QQ浏览器（别的浏览器也可以。找到控制台可以输入代码的地方）
 
 操作方法：打开地址->等待浏览器完全载入完毕->F12->Console->输入代码->回车->获取到下载地址
 
 
 
 原帖地址