爱意满满的作品展示区。
jiezhi

将某美剧网站所有下载链接保存下来了,需要自取

  •  1
     
  •   jiezhi ·
    Jiezhi · May 10, 2016 · 6281 views
    This topic created in 3655 days ago, the information mentioned may be changed or developed.

    最近在追《疑犯追踪》,发现在美剧网站上一个一个复制链接下载到网盘很是繁琐,索性写了个脚本直接将下载链接以 csv 格式保存下来以便批量下载。

    既然都动手了,那就干脆再将网站上所有美剧的下载链接爬了下来以备不时之需,大概 380 个页面,当然这些只适合追老剧。

    如果有需要可以直接下载我抓下来的:(点击去下载

    脚本也放Github

    16 replies    2016-05-11 10:30:55 +08:00
    Hansee
        1
    Hansee  
       May 10, 2016 via iPhone
    Tks!
    slixurd
        2
    slixurd  
       May 10, 2016
    我都是直接写 js ,然后扔到控制台跑一下
    不过如果有好几季就得手动跑好几次
    copy($($("body").find("a")).map(function(){if(/magnet/.test($(this).attr("href")))return ($(this).attr("href"))}).get().join("\n"))
    jiezhi
        3
    jiezhi  
    OP
       May 10, 2016
    @slixurd 原理都一样啦,哪怕在网页源码里直接用正则也可以,但每次还得去手写一遍,干脆直接都抓下来再说了(:
    realpg
        4
    realpg  
    PRO
       May 10, 2016
    为啥我看 POI 之前你不搞这个……
    strwei
        5
    strwei  
       May 10, 2016
    右键,本页所有磁力链接用迅雷下载
    jiezhi
        6
    jiezhi  
    OP
       May 10, 2016
    @strwei 我是用妖妖舞网盘看的
    jiezhi
        7
    jiezhi  
    OP
       May 10, 2016
    @realpg 你要看其他的美剧还有机会的
    mahone3297
        8
    mahone3297  
       May 10, 2016
    这么说,我之前也写了个。。。这个站是还可以
    https://github.com/mahone3297/hades/tree/master/src/python/scrapy/cn163
    mahone3297
        9
    mahone3297  
       May 10, 2016
    lz ,你的代码只是一个页面,要爬所有数据,还需要再写个脚本
    jiezhi
        10
    jiezhi  
    OP
       May 10, 2016
    @mahone3297 我的那个页面应该是网站可追溯的第一篇帖子了,所以抓取完后再递归抓取其下一页即可,该网站没有死链的话。
    4679kun
        11
    4679kun  
       May 10, 2016 via Android
    一行 shell 命令

    curl -s "http://cn163.net/archives/58/" | sed 's/ /\n/g' | sed 's/>/\n/g' | sed 's/</\n/g' | grep "ed2k" | sed 's/\"//g' | sed 's/href=//g' | sed 's/data-ke-src=//g' | uniq | grep "HDrip"
    jiezhi
        12
    jiezhi  
    OP
       May 10, 2016 via iPhone
    @4679kun 你这还得加上对迅雷和磁力链接的支持😊
    4679kun
        13
    4679kun  
       May 10, 2016 via Android
    @jiezhi 把命令中的 ed2k 替换成 magnet 不就行了
    gamecreating
        14
    gamecreating  
       May 10, 2016
    CN163 ...这博客不错
    ziyuan
        15
    ziyuan  
       May 10, 2016
    CN163 ...这博客不错+1
    MozzieCN
        16
    MozzieCN  
       May 11, 2016
    CN163 ...这博客不错+1
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   952 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 43ms · UTC 21:47 · PVG 05:47 · LAX 14:47 · JFK 17:47
    ♥ Do have faith in what you're doing.