手把手教你写爬虫
7篇文章 · 0订阅
  • APP逆向神器之Frida【Android初级篇】
    答案是有的，这个方法就是Hook，Hook的原理简单地说就是用一个新的函数替代掉原来的函数，在这个新的函数中你想做什么都可以，为所欲为。 本文中的Frida就是一个很常用的Hook工具，只需要编写一段Javascript代码就能轻松地对指定的函数进行Hook，而且它基本上可以算…
    爬虫
  • 当你写爬虫遇到APP的请求有加密参数时该怎么办？【初级篇-秒杀模式】
    小提示：之所以不提Kotlin，是因为在Kotlin下写加密、Hash操作的代码时如果不使用第三方库的话，就只能调用Java的标准库了，而第三方库的类名、方法名可能性太多了，不像标准库那样可以直接秒杀一大片，所以不属于本系列初级篇内容。（已询问多位Android开发同学验证此结…
    爬虫
  • 听说这个爬虫面试题很难？看完你就知道怎么做了
    最近有一个爬虫面试题（http://shaoq.com:7777/exam）在圈内看起来挺火的，经常在各个爬虫群里看到它被提到，而几乎所有提到这个面试题的人在题目限制的条件下就不知道该怎么办了，但这题目其实真的并不难，甚至可以说应该只是为了在招人时再过滤一遍只会写解析，拿着Se…
    爬虫
  • 当你写爬虫时遇上Flash+加密的解决方式
    首先，我们需要将这个页面上的Flash播放器给逆向一下，就像在爬HTML5视频网站碰到加密参数时逆向JavaScript一样。 但是Flash播放器是一个被编译后的.swf文件，我们并不能像JavaScript那样直接看到代码，需要先进行反编译。 如果这篇文章有帮到你，请大力点…
    爬虫
  • 当你写爬虫遇到APP的请求有加密参数时该怎么办？【初级篇-常规模式】
    嗯，在看完了《当你写爬虫抓不到APP请求包的时候该怎么办？》系列之后，同学们对抓APP的请求包应该已经是轻车熟路了吧。在对想爬的APP抓个包之后你可能会发现，只是抓到包似乎没有什么卵用啊，凡是有用的接口基本都有一个或多个加密的参数，而且它还每次请求都变，而自己去请求对应的接口时…
    爬虫
  • 当你写爬虫抓不到APP请求包的时候该怎么办？【高级篇-混淆导致通用Hook工具失效】
    提示：因为高级篇以后的APP将无法使用很通用的方式处理，每种类型甚至是每个APP的反抓包处理方式都会有差别，所以这个系列以后会以【高级篇-具体类型】的形式来写。 这篇文章的主要内容是解决在遇到APP没有使用Android自带的HTTP客户端进行请求，并且对HTTP客户端的代码进…
    爬虫