Shopee App加密逆向实战：从抓包到算法还原的完整指南-北京尧图网络

1. 项目概述为什么我们要深入App的加密层做移动端安全分析或者数据爬虫的朋友对“抓包”这个词肯定不陌生。你打开Fiddler或者Charles配置好代理满心欢喜地以为能像抓网页一样把App里那些商品列表、价格、用户评论的数据包看得一清二楚。但现实往往是你看到的是一堆乱码或者请求体里塞满了你完全看不懂的、长得像天书一样的加密字符串。Shopee虾皮这个东南亚和台湾地区的主流电商App就是这样一个典型的“硬骨头”。这个项目的核心就是啃下这块硬骨头。它不是一个简单的抓包教程而是一次完整的、从网络层到Native层的逆向工程实战。目标很明确我们要搞清楚Shopee App在发送关键请求比如搜索商品、获取详情、提交订单时对数据做了哪些手脚具体是用了什么算法、密钥从哪里来、加密逻辑藏在App的哪个角落。最终我们要能用自己的代码模拟出和官方App一模一样的加密过程从而拿到我们想要的数据。这活儿有什么用对于安全研究员这是分析App通信安全、发现潜在漏洞的必经之路。对于开发者理解大厂的加密方案能提升自己App的安全设计水平。当然对于需要合法合规获取公开数据的场景比如价格监控、市场分析这也是绕不开的技术环节。整个过程会涉及安卓逆向的多个层面Java层动态调试、NativeSO库静态分析与动态Hook是对你逆向分析能力的一次综合考验。2. 逆向分析的整体思路与工具选型面对一个像Shopee这样体量的App直接一头扎进代码里无异于大海捞针。一个清晰的、分层的分析思路至关重要。我的策略是“由外而内动静结合”。2.1 分层逆向策略我的分析通常分为四个递进的层次网络层观测这是起点。使用抓包工具如Charles、Fiddler或mitmproxy捕获所有HTTPS流量。重点不是看加密后的内容而是观察请求的规律哪些接口的请求体/参数被加密了加密是发生在URL参数、请求头Header还是请求体Body加密后的数据形态是怎样的Base64编码Hex字符串响应Response是否也被加密了这个阶段的目标是划定战场明确我们要攻击的“加密点”在哪里。Java层动态分析安卓App的核心逻辑大多写在Java或Kotlin代码里。我们需要一个运行时环境来动态跟踪代码执行。这里首推Frida。通过编写Frida脚本我们可以Hook住关键的网络请求库如OkHttp3、Retrofit的发送函数或者Hook住任何我们怀疑的加密工具类名字里带Encrypt、Cipher、Security的。在函数被调用时打印出它的输入参数、返回值以及调用栈Stack Trace。调用栈是黄金线索它能告诉我们这个加密函数是被谁、在什么业务逻辑下调用的从而快速定位到核心的加密模块。Native层SO库聚焦现代App为了提升安全性和性能会把核心的加密算法、密钥生成逻辑放在Native层编译成.so动态链接库。当你用Frida在Java层Hook到一个加密函数发现它只是简单地调用了某个native方法如nativeEncrypt时战场就转移到了SO库。我们需要用反汇编工具如IDA Pro、Ghidra打开这个SO文件进行静态分析理解其汇编或反编译后的C/C逻辑。动静结合验证静态分析看逻辑动态调试看数据。用Frida的Interceptor功能去Hook SO库里的导出函数甚至内部函数实时获取加密过程中的中间变量如密钥、IV、明文块。用IDA Pro的调试器或配合android_server进行动态调试单步跟踪算法的执行流程。最终用Python或Java复现整个算法并用抓取的真实数据包进行验证确保生成的密文与App发出的一致。2.2 核心工具链工欲善其事必先利其器。下面是我实战中依赖的核心工具抓包与代理Charles/Fiddler图形化界面友好适合初步观测和手动测试。需要安装并信任其CA证书以解密HTTPS对于做了证书绑定的App可能失效。mitmproxy命令行工具功能强大支持脚本化适合自动化流程。同样是中间人代理的核心。Postman/Insomnia用于手动构造和发送我们复现算法后的请求验证接口可用性。动态分析与HookFrida逆向分析的“瑞士军刀”。通过注入JS脚本能够在App运行时动态修改和探查Java层和Native层的内存与逻辑。它是我们定位关键代码、获取运行时数据的最重要手段。Objection基于Frida的命令行工具可以快速完成一些常规操作如禁用SSL Pinning证书绑定。静态分析IDA Pro反汇编和逆向分析的行业标准。用于深度分析SO库其强大的反编译引擎Hex-Rays Decompiler能将汇编代码转为更易读的伪C代码极大提升分析效率。GhidraNSA开源的工具免费且功能强大是IDA的优秀替代品尤其擅长反编译和代码分析。JADX/GDA用于反编译App的APK文件查看Java/Kotlin源代码。JADX是开源首选界面清晰GDA在对抗混淆方面有时有奇效。环境与设备Root过的安卓真机或模拟器很多深度Hook和调试需要Root权限。推荐使用Pixel机型或官方Android Studio模拟器可轻松Root。adb (Android Debug Bridge)必备的调试桥梁用于安装应用、转发端口、获取日志等。注意所有分析应基于从官方渠道如Google Play获取的App安装包并仅在属于自己的设备或测试环境中进行严格遵守相关法律法规和服务条款仅用于安全研究和个人学习目的。3. 实战第一步网络抓包与加密特征识别我们从一个干净的模拟器环境开始。安装好Shopee App目标版本需要明确不同版本加密逻辑可能不同并配置好Charles代理。3.1 捕获加密流量启动Charles和Shopee App进行一些典型操作搜索一个商品如“iphone 15”点击进入商品详情页查看商品评论。在Charles中你会看到大量的api.shopee.sg或类似域名的请求。很快你就能发现端倪。一个搜索请求的URL可能看起来是正常的https://api.shopee.sg/api/v4/search/search_items?byrelevancykeywordiphone%2015limit20newest0orderdescpage_typesearchscenarioPAGE_GLOBAL_SEARCHversion2但当你查看它的请求体Request Body或者某些关键接口的请求头时加密就出现了。例如一个提交登录或获取敏感信息的POST请求其Request Body可能不再是清晰的JSON而是{ “data”: “U2FsdGVkX1...很长一串Base64...” “sign”: “a1b2c3d4e5f67890” }或者在请求头中可能出现X-Api-Sign: sha2569f86d08188c7... X-Timestamp: 1678886400 X-Nonce: abcdef123456关键识别点字段名data、encrypted_data、sign、signature、cipher等是强提示。数据形态内容是一长串无规律的、由A-Za-z0-9/组成的字符串Base64或0-9a-f组成的字符串Hex。直接尝试用Base64解码得到的可能是乱码因为先加密后编码。参数位置加密可能发生在URL参数较少见因为URL有长度限制、请求头如签名或请求体最常见用于保护传输的敏感或结构化数据。在这个阶段记录下加密接口的URL、加密字段名、以及一对或多对“你输入的明文”和“捕获到的密文”。例如你搜索了“iphone 15”那么“iphone 15”就是潜在的明文而请求中某个加密字段的值就是对应的密文。这将是后续验证算法是否正确的“标准答案”。3.2 绕过HTTPS证书绑定SSL Pinning很多App包括Shopee会使用SSL Pinning证书绑定技术来防止中间人攻击也就是防止我们抓包。这会导致Charles等工具无法解密HTTPS流量你看到的将是Tunnel to或一堆乱码。对付SSL PinningFrida是我们的王牌。通常有两种思路使用Objection一键绕过如果App使用常见的证书绑定库如OkHttp3的CertificatePinnerObjection可以快速搞定。objection -g com.shopee.sg explore # 进入Frida交互界面后执行 android sslpinning disable这条命令会尝试Hook并禁用几种常见的Pinning逻辑。编写定制化Frida脚本如果Objection无效说明App可能使用了自定义的证书验证逻辑。这就需要我们通过反编译找到进行证书校验的类和方法然后用Frida去Hook并使其失效。例如HookTrustManager或X509Certificate的验证方法直接让它们返回true。// 示例绕过自定义TrustManager Java.perform(function() { var X509TrustManager Java.use(javax.net.ssl.X509TrustManager); var TrustManagerImpl Java.use(com.shopee.security.CustomTrustManager); // 假设的类名 if (TrustManagerImpl) { TrustManagerImpl.checkServerTrusted.implementation function(chain, authType) { console.log(“[] Bypassing checkServerTrusted”); // 什么都不做或者直接return }; } });找到正确的类和方法需要结合JADX反编译的代码分析。成功绕过后Charles中就能看到明文的HTTPS请求和响应了当然应用层加密的data字段仍然是密文。4. 深入Java层定位加密入口与关键函数现在我们能看到被应用层加密的请求了。下一步是找出在App内部是谁、在什么地方执行了这次加密。4.1 反编译与初步搜索将Shopee的APK文件拖入JADX。首先进行全局搜索关键词包括encrypt,decryptencode,decode(注意区分URL编码和加密)cipher,CryptoAES,RSA,DES,MD5,SHA,HMAC我们在抓包中看到的加密字段名如sign,data搜索可能会返回大量结果因为很多第三方库也包含这些词。我们需要聚焦于包名包含shopee、seaShopee母公司或者看起来是业务相关的包如com.shopee.network、com.shopee.security、com.shopee.utils等。4.2 动态Hook网络库更高效的方法是直接Hook网络请求的发送点。Shopee很可能使用OkHttp3。我们可以写一个Frida脚本HookOkHttpClient的newCall方法或者更底层的RealCall的execute方法。Java.perform(function() { var OkHttpClient Java.use(okhttp3.OkHttpClient); var RealCall Java.use(okhttp3.RealCall); OkHttpClient.newCall.implementation function(request) { var url request.url().toString(); var method request.method(); var headers request.headers().toString(); var body request.body(); console.log(“\n[ OkHttp Request ]”); console.log(“URL: “ url); console.log(“Method: “ method); console.log(“Headers:\n“ headers); // 尝试打印请求体 if (body ! null) { var buffer Java.use(‘okio.Buffer’).$new(); body.writeTo(buffer); var bodyString buffer.readUtf8(); console.log(“Body: “ bodyString); // 关键在这里你可能会看到加密前的原始JSON } // 继续执行原方法 return this.newCall(request); }; });运行这个脚本然后再次在App里触发加密请求如搜索。你可能会在日志中看到在某个请求发出前其Body还是明文的JSON例如{“keyword”: “iphone 15”, “page”: 0}而到了Charles里这个Body就变成了加密的data字符串。这说明加密就发生在这个网络请求被最终发送前的某个环节。查看调用栈在Frida的Hook回调函数里打印调用栈 (Java.use(“android.util.Log”).getStackTraceString(Java.use(“java.lang.Exception”).$new()))) 是定位加密函数最直接的方法。调用栈会告诉你是哪个类的哪个方法调用了newCall层层回溯你就能找到执行加密操作的那个业务逻辑方法。4.3 定位并分析加密类假设通过调用栈我们定位到了一个类com.shopee.network.SecurityHelper其中有一个方法public static String encryptRequestData(String jsonStr)。在JADX中打开这个类。你可能会看到类似这样的代码public class SecurityHelper { static { System.loadLibrary(“shopee-security”); // 加载SO库 } public static native String nativeEncrypt(String str, int i); public static String encryptRequestData(String jsonStr) { String timestamp getTimestamp(); String nonce generateNonce(); String dataToSign jsonStr timestamp nonce; String sign calculateHMAC(dataToSign, getSecretKey()); // 可能先对jsonStr进行某种处理或拼接 String finalData jsonStr “sign” sign; // 这只是假设 // 关键的一步调用Native方法 return nativeEncrypt(finalData, 1); } }发现了关键线索加密的核心逻辑nativeEncrypt是一个native方法这意味着实际的加密算法写在C/C代码里并编译在libshopee-security.so这样的动态库中。我们的战场从Java层转移到了Native层。同时注意encryptRequestData方法里可能存在的其他逻辑时间戳和随机数用于防重放攻击。签名计算常见的是HMAC-SHA256用于验证数据完整性。calculateHMAC方法可能也在Java层也可能在Native层。密钥getSecretKey()的来源是关键它可能是硬编码、从服务器动态获取、或通过复杂算法生成。数据拼接规则明文数据是如何拼接上签名、时间戳等额外参数的这个规则必须完全还原。5. 攻坚Native层SO库静态分析与动态Hook找到关键的SO库文件名如libshopee-security.so后我们从APK的lib目录通常是lib/arm64-v8a/或lib/armeabi-v7a/中提取出这个文件用IDA Pro打开。5.1 静态分析寻找导出函数在IDA的Exports窗口搜索encrypt或nativeEncrypt注意名字可能被混淆。找到对应的函数例如Java_com_shopee_network_SecurityHelper_nativeEncrypt。这就是我们在Java层调用的那个native方法的实际实现。按F5键让Hex-Rays反编译器生成伪C代码。分析这个函数// 伪代码示例 jstring __fastcall Java_com_shopee_network_SecurityHelper_nativeEncrypt(JNIEnv *env, jclass clazz, jstring input_str, jint mode) { const char *input_cstr (*env)-GetStringUTFChars(env, input_str, 0); // 1. 可能进行一些预处理 // 2. 调用核心加密函数例如 char *encrypted_data core_aes_encrypt(input_cstr, some_key, some_iv); // 3. 将结果进行Base64编码 char *base64_output base64_encode(encrypted_data); // 4. 将C字符串转换为Java字符串并返回 jstring result (*env)-NewStringUTF(env, base64_output); // 5. 释放内存 free(encrypted_data); free(base64_output); (*env)-ReleaseStringUTFChars(env, input_str, input_cstr); return result; }静态分析的目标是识别加密算法在伪代码中寻找诸如AES_encrypt、EVP_CipherInit_ex(OpenSSL函数)、CCCrypt(iOS CommonCrypto) 等函数调用。识别出是AES是CBC还是ECB模式、RSA、还是自定义的算法。定位密钥和IV密钥和初始化向量(IV)可能以硬编码字符串形式存在可能被编码或加密过也可能通过某个函数动态生成。在IDA中搜索字符串ShiftF12查找可能的关键词如key、iv、secret或一些看起来像Base64的字符串。理清数据流看清从输入字符串到最终输出经历了哪些步骤拼接 - 加密 - 编码。5.2 动态Hook获取运行时数据静态分析可能遇到代码混淆、逻辑复杂难以理解的情况。这时就需要动态调试来获取确凿的证据。使用Frida Hook Native函数我们可以Hook这个nativeEncrypt的底层实现或者直接Hook像AES_encrypt这样的标准库函数。// Frida Hook Native函数示例 Interceptor.attach(Module.findExportByName(“libshopee-security.so”, “AES_encrypt”), { onEnter: function(args) { // args[0], args[1]... 对应函数参数需要根据函数签名确定 // 例如AES_encrypt的输入数据指针可能在args[0] var inputPtr args[0]; var inputSize args[1]; // 假设 var inputBytes Memory.readByteArray(inputPtr, inputSize); console.log(“[AES_encrypt] Input (hex): “ bytesToHex(inputBytes)); // 同样可以打印密钥和IV的指针 var keyPtr args[2]; var keyBytes Memory.readByteArray(keyPtr, 32); // AES-256密钥长度32字节 console.log(“[AES_encrypt] Key (hex): “ bytesToHex(keyBytes)); }, onLeave: function(retval) { // retval 是加密后的数据指针 var outputPtr retval; // 读取输出数据 var outputBytes Memory.readByteArray(outputPtr, 16); // AES块大小 console.log(“[AES_encrypt] Output (hex): “ bytesToHex(outputBytes)); } }); function bytesToHex(bytes) { return Array.from(bytes, function(byte) { return (‘0’ (byte 0xFF).toString(16)).slice(-2); }).join(‘’); }通过这样的Hook我们能在控制台实时看到加密算法的输入明文、使用的密钥和输出的密文。将Hook得到的明文与我们抓包前预期的明文对比将Hook得到的密文与Charles抓到的密文对比如果一致就证明我们找到了正确的函数和密钥。5.3 算法还原与复现拿到了算法例如AES-256-CBC、密钥Key、初始化向量IV、以及可能的填充模式如PKCS7Padding和编码方式Base64后就可以开始用高级语言复现了。以Python为例使用cryptography库from cryptography.hazmat.primitives.ciphers import Cipher, algorithms, modes from cryptography.hazmat.primitives import padding import base64 def shopee_encrypt(plaintext: str, key_hex: str, iv_hex: str) - str: “”“模拟Shopee的AES加密”“” # 将字符串明文转换为bytes plaintext_bytes plaintext.encode(‘utf-8’) # 解码Hex格式的Key和IV key bytes.fromhex(key_hex) iv bytes.fromhex(iv_hex) # 创建加密器使用CBC模式和PKCS7填充 padder padding.PKCS7(128).padder() padded_data padder.update(plaintext_bytes) padder.finalize() cipher Cipher(algorithms.AES(key), modes.CBC(iv)) encryptor cipher.encryptor() ciphertext encryptor.update(padded_data) encryptor.finalize() # Base64编码输出 encrypted_b64 base64.b64encode(ciphertext).decode(‘utf-8’) return encrypted_b64 # 使用动态Hook获取到的Key和IV进行测试 test_key “0123456789abcdef0123456789abcdef0123456789abcdef0123456789abcdef” # 64位hex32字节 test_iv “abcdef0123456789abcdef0123456789” # 32位hex16字节 test_plaintext ‘{“keyword”: “iphone 15”, “page”: 0}signsome_signature’ my_encrypted shopee_encrypt(test_plaintext, test_key, test_iv) print(“My encrypted result:“, my_encrypted) # 与Charles抓包中的data字段值进行比对如果复现的结果与抓包数据一致那么恭喜你核心加密算法已经被你成功攻破。6. 关键问题排查与实战心得逆向工程很少一帆风顺以下是几个我踩过的坑和对应的解决思路。6.1 常见问题速查表问题现象可能原因排查思路与解决方案抓包工具显示Tunnel或乱码SSL Pinning证书绑定1. 使用Frida Objectionandroid sslpinning disable。2. 反编译定位自定义TrustManager并Hook。3. 尝试使用低版本App可能未加固或Pinning较弱。Frida脚本注入失败或App闪退App检测Frida或反调试1. 重命名Frida-server可执行文件。2. 使用Frida的-f参数在App启动前注入。3. 检查App是否在Application.onCreate()中做了反调试检测Hook检测函数使其失效。4. 尝试使用其他Hook框架如Dobby或切换Frida版本。Java层Hook不到网络请求使用了非OkHttp的网络库或代码被混淆1. 尝试Hook更底层的HttpURLConnection。2. 在JADX中搜索http、url、request等关键词寻找自定义网络库类。3. Hookjava.net.URL的openConnection方法。Native函数名被混淆SO库进行了名称混淆或加固1. 在IDA的Exports窗口通过函数地址或Java Native方法签名如Java_*_*_nativeEncrypt的模糊搜索来定位。2. 关注JNI函数RegisterNatives动态注册的函数不会导出需要Hook此函数来获取方法名和地址的映射关系。3. 使用Frida的Module.enumerateExports和Module.enumerateSymbols遍历所有符号寻找可疑函数。静态分析伪代码逻辑极其复杂代码被控制流扁平化等混淆技术处理1. 优先进行动态分析用Frida Hook关键内存地址直接读取输入输出和中间值。2. 尝试使用Ghidra其反编译器有时对混淆代码的处理更好。3. 关注常量、字符串引用和系统库函数调用以此推断功能。复现的加密结果与App不一致1. 密钥/IV错误。2. 加密模式或填充方式不对。3. 明文拼接规则有误。4. 多了一层编码或哈希。1.核对密钥/IV用Frida在运行时多次Hook验证确保获取的是正确的、用于该请求的密钥。2.验证算法参数确认是AES-CBC还是ECB填充是PKCS7还是ZeroPadding3.仔细比对明文用Frida Hook加密函数的最上层入口打印出即将被加密的完整字符串与你自己拼接的进行逐字符比对。4.检查编码加密后是直接Base64还是先Hex再Base646.2 核心实战心得记录与版本控制逆向是一个反复试错的过程。务必详细记录每一步操作、每一个发现的函数地址、密钥、偏移量。对分析的App版本进行备份和记录不同版本间逻辑可能差异巨大。“黑盒”与“白盒”结合不要一味地读代码。先把它当黑盒用Frida大量Hook输入各种测试数据观察输出变化猜测算法比如输入长度变化输出长度如何变可能是什么模式。有了假设再去静态分析验证效率更高。关注密钥管理密钥从哪里来往往比算法本身更重要。它可能是硬编码藏在SO库的字符串常量里可能被XOR或简单加密存储。运行时生成由设备信息IMEI, Android ID、时间戳、某个固定种子通过特定算法如HMAC, PBKDF2派生出来。服务器下发App启动时或登录后从服务器获取可能被一个根密钥硬编码加密传输。需要找到解密这个动态密钥的逻辑。耐心与细心一个加密环节可能包含多个步骤数据排序 - 拼接 - 计算签名 - 整体加密 - Base64编码。任何一个步骤的疏漏都会导致最终结果失败。用Frida在每一步都打出日志像调试自己代码一样去跟踪数据流。合法性边界时刻牢记技术研究的边界。我们分析算法是为了理解原理、提升技能。复现算法用于爬取公开数据时务必控制请求频率尊重网站的robots.txt避免对目标服务器造成负担严格遵守数据使用的相关法律法规。逆向工程是一门强大的技术务必用在正道上。

Shopee App加密逆向实战：从抓包到算法还原的完整指南

相关推荐

敏捷 vs 瀑布项目计划对比：基于 5 个真实案例的编制误区与调整策略

深入浅出 Node.js 核心基石：Path 路径工程化设计与 Fs 文件系统异步演进史

GitHub Copilot实战入门：零配置用Codex提升编码效率

更多资讯

GESP 2025年3月原根判断题解｜数论详细讲解

工业级爬虫数据存储优化与数据湖实践

GESP 2023年12月小杨的幸运数题解｜二分详细讲解

没有ISO的cloudflare-os：边缘计算如何重构“操作系统”

GESP 2023年9月真题巧夺大奖完整题解（贪心）

Spring Boot中Redis缓存穿透、击穿与雪崩解决方案

今日更新

微信个人号API开发案例：图片/语音/视频消息怎么下载解析存到本地？

Python股票自动交易系统源码解析：从行情获取到风控的完整链路

视酷酷信IM源码部署指南：Java 17+MySQL 8.0.33实战配置

本周精选

防幻觉智能体架构：电源硬件设计中的大模型编排与工具化实践

OpenGL面试核心考点：渲染管线、矩阵变换与性能排查全解析

全国计算机二级C语言真题PDF高效刷题指南

本月热门

我发现了一个新思路：用 Remotion + Claude Code 像写代码一样自动化生成短视频

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式：TaoToken 统一 Key 配置与验证

2026 大模型集体涨价：用 Python 做企业 Token 成本测算与选型避坑（附配置）

读完文章，想聊聊您的网站？