最近需要对一个网站进行逆向，抓点数据。目标网站是webpack打包，分包异步加载。 以前逆向的网站基本都是单页面应用，没有分包机制。直接扣出加载器，然后补全变量就行。没想到这个网站分包了。做了异步加载。 因为是异步加载，也就是加载器需要动态创建标签用于加载资源。也就是需要模拟浏览器document，window之类的对象。这尼玛一脸蒙蔽。 搜索了一下，还是大佬多，引入jsdom包即可解...

项目有个导出需求，需要导出多个sheet，xlsx格式的excel表格。 这里简单说明下，在excel中，有xls,xlsx两种格式。 xls是excel2005版本以下的文件格式，支持数据量小而且格式很老。 xlsx是2005版本以上支持的格式，数据量大而且新特性多 我觉得都2024年了，大家导出excel应该都使用xlsx格式了吧。 在网上找了一圈没有什么好使的代码（...

最近公司需要将项目部署在第三方服务器，于是就有了jar包加密的需求，了解了下目前加密方案现况如下: 混淆方案，就是在代码中添加大量伪代码，以便隐藏业务代码 加密方案，将jar包中的所有class加密，在运行时通过自定义classloader进行解密 目前有的所有加密方案基本思路都跟上面大差不差，在了解了一圈决定使用了xjar这个开源项目。它的实现思路就是方案2. 打开git...

最近想学一门新语言，选来选去，学了go。 其实总体来说，上手挺简单的，go规范挺严格的，我觉得这点是真的不错，很适合用于团队开发。 比如java中，if 后的括号可以接在if后面如:if() { 还有人喜欢新开一行， 如: // 方式1 if(a == 1) { } // 方式2 if(a == 1) { } 这种在go中就定死了，不能新开一行，这确实减少了很多格式规范问题。所以我...

正则表达式匹配ip 正则表达式，大家都有使用吧。 不知道大家的开发流程是怎么样的。 我一般习惯先在浏览器console中调试开发正则，然后复制到java/c#中使用。 最开始很简单的一个需求, 需要输入ip + 端口， 示例: 127.0.0.1:7701 这个表达式很简单的，网上一抓一大把 -> /^((\d{1,3}\.){3}\d{1,3})(?::(\d{1,5}))?...

开源了一个脚手架项目，适合webapi开发。 git地址:https://github.com/MisterChangRay/fastapi-demo/ 下面适合开发一些简单得项目 很简单得东西,留着自己用得。不做过多介绍了。 主要是整合了 fastapi, SQLAlchemy，日志，mysql, 以及一些代码示例。 留着以后快速开发一些玩具项目。 部署服务器后，使用以下命令使用：...

springboot 内置cache支持。 可以很方便的对数据进行缓存。 框架的逻辑很简单，在加入 @Cacheable 注解的方法前，拦截执行参数，然后根据预设的条件进行缓存读取。 这里简单介绍 springboot + redis 对接口进行缓存. 导入以下依赖： implementation 'org.springframework.boot:spring-boot...

nginx反向代理，根据后缀代理多个后台服务时，可能会遇到允许所有的跨域请求。 也就是在nginx层允许所有跨域。 另外备注一下，浏览器不显示options请求的问题。 原因是新版浏览器已经将options请求归类于other。 代码备注一下: server { listen 8056; server_name test tset; ...

最近在项目中看到了一个需求，导出的word报表需要一些统计数据。 数据来源是excel。 excel已经导入到数据库中，所以这些统计数据可以有一下办法完成： 3种办法： sql来聚合执行并查询结果 使用执行引擎来做 使用if/else来解析计算公式 项目目前使用的第三种，开发方便但是不太好维护，因为excel表格变更或则移位后就需要重新更新代码。 所以我想着之前学过...

这几天开发一个爬虫， 发现一个比较扯的问题。 由于服务器和开发机器网络不通，所以使用了nginx做了反向代理。 开发机器访问nginx 。 做的功能很简单，就是一个session保活（就是每隔10分钟请求一个固定的url，探测session是否还有效）。 在自己的电脑上调试通过，于是满怀信心的部署到服务器上，当然请求链接也是切换到直接访问目标服务器，但是一请求就懵逼了，服务器响应失败。...