摘要: 1. ide打开工程 2.gitpull 3.编写代码, 4.编译代码,点击mvn,按住ctrl ,选择clean package一起 5. 点击左侧,target找到对应jar包,拖住,放到mobax里的ftp目录上传 6.moba里面执行shell脚本,重启任务(如果本地消费kafka,要记得听 阅读全文
posted @ 2026-05-18 13:56 技术虫 阅读(0) 评论(0) 推荐(0)
摘要: 1. 新建一个自定义初始化器-CustomcontextInitializer public class CustomcontextInitializer implements ApplicationcontextInitializer<configurableApplicationcontext> 阅读全文
posted @ 2026-04-14 15:18 技术虫 阅读(4) 评论(0) 推荐(0)
摘要: 有一种场景,从上游消息队列中,实时获取大量数据,需要尽快处理完,入库,分析程序可以通过多线程往阻塞队列里存放,然后当数据达到一定条数(例如50)或者达到一定时间(例如3分钟),满足任一条件,则异步线程批量处理。 package com.nari.midplatform.local.email.tas 阅读全文
posted @ 2026-04-02 10:26 技术虫 阅读(4) 评论(0) 推荐(0)
摘要: 1.根据查询的结果批量更新 public String bulkUpdateByQuery(String index, String type, QueryBuilder query, Map<String, Object> updateFieldValue) throws EsException 阅读全文
posted @ 2026-02-28 14:51 技术虫 阅读(4) 评论(0) 推荐(0)
摘要: 写的工具maven工程,写好入口类和main方法后,在pom.xml文件,要加上mainclass入口类(并且将依赖的lib包一起打进去,同时解决签名冲突) <build> <plugins> <plugin> <groupId>org.apache.maven.plugins</groupId> 阅读全文
posted @ 2026-01-16 15:19 技术虫 阅读(5) 评论(0) 推荐(0)
摘要: 1. 建表要有分区、分桶键,分区建议是按照天分区,分桶建议是离散度大的字段(如用户id,订单编号等) 还有设置合理的key值,查询经常用到的字段,放到key值里(前缀索引) 查询的时候,按照最左原则,先带上分区键和前缀索引键。 2. 如果有频繁的聚合操作,并且耗费时间,可以单独建立一个物化视图(异步 阅读全文
posted @ 2025-11-19 15:39 技术虫 阅读(65) 评论(0) 推荐(0)
摘要: 1. 三种表模型:明细模型、聚合模型、唯一模型 明细模型建表语句: CREATE TABLE IF NOT EXISTS example_db.detail_log ( `user_id` INT NOT NULL COMMENT "用户ID", `event_time` DATETIME NOT 阅读全文
posted @ 2025-11-18 19:50 技术虫 阅读(30) 评论(0) 推荐(0)
摘要: 1.pom.xml引入 <dependency> <groupId>io.springfox</groupId> <artifactId>springfox-swagger2</artifactId> <version>2.9.2</version> </dependency> <dependenc 阅读全文
posted @ 2025-11-18 16:57 技术虫 阅读(22) 评论(0) 推荐(0)
摘要: 背景:有个数百万的数据,需要尽快入库,使用了多线程处理,先查询数据库是否存在,存在则更新;否则插入; 问题:数据库相同key的数据,有时候插入多条。 解决办法: String lockKey =getLockKey(t); //根据md5算法,将多个列,生成一个md5Value synchroniz 阅读全文
posted @ 2025-11-14 14:46 技术虫 阅读(17) 评论(0) 推荐(0)
摘要: 1.mybatis-plus Wrappers相关Api 获取count和list QueryWrapper<Test111> time = Wrappers.<Test111>query().ge("time","2025-11-04 00:00:00"); long count = this.c 阅读全文
posted @ 2025-11-12 16:21 技术虫 阅读(11) 评论(0) 推荐(0)