Java多线程导致的的一个事物性问题

Wesley13
• 阅读 375

业务场景

我们现在有一个类似于文件上传的功能,各个子站点接受业务,业务上传文件,各个子站点的文件需要提交到总站点保存,文件是按批次提交到总站点的,也就是说,一个批次下面约有几百个文件。

       考虑到白天提交这么多文件会影响到子站点其他系统带宽,我们将分站点的文件提交到总站点这个操作过程独立出来,放到晚上来做,具体时间是晚上7:00到早上7:00。

       这个操作过程我们暂且称作“排程”。 排程在运行之后,先获取所有需要上传到总站点的批次信息,拿到批次信息之后,将这个批次表的状态置为正在同步数据,这个时候,如果这个批次再有业务人员上传文件,发现批次正在同步,就会返回操作失败。

现在产生的问题:

       1,排程获取到批次,准备将批次表状态置为正在同步,注意这时候批次表还没有改成正在同步。

       2,业务人员对这个批次提交100张文件,由于批次表状态还没改成正在同步,所以校验通过,准备插入数据到数据库,注意这时候文件信息还没插入到数据库,只是准备插入。

       3,排程将批次表信息置为正在同步,并且获取到批次下面所有文件信息保存到内存,准备一个一个上传文件。

       4,业务人员上传的文件信息成功保存到数据库。

       这种情况下,就会导致,第四步保存到数据库中的文件信息并没有提交到总站点。

分析:

       大家没看懂上面的业务信息,没关系,我们可以以一种更通俗的方式来描述:

       我们去电影院看3D电影, 假如电影是在9:00开播, 9:00之后演播大厅关门,然后服务人员给所有坐在位子上的人发一个滤光眼镜,这时候就会有一个问题,那些正在走向位子上的人怎么办? 这就是我们现在的问题。

       我们想到2种解决方案:

       1: 我们关上门之后等待一段时间,让所有的人都走到位子上,之后服务人员再发眼镜。

       2:服务人员每隔一段时间就检测下,有没有坐在位子上的人没有眼镜,没有眼镜就发一个。

       注意:业务场景看电影的人是没办法主动要眼镜的 J

如果使用第二种方法,我们几十个分站点会频繁访问总站点查询数据,这个查询是全表扫描,这对数据库性能影响太大。考虑到这个排程进程是后台进程,第一种方法虽然处理慢点,但是对系统影响更小,而且在一定程度上会减缓服务器的CPU压力,最终我们选择了第一种方案。

希望能对你有帮助。

点赞
收藏
评论区
推荐文章
blmius blmius
2年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Karen110 Karen110
2年前
​一篇文章总结一下Python库中关于时间的常见操作
前言本次来总结一下关于Python时间的相关操作,有一个有趣的问题。如果你的业务用不到时间相关的操作,你的业务基本上会一直用不到。但是如果你的业务一旦用到了时间操作,你就会发现,淦,到处都是时间操作。。。所以思来想去,还是总结一下吧,本次会采用类型注解方式。time包importtime时间戳从1970年1月1日00:00:00标准时区诞生到现在
可莉 可莉
2年前
12.21 php
12.21phpfpm的pool为了避免因多站点使用同一个pool时因一个站点故障导致pool出问题,进而影响使用同一个pool的其他站点的正常运行,要对每个站点配置一个单独的pool。为phpfpm增加poolroot@cham002cham.comcd/usr/local
Wesley13 Wesley13
2年前
Java日期时间API系列31
  时间戳是指格林威治时间1970年01月01日00时00分00秒起至现在的总毫秒数,是所有时间的基础,其他时间可以通过时间戳转换得到。Java中本来已经有相关获取时间戳的方法,Java8后增加新的类Instant等专用于处理时间戳问题。 1获取时间戳的方法和性能对比1.1获取时间戳方法Java8以前
Wesley13 Wesley13
2年前
FLV文件格式
1.        FLV文件对齐方式FLV文件以大端对齐方式存放多字节整型。如存放数字无符号16位的数字300(0x012C),那么在FLV文件中存放的顺序是:|0x01|0x2C|。如果是无符号32位数字300(0x0000012C),那么在FLV文件中的存放顺序是:|0x00|0x00|0x00|0x01|0x2C。2.  
Stella981 Stella981
2年前
Android So动态加载 优雅实现与原理分析
背景:漫品Android客户端集成适配转换功能(基于目标识别(So库35M)和人脸识别库(5M)),导致apk体积50M左右,为优化客户端体验,决定实现So文件动态加载.!(https://oscimg.oschina.net/oscnet/00d1ff90e4b34869664fef59e3ec3fdd20b.png)点击上方“蓝字”关注我
Wesley13 Wesley13
2年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
2年前
Docker 部署SpringBoot项目不香吗?
  公众号改版后文章乱序推荐,希望你可以点击上方“Java进阶架构师”,点击右上角,将我们设为★“星标”!这样才不会错过每日进阶架构文章呀。  !(http://dingyue.ws.126.net/2020/0920/b00fbfc7j00qgy5xy002kd200qo00hsg00it00cj.jpg)  2
Stella981 Stella981
2年前
Nginx的几个常用配置和技巧
一个站点配置多个域名server {    listen       80;    server_name  opscoffee.cn b.opscoffee.cn;}server\_name后跟多个域名即可,多个域名之间用空格分隔一个服务配置多个站点server {
Python进阶者 Python进阶者
3个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这