一、写在开头vivo云服务提供给用户备份手机上的联系人、短信、便签、书签等数据的能力，底层存储采用MySQL数据库进行数据存储。随着vivo云服务业务发展，云服务用户量增长迅速，存储在云端的数据量越来越大，海量数据给后端存储带来了巨大的挑战。云服务业务这几年最大的痛点，就是如何解决用户海量数据的存储问题。二、面临挑战

1、什么是Redis？Redis是BSD协议，是一个高性能的keyvalue非关系型数据库。2、redis单线程问题所谓的单线程指的是网络请求模块使用了一个线程（所以不需考虑并发安全性），即一个线程处理所有网络请求，其他模块仍用了多个线程。redis采用多路复用机制：即多个网络socket复用一个io线程，实际是单个线程通过记录跟踪每一个S

MySQL通讯协议（2）数据包使用MySQL协议发送数据，有两个要求：将数据分成大小为(2^24−1)字节的数据包给每个数据块加上一个包头由于连接的创建和释放都需要耗费资源，所以数据库这种交互频繁，且连接数量不需要特别大的应用场景，一般使用长连接。使用短连接尚能通过RST判断数据是否读完了，而

前言一天，开发突然找过来说KLock(https://gitee.com/kekingcn/springbootklockstarter)分布式锁失效了，高并发情况下没有锁住请求，导致数据库抛乐观锁的异常。一开始我是不信的，KLock是经过线上大量验证的，怎么会出现这么低级的问题呢？然后，协助开发一起排查了一下午，最后经过不懈努力和一探到

我们在MySQL入门篇主要介绍了基本的SQL命令、数据类型和函数，在局部以上知识后，你就可以进行MySQL的开发工作了，但是如果要成为一个合格的开发人员，你还要具备一些更高级的技能，下面我们就来探讨一下MySQL都需要哪些高级的技能MySQL存储引擎存储引擎概述数据库最核心的一点就是用来存储数据，数

学习爬虫中，从最近自己写的爬虫小程序中抓截一点代码。加深下记忆。1.因为我已经安装了Python3,所以使用了urllib3库。2.要根据对应网页的数据格式进行解码，有的是utf8，有的是GB2312，当然可能还有其它。否则会报错。import urllib3import time因为我使用了Python3，所以使用urlli

事务MySQL事务主要用于处理操作量大，复杂度高的数据。比如：在人员管理系统中，你删除一个人员，你即需要删除人员的基本资料，也要删除和该人员相关的信息，如信箱，文章等等，这样，这些数据库操作语句就构成一个事务！特性一般来说，事务是必须满足4个条件（ACID）：原子性（Atomicity，或称不可分割性）、一致性（Consis

【辰兮要努力】：hello你好我是辰兮，很高兴你能来阅读，博客昵称是希望自己能不断精进，向着优秀程序员前行！博客来源于项目以及编程中遇到的问题总结，偶尔会有读书分享，我会陆续更新Java前端、后台、数据库、项目案例等相关知识点总结，感谢你的阅读和关注，希望我的博客能帮助到更多的人，分享获取新知，大家一起进步!吾等采

为建立中文知识库加块砖　　　　　　　　——中科大胡不归0\.前言第一次在技术群提出这个问题，大佬们一脸懵逼，既然你要串行执行，为什么不单线程。其实就是由于很多场景需要封装的业务逻辑，并依赖线程，比如顺序写日志文件。当然这是我现阶段粗浅水平所能想到的实现方法，希望以后能接触到更广大的世界，能嘲笑今天的自己。1\.实现原

识别网络爬虫的策略分析一、网络爬虫爬虫（crawler）也可以被称为spider和robot，通常是指对目标网站进行自动化浏览的脚本或者程序，包括使用requests库编写脚本等。随着互联网的不断发展，网络爬虫愈发常见，并占用了大量的网络资源。由爬虫产生的网络流量占总流量的37.2%，其中由恶意爬虫产生的流量约占65%图1PathMarker的体系架构上述