【Part1——理论篇】大家好，我是皮皮。试想一个问题，如果我们要抓取某个微博大V微博的评论数据，应该怎么实现呢？最简单的做法就是找到微博评论数据接口，然后通过改变参数来获取最新数据并保存。首先从微博api寻找抓取评论的接口，如下图所示。但是很不幸，该接口频率受限，抓不了几次就被禁了，还没有开始起飞，就凉凉了。接下来小编又选择微博的移动端网站，先登录，然后找

哈希函数可以使数据序列的访问过程更加快速精确。通过哈希函数，可以更慢地定位数据元素：1直接寻址方法：以关键性字的值或关键性字的线性函数作为哈希地址。一、即H(key)key或H(key)akeyb，其中A和B是常数（这种散列函数称为自函数）2数值分析方法：在分析一组数据时，例如一组员工的出生日期，我们发现出生日期的后几个数字大致相同。在这种情况之

为什么使用集合数组长度是固定,如果要改变数组的长度需要创建新的数组将旧数组里面的元素拷贝过去，使用起来不方便。java给开发者提供了一些集合类，能够存储任意长度的对象，长度可以随着元素的增加而增加,随着元素的减少而减少，使用起来方便一些。数组和集合的区别区别1:数组既可以存储基本数据类型,又可以存储引用数据类型,基本数据类

在MongoDB里面，一条文档大致相当于关系型数据库里面的一行。在关系型数据库里面，行是被存储在表里面，并且有一个严格的结构。MongoDB里面把文档存储在集合里面而不是存在表里面，最根本上的不同就是在数据库层面上没有强制的结构限制。   定义一个文档纲要  MongoEngine允许你为文档定义一个纲要这可以帮你减少编码错误，让你利用现有的字

备份是数据安全的最后一道防线，对于任何数据丢失的场景，备份虽然不一定能恢复百分之百的数据(取决于备份周期)，但至少能将损失降到最低。衡量备份恢复有两个重要的指标：恢复点目标(RPO)和恢复时间目标(RTO)，前者重点关注能恢复到什么程度，而后者则重点关注恢复需要多长时间。这篇文章主要讨论MySQL的备份方案，重点介绍几种备份方式的原理，包括文件系统快照(LV

1、概述　　Class文件是一组以8位字节为基础单位的二进制流，各个数据项目严格按照顺序紧凑的排列在Class文件中，中间没有添加任何的分隔符，这使得整个Class文件中存储的内容几乎全部是程序运行的必要数据。当遇到需要占用8个字节以上空间的数据项时，则会按照高位在前的方式分隔成多个8位字节进行存储。　　Class文件采用一种类似于C语言结构

数据库分库分表前言今天有朋友问到了数据库分库分表，他们都说数据库达到了瓶颈，需要重构，但是毫无头绪，现在做个概念总结（期待后期的实操吗？）会从以下几个方面说起：第一部分：实际网站发展过程中面临的问题。第二部分：有哪几种切分方式，垂直和水平的区别和适用面。第三部分：目前市面有的一些开源产品，技术，它们的优缺点是

存储过程简介SQL语句需要先编辑后执行，而存储过程是一组为了完成特定功能的SQL语句集，经编译后存储过程在数据库中，用户通过制定存储过程的名字并传给参数来调用它。存储过程是可编程的函数，在数据库中创建并保持，可以由SQL和控制结构组成。档想要在不同的应用平台上执行相同的函数，或者封装特定功能时，存储过程是非常有用的，数据库中的存储过程可以看错

【MySQL】164\.数据库的三范式是什么？第一范式：强调的是列的原子性，即数据库表的每一列都是不可分割的原子数据项。第二范式：属性完全依赖于主键（满足第一范式的前提下），即任意一个字段只依赖于表中的同一个字段。第三范式：任何非主属性不依赖于其它非主属性（满足第二范式的前提下）。即不存在传

根据数据类型的不同，对一个问题的建模有不同的方式。在机器学习或者人工智能领域，人们首先会考虑算法的学习方式。在机器学习领域，有几种主要的学习方式。将算法按照学习方式分类是一个不错的想法，这样可以让人们在建模和算法选择的时候考虑能根据输入数据来选择最合适的算法来获得最好的结果。1.监督式学习：2.非监督式学习：在非监督式学习中，数据并不被特别标识，学习模