今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。（1）众所周知hive表是没有主键与索引

1.问题产生情况我遇到这个问题是做微信开发的时候有些有用的头像用了微信的emoji表情，然而我的mysql数据库用的编码是utf8\_general\_ci,就是utf8编码，结果也就报错误了。2.为什么会出现这种原因因为mysql的utf8编码的一个字符最多3个字节，但是一个emoji表情为4个字节，所以utf8不支持存储em

一、概念在企业中，数据库高可用一直是企业的重中之重，中小企业很多都是使用mysql主从方案，一主多从，读写分离等，但是单主存在单点故障，从库切换成主库需要作改动。因此，如果是双主或者多主，就会增加mysql入口，增加高可用。不过多主需要考虑自增长ID问题，这个需要特别设置配置文件，比如双主，可以使用奇偶，总之，主之间设置自增长ID相互不冲突就能

准备工作下载mysql二进制包，以及安装mysql依赖包安装mysql所需依赖包yuminstalllibaioy下载mysql二进制安装包wgethttp://mirrors.163.com/mysql/Downloads/MySQL8.0/mysql8.0.14linuxglibc2.

在MySQL中的行级锁、表级锁和页级锁中，咱们介绍过，行级锁是MySQL中锁定粒度最细的一种锁，行级锁能大大减少数据库操作的冲突。行级锁分为共享锁和排他锁两种，本文将详细介绍共享锁和排他锁的概念、使用方式及注意事项。共享锁（ShareLock）共享锁又称读锁，是读取操作创建的锁。其他用户可以并发读取数据，但任

    MySQl大多数事务性存储引擎实现的都不是简单的行级锁。基于高性能考虑，他们一般都同时是想了多版本并发控制器（MVCC）。不仅仅MySQL，包括Oracle、PostgreSQL等其他数据库系统也都实现了MVCC，但各自实现机制不尽相同，因为MVCC没有一个统一的实现标准。MVCC可以说是行级锁的一个变种，但是他在多数情况下避免了加锁操作，因此开销更

原文：http://www.cnblogs.com/kissdodog/p/5422195.htmlMySQL的主从备份，听个名词很高大上，其实都是MySQL原本就实现的了，你只需要简单配置一下就可以实现。第一步：保持主从两个数据库是同步的，最好事先手动同步一下；第二步：停止两个数据库，分别更改配置文件；　　下面我使用如下两个

  程序运行在64位机器上用ODBC连接数据库，如果使用系统默认的ODBC管理器设置DSN，则在程序连接数据库时会报"数据源找不到名称和指定的默认驱动程序"的错误，面板上没有MySQL驱动的条目，设置好的数据源也没有显示在DelphiConnectString数据源列表中。       原因：你的程序找的是32位的ODBC管理器创建的DSN，所以

数据库中的数据很大，然后我有些新的数据后来加入到数据库中，也希望能够检索到，全部重新建立索引很消耗资源，这样需要用到“主索引增量索引”的思路来解决，这个模式实现的基本原理是设置两个数据源和两个索引。1、创建一个计数器一个简单的实现是，在数据库中增加一个计数表，记录将文档集分为两个部分的文档ID,每次重新构建主索引时，更新这个表先在mysql

常见的数据库攻击包括弱口令、SQL注入、提升权限、窃取备份等。对数据库日志进行分析，可以发现攻击行为，进一步还原攻击场景及追溯攻击源。0x01Mysql日志分析generalquerylog能记录成功连接和每次执行的查询，我们可以将它用作安全布防的一部分，为故障分析或黑客事件后的调查提供依据。1、查看log配置信息