数据之路

专注数据架构 外功修行,内功修神

mysql快速导入5000万条数据过程记录(LOAD DATA INFILE方式)

首先将ids_app_installed_top_1000_3_ratio_wrap_m_top5000W.txt放入到数据库数据目录/var/local/mysql/data/${db_name}/ 下,并确保导入用户拥有这个txt文件的权限,否则会报Error 13错误1.${table_na...

2017-07-16 11:38:53

阅读数 7500

评论数 0

开源数据库中间件对比

本文比较了360(Atlas)、美团点评(DBProxy)、Kingshard、携程(DAL)、蘑菇街(TSharding)、阿里(TDDL)、当当(Sharding-JDBC 360)、MyCAT 共8种当下流行的开源数据库中间件,从总体来看mycat占据优势

2017-04-16 14:52:31

阅读数 10187

评论数 6

数据库拆分的几种方式

数据库做拆分的几种方式:1.按功能划分(垂直切分)将不同功能相关的表放到不同的数据库中,这样做的好处是非常直观。但当某一部分的功能其数据量或性能要求超出了可控的范围,就需要继续对其进行深入的再切分。2.按表中某一字段值的范围划分(水平切分)当伴随着某一个表的数据量越来越大,以至于不能承受的时候,就...

2016-05-04 00:22:39

阅读数 4649

评论数 0

mysql数据库分库分表(Sharding)

mysql数据库切分前言通过MySQLReplication功能所实现的扩展总是会受到数据库大小的限制,一旦数据库过于庞大,尤其是当写入过于频繁,很难由一台主机支撑的时候,我们还是会面临到扩展瓶颈。这时候,我们就必须许找其他技术手段来解决这个瓶颈,那就是我们这一章所要介绍恶的数据切分技术。 何谓数...

2016-04-06 10:51:41

阅读数 4682

评论数 2

[解决] Error Code: 1044. Access denied for user 'root'@'%' to database

SQLException : SQL state: 42000 com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Access denied for user 'root'@'%' to database 'ranger' Err...

2016-03-01 11:27:15

阅读数 19626

评论数 0

忘记mysq rootl密码后解决办法

如果mysql正在运行,kill掉: killall -TERM mysqld 启动mysql(无需输入密码):bin/safe_mysqld –skip-grant-tables & 然后 >use mysql >update user set password=passw...

2015-12-06 17:54:59

阅读数 1833

评论数 0

数据库事务隔离级别

一,事务的4个基本特征  Atomic(原子性):  事务中包含的操作被看做一个逻辑单元,这个逻辑单元中的操作要  么全部成功,要么全部失败。  Consistency(一致性):  只有合法的数据可以被写入数据库,否则事务应该将其回滚到最初  状态。  Isolation(隔离性):  ...

2015-11-14 10:53:45

阅读数 747

评论数 0

mysql修改表、字段、库的字符集

mysql修改表、字段、库的字符集 02 五月 2011 | 数据库 | Tags: charset, mysql, 字符集 修改数据库字符集: ALTER DATABASE db_name DEFAULT CHARACTER SET character_name [COLLAT...

2015-09-24 01:19:26

阅读数 910

评论数 0

mysql 存在update不存在insert

如果在INSERT语句末尾指定了ON DUPLICATE KEY UPDATE,并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值,则在出现重复值的行执行UPDATE;如果不会导致唯一值列重复的问题,则插入新行。 例如,如果列 a 为 主键 或 拥有UNIQUE索引,并...

2015-09-23 11:11:20

阅读数 1430

评论数 0

Maatkit--Mysql的高级管理工具

Maatkit是不错的mysql管理工具,包含以下主要工具: 1、mk-table-checksum 检查主从表是否一致的有效工具 2、mk-table-sync 有效保证表一致的工具,不必重载从表而能够保证一致。 3、mk-visual-explain  exlpain解释工具 4、mk...

2014-02-12 22:37:41

阅读数 1927

评论数 1

提示
确定要删除当前文章?
取消 删除