php实现mysql数据库分表分段备份分卷导出思路:统计sql语句变量的长度,按1个字符当成1
字节比较,如果大于设定分卷大小,则写入一个sql文件(我也不知道这样统计是否稳当 , 这也是借鉴其他的人的) 。
分卷导入思路:按行读取sql文件 , 将每一行当作完整的sql语句存到数组再循环执行插入数据库就可以了,但是在创建表语句分了多行,这个需要单独处理(就这个花了我好长时间的);
?php
//宋正河
转载请注明出处
set_time_limit(0);
header('content-type:text/html;charset=utf-8');
mysql_connect('localhost','root','root');
mysql_select_db('test');
$table_array=get_tables('test');
mysql_query('set
names
utf8');
$filesize=1024*1024*4;
$start=$_GET['start']?$_GET['start']:0;
$part=$_GET['part']?$_GET['part']:'1';
$table_index=$_GET['table_index']?$_GET['table_index']:'0';
$table=$table_array[$table_index];
$num=200000000;//这个数要足够大,可以是总记录数
$backupdata='';
if($start=='0'){
$query="SHOW
CREATE
TABLE
`{$table}`";
$result
=
mysql_query($query);
$row
=
mysql_fetch_row($result);
$backupdata
.=
"DROP
TABLE
IF
EXISTS
`{$table}`;\n"
.
$row[1]
.
";\n\n";
}
$limit=($start=='0')?'':"
limit
$start,$num
";
$query="select
*
from
`{$table}`
$limit
";
$result=mysql_query($query);
$numfields
=
mysql_num_fields($result);
//统计字段数
while($row=mysql_fetch_row($result)){
$comma
=
'';
//存储逗号
$backupdata_tmp
=
"INSERT
INTO
`{$table}`
VALUES
(";
for($i=0;
$i$numfields;
$i){
$backupdata_tmp
.=
$comma
.
"'"
.
mysql_escape_string($row[$i])
.
"'";
$comma
=
',';
}
$backupdata_tmp
.=
");\n";
if(strlen($backupdata) strlen($backupdata_tmp)
$filesize){
//写入文件并跳转
$file='data/'.$table.'-'.$part.'.sql';
file_put_contents($file,$backupdata);
echo
$file.'
备份完成 , 程序继续进行!';
$part;
//分段
//表名
//起点
//跳转
sleep(3);
echo
"scriptlocation.href='https://www.04ip.com/post/?start={$start}table_index={$table_index}part={$part}';/script";
exit;
}
$backupdata.=$backupdata_tmp;
$start;
}
if($backupdata){
$file='data/'.$table.'-'.$part.'.sql';
file_put_contents($file,$backupdata);
}
echo
$table.'备份完成!br
/';
sleep(2);
$table_index;
if($table_array[$table_index]){
echo
"scriptlocation.href='https://www.04ip.com/post/?table_index={$table_index}';/script";
exit;
}else{
echo
'恭喜你,数据库备份完毕!';
}
function
get_tables($db){
$tq
=
mysql_list_tables($db);
while($tr
=
mysql_fetch_row($tq)){
$arrtb[]
=
$tr[0];
}
return
$arrtb;
}
?
以上所述就是本文的全部内容了,希望大家能够喜欢 。
PHP mysql该怎样分表实现 详细?0?3编译时,只要使用 --with-mysql[=DIR] 配置选项即可,其中可选的 [DIR] 指向 MySQL 的安装目录 。虽然本 MySQL 扩展库兼容 MySQL 4.1.0 及其以后版本,但是它不支持这些版本提供的额外功能 。要使用这些功能,请使用 MySQLi 扩展库 。专职优化、域名注册、网站空间、虚拟主机、服务器托管、MySQL 数据库、vps 主机、服务器租用的中国信息港在这里为你详细介绍! PHP mysql 分表实现 当数据量猛增的时候,我们都会选择库表散列等等方式去优化数据读写速度 。专门做了一个简单的尝试,1 亿条数据,分100 张表 。具体实现过程如下 。首先创建100 张表: $i=0; while($i
php 数据表每天会存入10t的数据 该如何进行分表10t数据 你算下需要多少台服务器存,然后哈希用户唯一标识,给用户平均的分配到服务器上,
但是,你的这个假设也太逗了 。假设1g数据单表 。存500万条,你这10t数据, , 一天就要产生5千亿条记录 。你的网站干嘛的,给全银河系的人访问的吧
1亿条数据如何分表100张到Mysql数据库中(PHP)下面通过创建100张表来演示下1亿条数据的分表过程php数据分表,具体请看下文代码 。
当数据量猛增的时候,大家都会选择库表散列等等方式去优化数据读写速度 。笔者做了一个简单的尝试 , 1亿条数据,分100张表 。具体实现过程如下:
首先创建100张表:
$i=0;
while($i=99){
echo
"$newNumber
\r\n";
$sql="CREATE
TABLE
`code_".$i."`
(
`full_code`
char(10)
NOT
NULL,
`create_time`
int(10)
unsigned
NOT
NULL,
PRIMARY
KEY
(`full_code`),
)
ENGINE=MyISAM
DEFAULT
CHARSET=utf8";
mysql_query($sql);
$i;
下面说一下php数据分表我的分表规则 , full_code作为主键,php数据分表我们对full_code做hash
函数如下:
$table_name=get_hash_table('code',$full_code);
function
get_hash_table($table,$code,$s=100){
$hash
=
sprintf("\u",
crc32($code));
echo
$hash;
$hash1
=
intval(fmod($hash,
$s));
return
$table."_".$hash1;
}
这样插入数据前通过get_hash_table获取数据存放的表名 。
最后我们使用merge存储引擎来实现一张完整的code表
CREATE
TABLE
IF
NOT
EXISTS
`code`
【php数据分表 php 分表后如何查询】(
`full_code`
char(10)
NOT
NULL,
`create_time`
int(10)
unsigned
NOT
NULL,
INDEX(full_code)
)
TYPE=MERGE
UNION=(code_0,code_1,code_2.......)
INSERT_METHOD=LAST
;
这样我们通过select
*
from
code就可以得到所有的full_code数据了 。
以上介绍就是本文的全部内容,希望对大家有所帮助 。
php 分表分库中间件用原生php来写,封装一个db类,封装一个table类,通过工厂模式来创建某个库某个表的对象,有了这个对象就可以操作分库分表了;这个中间件可以有自己的命名空间 。
关于php数据分表和php 分表后如何查询的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站 。
推荐阅读
- 包含thinkphp3.2循环的词条
- 简单的棋牌游戏开发的简单介绍
- 工作室开发游戏去哪里推销,游戏工作室开发游戏
- oracle怎么调优的 oracle 调优
- 怎么看硬盘坏了没有,bios怎么看硬盘坏没坏
- arc-gis怎么与cad联动,arcgis添加cad
- linux命令read,linux命令red
- c语言的函数易错点 c语言考试常用函数
- 关于asp.netonclick事件的信息