MySQL导大量数据的程序实现方法
来源:百度文库 编辑:神马文学网 时间:2024/05/04 13:16:49
MySQL导大量数据的程序实现方法
作者: cnd8, 出处:IT专家网论坛, 责任编辑: 陈子琪, 2010-03-23 13:00大家一定使用过 phpmyadmin 里面的数据库导入,导出功能,非常方便。但是在实际应用中,我发现如下几个问题:
大家一定使用过 phpmyadmin 里面的数据库导入,导出功能,非常方便。但是在实际应用中,我发现如下几个问题:
1、数据库超过一定尺寸,比如6M 这时使用导出一般没问题,可以正确的保存到本机硬盘上面,但是导入则不行!原因是:一般的 PHP.INI 里面设置临时文件/上传文件的大小限制为2M,而phpmyadmin使用了上传的方式,造成失败。
2、导出到硬盘的 .SQL 文件在导回时,经常出现由于某些单引号的问题引起失败,造成导入失败,只能用 mysql等应用程序导入了。
我的数据库已经超过10M,所以必须解决这个问题。我的思路:
导出: 用phpmyadmin 保存数据库/表格结构,用脚本读取数据库内容并保存到文件里面!
导入: 用phpmyadmin 恢复数据库/表格结构,用脚本读取文件,然后保存到库里面!
导出程序如下:调用方法为 ****.php?table=tablename
这个简单的程序目前一次保存一个表格!!每行为一个字段的数据!!
if($table=="")exit();
mysql_connect("localhost","name","password");
mysql_select_db("database");
$result = mysql_query("select * from $table");
if(mysql_num_rows($result) <= 0) exit();
echo "开始转换数据到文本...
";
$handle = fopen("$table.txt","w");
$numfields = mysql_num_fields($result);
fputs($handle,$numfields." ");
for($k=0;$k
{
$msg = mysql_fetch_row($result);
for($i=0;$i<$numfields;$i++)
{
$msg[$i] = str_replace(" ","&&php2000mysqlreturn&&",$msg[$i]);
$msg[$i] = str_replace(" " ,"&&php2000mysqlreturn&&",$msg[$i]);
fputs($handle,$msg[$i]." ");
}
fputs($handle,"------- php2000 dump data program V1.0 for MySQL --------\r\n");
}
fclose($handle);
echo "ok";
?>
导入的程序如下:用法同上面!
if($table=="")exit();
mysql_connect("localhost","name","password");
mysql_select_db("database");
$message = file("$table.txt");
echo $numfields = chop($message[0]);
for($k=1;$k
{
$value="";
for ($i=$k;$i<($k+$numfields-1);$i++)
{
$tmp = str_replace("&&php2000mysqlreturn&&","\r\n",chop($message[$i]));
$value .= "'".addslashes($tmp)."',";
}
$tmp = str_replace("&&php2000mysqlreturn&&","\r\n",chop($message[$k+$numfields-1]));
$value .= "'".$tmp."'";
$query = "insert into $table values (".$value.")";
echo mysql_error();
mysql_query($query);
echo $k." ";
}
echo "ok";
?>
使用方法和可能的问题!
1、导入时 file()函数可能会有问题(我的10M的数据没出现问题),可以改为 fopen()然后没次读一行!!
2、导入,导出都需要用 ftp 操作,也就是导出后,用 ftp 把数据转到本机,导入时先用ftp转移数据到服务器!
MySQL导大量数据的程序实现方法
从MySQL导入导出大量数据的程序实现方法
从MySQL导入导出大量数据的程序实现方法
实现 MySQL 数据库数据的同步方法介绍
MySQL实现表中取出随机数据
MySQL单一表突破4G限制的实现方法
Linux下MySQL客户端mysql,select大量数据时可以分页
一个将文件数据(汉字)导入到mysql的C程序_原创文档_论坛_PHPChina 开源社区...
用概率论的方法实现理想化程序 - 批量插入数据库
MYSQL到ORACLE程序迁移的注意事项
MYSQL的master/slave数据同步配置
将sqlserver的数据导入Mysql中
MYSQL的master/slave数据同步配置
MySQL是如何随机选取数据的
详解MySQL+Apache集群模式的实现
Visual Basic中在同一界面输入大量数据的几种方法
大量建帳號的方法
大量建帳號的方法
S3C2410 中断程序的实现
MySQL数据导入导出
mysql中的数据编码
一个连接两个不同MYSQL数据库的PHP程序
Excel设置数据有效性实现单元格下拉菜单的3种方法
SQL删除所有表数据的实现方法 - 51CTO.COM