PHP 大数据量写入 csv文件 的一些代码片段

最新推荐文章于 2024-07-19 10:46:00 发布
原创 最新推荐文章于 2024-07-19 10:46:00 发布 · 2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了一种将大量订单数据导出至Excel文件的方法，包括设置文件头、字符编码及利用PHP处理数据并逐批写入的过程。该方法适用于需要高效处理大量数据的场景。 
private function write($bid = 0){
    set_time_limit(0);
    // 输出Excel文件头 
    header('Content-Type: application/vnd.ms-excel;charset=gbk');
    header('Content-Disposition: attachment;filename="产品导出.csv"');
    header('Cache-Control: max-age=0');
    // PHP文件句柄，php://output 表示直接输出到浏览器 
    $fp = fopen('php://output', 'a');
    // 输出Excel列头信息 
    $head = array(
        0 => '标题',
        1 => '连接'
    );
    
    foreach ($head as $i => $v) {
        // CSV的Excel支持GBK编码，一定要转换，否则乱码 
        $head[$i] = iconv('utf-8', 'gbk', $v);
    }
    // 写入列头 
    fputcsv($fp, $head);
    $row = array();
    $row['serial'] = "标题";
    $row['wserial'] = '连接';
    fputcsv($fp, $row);
}

另外一些

<?php
    /**
     * 导出推送消息详情
     * @author Jiaxu<156549562@qq.com> 
     * @date   2015-01-19
     */
	 
	function orderlist_execl2(){
	    $order = M("order","t_","51yche");
        $user = M("user","t_","51yche");

        if($_GET['date'] != NULL){
            $condition['_string'] = ' a.order_add_timestamp > "'.$_GET['date'].' 00:00:00" AND a.order_add_timestamp<"'.$_GET['date'].' 23:59:59" and d.route_type=1';
        }else{
			$condition['_string'] = ' a.order_add_timestamp > "'.date("Y-m-d",time()).' 00:00:00" AND a.order_add_timestamp<"'.date("Y-m-d",time()).' 23:59:59"';
		}
		
		
		$count = $order->table('t_order as a')
							->join('LEFT JOIN t_order_push as e ON a.order_id=e.fk_order_id')
							->join('LEFT JOIN t_user as b ON e.fk_user_id=b.user_id')
							->join('LEFT JOIN t_user as c ON a.fk_user_id=c.user_id')
							->join('LEFT JOIN t_route as d ON e.fk_user_id=d.fk_user_id')
							->join('LEFT JOIN t_driver as f ON e.fk_user_id=f.fk_user_id')
							->where($condition)
							->count();
		
		set_time_limit(0); 
		$page_start = 0;
		$base_num = 10000;
		$limt = ceil($count/$base_num);
		if($count<$p_num){
			$p_num = $count;
			
			if($count<$base_num){
				$limt = 1;
			}else{
				$limt = ceil($count/$base_num);
			}
			
		}
		$title = array('请求ID','发布时间','乘客ID','乘客昵称','出发时间','起点名称','终点名称',
							'起点坐标','终点坐标','车型选择','订单价格','车主ID','车主昵称','车主类型',
							'车型','线路ID','车主线路出发时间','车主起点','车主终点','起点坐标',
							'终点坐标','详情展示时间','抢单时间','订单状态','达成订单id','付款时间',
							'完成时间','取消时间','操作人','取消原因','客服的备注');

        foreach ($title as $k => $v) {
            $title[$k]=iconv("UTF-8", "gbk",$v);
        }
        $title= implode("\t", $title);
        $str = "$title\n";
		$file_dir = C('DLOG_DIR');
		$excel_file = $file_dir."order_push_list-".$_GET['date'].".xls";
		$fp = fopen($excel_file, 'w');
		for($i=1;$i<=$limt;$i++){
			$Push = array();
			$Push = $order->table('t_order as a')
						->join('LEFT JOIN t_order_push as e ON a.order_id=e.fk_order_id')
                        ->join('LEFT JOIN t_user as b ON e.fk_user_id=b.user_id')
                        ->join('LEFT JOIN t_user as c ON a.fk_user_id=c.user_id')
						->join('LEFT JOIN t_route as d ON e.fk_user_id=d.fk_user_id')
						->join('LEFT JOIN t_driver as f ON e.fk_user_id=f.fk_user_id')
                        ->where($condition)
						->limit($page_start.','.$base_num)
                        ->field('e.fk_user_id as push_driver_id,a.order_id,a.order_add_timestamp,a.order_start_timestamp,a.order_distance,a.order_start,a.order_end,a.order_start_lng,a.order_start_lat,a.order_end_lng,a.order_end_lat,a.order_car_type,a.order_amt,b.user_nick,b.user_rank,c.user_nick as passenger_user_nick,d.route_id,d.route_type,d.route_start_time,d.route_start,d.route_end,d.route_start_lat,d.route_start_lng,d.route_end_lat,d.route_end_lng,f.driver_car_type')
						->order('e.order_push_time desc')
                        ->select();
			
			foreach ($Push as $key => $value) {
				if($Push[$key]['driver_user_id']!=0){
					$Push[$key]['order_driver_get_time']=$this->getOrderTime($value['order_id']);
				}else{
					$Push[$key]['order_driver_get_time']='';
				}
				if($this->getPayTime($value['order_id'])){
					$Push[$key]['order_pay_time']=$this->getPayTime($value['order_id']);
				}else{
					$Push[$key]['order_pay_time']='';
				}
				if($this->getFinishTime($value['order_id'])){
					$Push[$key]['order_finish_time']=$this->getFinishTime($value['order_id']);
				}else{
					$Push[$key]['order_finish_time']='';
				}
				
				if($this->getCancelTime($value['order_id'],$value['order_status'])){
					$Push[$key]['order_cancel_time']=$this->getCancelTime($value['order_id'],$value['order_status']);
				}else{
					$Push[$key]['order_cancel_time']='';
				}
				
			}
			
			$arr = array();
			 foreach ($Push as $key => $value) {
				$arr[$key]['order_id'] = $value['order_id'];
				$arr[$key]['order_add_timestamp'] = $value['order_add_timestamp'];
				$arr[$key]['fk_user_id'] = $value['fk_user_id'];
				$arr[$key]['passenger_user_nick']=$value['passenger_user_nick'];
				$arr[$key]['order_start_timestamp'] = $value['order_start_timestamp'];
				$arr[$key]['order_start'] = $value['order_start'];
				$arr[$key]['order_end'] = $value['order_end'];
				$arr[$key]['order_start_coordinate'] ="({$value['order_start_lng']}".","."{$value['order_start_lat']})";
				$arr[$key]['order_end_coordinate'] ="({$value['order_end_lng']}".","."{$value['order_end_lat']})";
				$arr[$key]['order_car_type'] = $this->getCartype($value['order_car_type']); 
				$arr[$key]['order_amt'] = $value['order_amt'];
				$arr[$key]['push_driver_id'] = $value['push_driver_id'];
				$arr[$key]['user_nick'] = $value['user_nick'];
				if($value['user_rank']==1){
					$arr[$key]['driver_type']='普通车主';
				}elseif($value['user_rank']==2){
					$arr[$key]['driver_type']='核心车主';
				}else{
					$arr[$key]['driver_type']='租赁车主';
				}
				if($value['driver_car_type']==1){
					$arr[$key]['driver_car_type']='经济型';
				}elseif($value['driver_car_type']==2){
					$arr[$key]['driver_car_type']='舒适型';
				}else{
					$arr[$key]['driver_car_type']='豪华型';
				}
				$arr[$key]['route_id'] = $value['route_id'];			
				$arr[$key]['route_start_time'] = $value['route_start_time'];
				$arr[$key]['route_start'] = $value['route_start'];
				$arr[$key]['route_end'] = $value['route_end'];
				$arr[$key]['route_start_coordinate'] ="({$value['route_start_lng']}".","."{$value['route_start_lat']})";
				$arr[$key]['route_end_coordinate'] ="({$value['route_end_lng']}".","."{$value['route_end_lat']})";
				
				$arr[$key]['order_driver_first_time']='0000-00-00 00:00:00';
				
				$arr[$key]['order_driver_get_time']=$value['order_driver_get_time'];
				$arr[$key]['order_status'] = $this->getStatusDesc($value['order_status']);
				if($value['driver_user_id']!=0){
					$arr[$key]['order_get_id']=$value['order_id'];
				}else{
					$arr[$key]['order_get_id']='';
				}
				$arr[$key]['order_pay_time']=$value['order_pay_time'];
				$arr[$key]['order_finish_time']=$value['order_finish_time'];
				$arr[$key]['order_cancel_time']=$value['order_cancel_time']; 
                $arr[$key]['fk_mis_nickname']=$value['fk_mis_nickname'];
                $arr[$key]['order_cancel_reason']=$value['order_cancel_reason'];
                $arr[$key]['order_cancel_content']=$value['order_cancel_content']; 
			}
			
			foreach($arr as $key=>$val){
				foreach ($val as $ck => $cv) {
					$arr[$key][$ck]=iconv("UTF-8", "gbk", $cv);
				}
				$arr[$key]=implode("\t", $arr[$key]);
			}
			fwrite($fp,implode("\n",$arr));
			fwrite($fp,"\n");
			unset($Push);
			unset($arr);
			$page_start = $page_start+$base_num;
		}
		
		fclose($fp);
		
		echo "<a href='/log/order_push_list-".$_GET['date'].".xls'>/log/order_push_list-".$_GET['date']."xls</a>";
		
	}
?>


php对csv文件的读取，写入，输出下载操作
wangking:开源世界，人人都用上了正版啦。。。
10-21 1万+
在实际工作中，很多时候需要把网站上的一些数据下载到CSV文件里，方便以后查看。亦或者是用CSV进行一些批量的上传工作。这个时候我们就需要对CSV进行读写操作。 1.CSV的读取操作<?php $file = fopen(D:/file/file.csv,r); while ($data = fgetcsv($file)) { //每次读取CSV里面的一行内容
php实现CSV文件导入和导出
12-18
导出过程通常涉及查询数据，然后使用`fputcsv()`函数将数据写入文件。例如： ```php if ($action == 'export') { $result = mysql_query("SELECT * FROM student"); header("Content-Type: text/csv"); header(...
php 数据库 写入csv文件格式,php 数据写入到CSV文件实现方法
weixin_35792040的博客
03-09 293
这篇文章主要为大家详细介绍了php 数据写入到CSV文件实现方法，具有一定的参考价值，可以用来参考一下。对php写入数据到CSV文件范例代码感兴趣的小伙伴，下面一起跟随512笔记的小编两巴掌来看看吧！/*** php写入数据到CSV文件范例代码** @param* @arrange 512-笔记网： www.512PiC.com**/$row = 0;ini_set('max_execution_...
php写入数据到CSV文件的方法
10-24
主要介绍了php写入数据到CSV文件的方法,涉及php操作csv文件的技巧,非常具有实用价值,需要的朋友可以参考下
php 数据库 写入csv文件格式,php如何将数据写入到CSV文件
weixin_36474966的博客
03-09 427
这篇文章主要介绍了php写入数据到CSV文件的方法,涉及php操作csv文件的技巧,非常具有实用价值,需要的朋友可以参考下本文实例讲述了php写入数据到CSV文件的方法。具体实现方法如下：...
PHP大数据文本读取与写入
a272503680的专栏
04-14 734
/**  * 大文本数据写入  * @param string $filePath 文件路径  * @param string $str 待写入数据  * @param string $wrap 换行符  * @return boolean  * @author 李小刚  858864436@qq.com  */ function fileWrite($filePa
23个实用PHP代码片段助力高效开发
第一个代码片段`generateCsv()`函数利用PHP内置的`fputcsv()`函数将二维数组数据写入临时内存流（使用`php://temp`），避免了直接操作磁盘文件所带来的性能损耗和路径依赖问题。该方法首先调用`fopen('php://temp', ...
phpExcel导出大量数据.docx
12-13
PHPExcel库允许开发者创建、读取和修改各种Excel文件，非常适合进行大数据量的表格导出。 在提供的代码片段中，我们看到一个名为`down_report_jl()`的函数，用于结算记录的导出。首先，这个函数通过设置`set_time_...
PHP+CSV成绩查询系统：无需后台，通用便捷
在PHP中处理CSV文件是一种常见的数据导入导出操作，可以通过内置函数如`fgetcsv()`来读取CSV文件，使用`fputcsv()`来写入数据到CSV文件。 ### 知识点二：成绩查询系统设计原理 成绩查询系统设计的目的是为用户提供...
csv文件导入到mysql
最新发布
01-03
下面给出了一段 PHP 代码片段用于展示如何解析本地磁盘上的 CSV 并批量执行插入操作： ```php <?php $handle = fopen("data.csv", "r"); while (($data = fgetcsv($handle, 1000, ",")) !== FALSE) { $query = ...
PHP CSV文件写入
qq_36211608的博客
06-08 917
什么是 csv csv是最通用的一种文件格式,它可以非常容易地被导入各种PC表格及数据库中。 此文件,一行即为数据表的一行。生成数据表字段用半角逗号隔开。csv文件用记事本和excel都能打开,用记事本打开显示逗号,用excel打开,没有逗号了,逗号都用来分列了 写csv文件 <?php $data = [ ['id' => 1, 'name' => '刘备', 'description' => "有着皇叔之称的大能"], ['id' => 2, 'name'
生成和写入CSV文件
apiok的博客
07-19 448
此函数使用fputcsv PHP内置函数生成逗号分隔文件(.CSV).该函数有3个参数：数据，分隔符和CSV enclosure,默认是双引号。这个跟fputcsv无关，而主要的关键在于你打开文件的模式，你需要使用 a 或是 a+ 模式打开文件。'a+' 读写方式打开，将文件指针指向文件末尾。如果文件不存在则尝试创建之。'a' 写入方式打开，将文件指针指向文件末尾。如果文件不存在则尝试创建之。2.php写入和读取数据到CSV文件。1.php数据创建CSV文件。
php+读取文件+csv文件,教你用php读写csv格式的文件
weixin_42134537的博客
03-10 578
免费资源网 - https://freexyz.cn/读取csv格式文件function read_csv($file){setlocale(LC_ALL,'zh_CN');//linux系统下生效$data = null;//返回的文件数据行if(!is_file($file)&&!file_exists($file)){die('文件错误');}$cvs_file = fope...
php数据写入内存,当大量数据批量写入文件时，php脚本内存不足
weixin_35626356的博客
03-10 509
我的脚本在运行我们的内存方面遇到了持续的问题。我需要脚本循环访问数据库中的每个客户，然后获取所有产品数据并生成文本文件。每个客户可以拥有1到100,000个产品。我以1,000批为单位提取产品数据，并写入文件以尝试停止脚本超时。这已经得到了很大的改善，但是，我仍然遇到有大量产品的客户问题。对于拥有5000多种产品的客户来说，这似乎有问题。它似乎停止在第5批次(5,000 prods)后写入文件，但...
php将数据写入csv文件,php写入数据到CSV文件范例代码
weixin_42519497的博客
03-20 399
php写入数据到CSV文件范例代码$row = 0;ini_set('max_execution_time', 300);$cate;$item;$value;$us;$fp = fopen("torah1.csv", "w");if (($handle = fopen("t.csv", "r")) !== FALSE) {while (($data = fgetcsv($handle, 1000...
PHP CSV文件的写入与读取
哪吒的小橘猫
09-21 2795
1. 什么是csv ？ 逗号分隔值（Comma-Separated Values，CSV），其文件以纯文本形式存储表格数据（数字和文本），文件的每一行都是一个数据记录。每个记录由一个或多个字段组成，用英文逗号分隔。 使用WPS即可打开，效果和Excel相同。因为只是一种约定的格式，解析不会像 Excel 麻烦和耗费内存。 我通常使用csv文件作为数据库内容的导出，然后WPS打开再另存为Excel给...
php怎样创建csv文件,如何使用PHP创建CSV文件？（代码示例）
weixin_39614109的博客
03-26 332
CSV(逗号分隔值)是在应用程序之间传输表格数据的最常用方法之一；创建将数据导出到CSV的代码在许多应用程序中非常有用。下面本篇文章就来带大家了解如何使用PHP创建CSV文件，希望对大家有所帮助。下面就通过代码示例来具体介绍一下：使用静态数据创建CSV文件如果要将数据存储到csv文件中，则可以使用与以下类似的代码：//创建并打开“demosaved.csv”文件进行写入$file=fopen('...
在PHP中读写CSV格式文件（不是PHP自带函数)
菜农HotPower在优快云的博客
03-24 509
<?php $str = $_REQUEST["q"];//取出消息 $mess = "";//回送消息 if ($str !== "") {//消息不为空 $array = explode("~", $str);//命令和内容以"~"分割 $len = count($array);//统计 // $mess = $array[0] . "~" . $len; if($len ==...
php读取csv文件数据，大批量写入数据库
明日晴空的博客
08-16 1485
直接上接口代码： public function updateKiwibuyuser(){ ini_set('memory_limit', '-1'); //PHP内存设置 $filePath = 'filename.csv'; // 文件路径 （要改成自己的路径） $handle=fo...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值