nodejs对文件进行分页

最新推荐文章于 2023-11-03 20:20:54 发布

转载最新推荐文章于 2023-11-03 20:20:54 发布 · 162 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/witwave/p/4633629.html

文章标签：

#shell #awk

本文介绍了一种使用Node.js中的Child Process模块结合Awk命令来提取压缩文件指定行内容的方法。该方法适用于需要从大型CSV文件或其他文本文件中快速检索特定行的应用场景。

//从文件中提取文件指从x行到y行的内容 
//awk -v start=5 -v end=10 -F "\x01" '{if(NR>=start && NR<=end)print $1,NR}' app_v2.csv

var exec = require('child_process').exec;
var fs = require('fs');
var shell = {};
shell.getContentFromFile = function(file, pageIndex, pageSize, split, next) {
    fs.exists(file, function(exists) {
        if (!exists) {
            next('file not exist'+file, null, null);
        }
        var start = (pageIndex - 1) * pageSize + 1;
        var end = (pageIndex) * pageSize;
        var cmd = "gzip -d -c " + file + " | awk -v start=" + start + " -v end=" + end + " -F " + split + " '{ if(NR>=start && NR<=end) print $0}' ";
        console.log(" the awk: " + cmd);
        exec(cmd, function(err, stdout, stderr) {
            if (err) {
                console.log(err);
            }
            next(err, stdout, stderr);
        });
    });
};

shell.getFileLineCount = function(file, next) {
    fs.exists(file, function(exists) {
        if (!exists) {
              next('file not exist'+file, null, null);
        }
        var cmd = "gzip -d -c " + file + " | cat | wc -l";
        exec(cmd, next);
    });

};
module.exports = shell;

转载于:https://www.cnblogs.com/witwave/p/4633629.html