nodejs给文件链接添加md5

nodejs给文件链接添加md5

点点

2021-05-05 10:22 阅读 327 喜欢 0

因为没有用到webpack ,是java项目,所以准备做一个小工具,检索jsp或html中引用css js的地方,并根据对应的路径找到文件,对文件进行md5计算,最后给链接更新一个md5值,这样没有变化的就会缓存,有变化的就会从服务器更新。

大体思路

1.检索目标目录下的jsp 或 html 2.读取内容,根据正则找到 link 或 script 3.根据规则,找到对应的目录的文件 4.读取文件,计算MD5 5.更新回原来的地址 6.结束

代码实现

准备使用nodejs 来实现。

    //给jsp 或 html 中的css js 添加fileMd5值
    var fs = require('fs'),
readline = require('readline'),
path = require('path'),
join = path.join,
extname = path.extname,
async = require('async'),
colors = require('colors'),
url = require('url'),
crypto = require('crypto'),
qs = require('querystring');

    function AddMd5(directory,opts){
this.directory = directory;
this.fileList = [];
this.count = 0;
this.extList = opts.extList;//['.jsp','.html','.htm'];
this.exclude = opts.exclude;//['plugins'];
this.compress = opts.compress;
this.replace = opts.replace;//['${basepath}','${staticresdomain}','<%=basepath%>'];//替换字符串
return this;
 }
   //获得符合条件的文件
    AddMd5.prototype.getFiles = function(dirPath){
var thiz = this;
if(fs.existsSync(dirPath)){
    var files = fs.readdirSync(dirPath);
    if(files && files.length > 0){
        for(var i=0,max=files.length;i<max;i++){
            var temp = files[i];
            var filePath = join(dirPath,temp);
            var stats = fs.statSync(filePath);
            if(stats.isDirectory() && thiz.exclude.indexOf(temp) < 0){
                //继续
                thiz.getFiles(filePath);
            }else{
                var fileExt = extname(filePath).toLowerCase();
                if(thiz.extList.indexOf(fileExt) > -1){
                    //符合
                    thiz.fileList.push(filePath);
                }
            }
        }
    }
}
}
  AddMd5.prototype.start = function(){
var thiz = this,
    directory = thiz.directory;
thiz.getFiles(directory);
console.log('共计扫描到 '.green+(''+thiz.fileList.length).red+' 个符合条件的文件'.green);
async.mapLimit(thiz.fileList,5,function(item,cb){
    thiz.scan(item,cb);
},function(err,value){
    console.log('共计替换 '.green+(''+thiz.count).red +' 个链接'.green)
});
};

    AddMd5.prototype.scan = function(filePath,callback){
var thiz = this,compress = thiz.compress;
var is = fs.createReadStream(filePath);
var inter = readline.createInterface({input :is});
var strArr = '';
inter.on('line',function(line){
    var rst = thiz.checkLine(line);
    if(rst){//检查到有内容
        //处理并替换
        var type = rst.type;
        var md5 = rst.md5;
        //检索并替换
        var arr = /src[\s]*=[\s]*[\"\']?([^\'\"]*)[\'\"]?/i.exec(line);
        if(arr && arr.length > 0){
            var src = arr[1];
            var query = url.parse(src).query;
            var src2 = src.indexOf('?') > -1 ? src.substring(0,src.indexOf('?')) : src;
            var qsObj = qs.parse(query);
            qsObj.v = md5.substring(0,5);
            var qsStr = qs.stringify(qsObj);
            var newSrc= src2 + '?'+qsStr;
            line = line.replace(src,newSrc);
            console.log('替换 [ '.green+line.red+' ]'.green);
            thiz.count ++ ;
        }
    }
    strArr+=line+(compress ? '' : '\n');
});
inter.on('close',function(){
    //重新写入
    fs.writeFileSync(filePath,strArr);
    callback(null,null);
})
 };
     //根据文件路径获得FILEMD5
     AddMd5.prototype.getMd5 = function(filePath){
var buffer = fs.readFileSync(filePath);
var md5 = crypto.createHash('md5');
md5.update(buffer);
return md5.digest('hex').toLowerCase();
   };
     AddMd5.prototype.checkLine = function(str){
//检查字符串是否符合 link script 
var thiz = this,replace = thiz.replace,directory = thiz.directory;
str = str.toLowerCase().replace(/\s/g,'');
var rst = /\<script[\s\S]*src="([\$\{\}\w\.\/\<\%\=\>\?\&]*)"[\s\S]*\>[\s\S]*\<\/script\>/g.exec(str);
var src = '';
var type = '';
if(rst && rst.length > 0){
    src = rst[1];
    type = 'src';
}
rst = /^\<link[\s\S]*href="([\$\{\}\w\.\/\<\%\=\>\?\&]*)"[\s\S]*[\>|\/\>|\<\/link\>]$/g.exec(str);
if(rst && rst.length > 0 && rst[1].indexOf('favicon') < 0){
    src = rst[1];
    type = 'href';
}
if(src){
    if(replace && replace.length > 0){
        for(var i=0,max=replace.length;i<max;i++){
            src = src.replace(replace[i],'');
        }
    }
    var srcObj = url.parse(src);
    var query = srcObj.query;
    var filePath = join(directory,srcObj.pathname);
    if(fs.existsSync(filePath)){
        var fileMd5 = thiz.getMd5(filePath);
        return {
            md5 : fileMd5,
            query : query,
            filePath : srcObj.pathname,
            type : type
        };
    }
}
return null;
 };

 module.exports = AddMd5;

封装了一个命令行工具,以后就可以随意对某个目录进行压缩啦,发布后自己安装下就可以啦。

   npm install addmd5 -g

具体可以查看 https://github.com/chrunlee/addmd5

目前是最初的版本,很多地方还不严谨..尤其是我的正则比较烂。

转载请注明出处: http://sdxlp.cn/article/tianjia.html


如果对你有用的话,请赏给作者一个馒头吧 ...或帮点下页面底部的广告,感谢!!

赞赏支持
提交评论
评论信息(请文明评论)
暂无评论,快来快来写想法...
推荐
苹果手机微信语音没声音怎么办呢?很多用户对此还不是很清楚, 有很多小伙伴私信点点,点点这里就教给小伙伴们,苹果系统手机微信语音没声音的简单处理方法,希望能够对小伙伴们有所帮助。
智能手机是我们生活中的标配,有很多的手机功能不太好用,该如何处理哪?例如智能手机红米手机也是搭载了最新的miui13系统,所以也是具备miui13系统中的最新的纯净模式的,所以很多用户在打开之后就会造成无法下载第三方软件,很多小伙伴们觉得不太好用,所以很多小伙伴们想要知道红米手机纯净模式怎么关闭?
苹果12怎么打开5G?IPhone12系列全部支持5G网络,那我们在使用苹果12手机时,该怎么打开5G网络呢,苹果12怎么打开5G,IPhone125G怎么打开,下面就和点点一起来看看吧!
小伙伴们在使用QQ的过程中,无法避免误删了一些重要的聊天记录,而使用QQ的大多数原因都是因为微信无法传送大存储量的文件,所以很多小伙伴们都会利用QQ来传送文件,手机QQ聊天记录删除了怎么恢复?
智能手机成为我们生活中必不可少的生活用品,当我们在使用手机的时候,可以下载微信app来与好友取得联系,但是有时候微信会看不到,又遇到特别急的事情,那怎么在是好友状态不知道手机号的情况下,给其打电话。在微信内,一般用户都会绑定自己的手机号码,那么如何通过微信号来查询对应的手机号呢?接下来就由点点来告诉小伙伴们。
日常生活中会用到通讯工具,常用的就是QQ,微信,钉钉。有时候想要保存一些微信聊天记录,要如何才能永久储存呢?办法有很多,这个方法是最省钱省事保存最久的,可以将它们导入到word中,下面是具体办法,小编带小伙伴走一遭!
微信中最新更新了发送音乐的功能,可以在微信中搜索音乐发送给好友,所以会带给很多用户带来更多便捷的操作,不用再从第三方下载发送,下面就让涂涂给小伙伴们介绍一下微信发送音乐的具体操作。
生活中,小伙伴们有可能使用电脑后,直接热插拔,或者直接断电,基本会为了省事。那么这样就会造成电脑出现不安全的状态,下次就有可能开不起来啦!开不起蓝屏怎么办那?跟点点看一下。教您轻松解决,不用求人,费钱。