cnwhy/lib-qqwry

用NodeJS解析纯真IP库(QQwry.dat) 支持IP段查询

lib-qqwry

lib-qqwry是一个高效纯真IP库(qqwry.dat)引擎;

安装

npm i lib-qqwry

使用

cli (v1.3.0+)

从1.3版本开始支持命令模式, 你可以用把lib-qqwry安装到全局来使用;

• qqwry search <ip> [ips...] 查询IP/IP段
• qqwry find <keyword> [keyword...] 反查IP段

node

var libqqwry = require('lib-qqwry');
var qqwry = libqqwry() //初始化IP库解析器
qqwry.speed(); //启用急速模式;

var ip1 = qqwry.searchIP("202.103.102.10"); //查询IP信息
var ips = qqwry.searchIPScope("0.0.0.0","1.0.0.0");  //查询IP段信息
//异步查询IP段信息
qqwry.searchIPScope("0.0.0.0","1.0.0.0",function(err,iparr){
  console.log(iparr);
});
//查询IP段信息,结果以可读流返回
var ipStream = qqwry.searchIPScopeStream('0.0.0.0','1.0.0.0',{format:'json'});
// s.pipe(fs.readFileSync(outFile))
ipStream.pipe(process.stdout)

API

libqqwry.ipToInt(IP) IP地址转数值

> libqqwry.ipToInt("255.255.255.255")
4294967295

libqqwry.intToIP(INT) 数值转IP地址

> libqqwry.intToIP(4294967295)
'255.255.255.255'

libqqwry.ipEndianChange(INT) 字节序转换

按32位转换参数的字节序
一些云平台的环境变量中IP信息可能是Little-Endian形式的数值;

> libqqwry.ipEndianChange(0x010000FF)
4278190081 //0xFF000001

new libqqwry(speed,dataPath) 实例化一个IP库解析器对像(Qqwry)

speed : 是否开启急速模式,可选; //默认false;
dataPath : IP库路径,可选; //默认路径为data文件夹中(__dirname + "/data/qqwry.dat"); // 可以简写为 libqqwry(speed,dataPath)

var libqqwry = require('lib-qqwry');
var qqwry = libqqwry(true);

libqqwry(), libqqwry.init() 功能相同

解析器对像 Qqwry

qqwry.searchIP(IP) 单个IP查询

IP : IP地址/IP数值

便捷调用: qqwry(IP) v1.2.0+

> qqwry("255.255.255.255");
{ int: 4294967295,
  ip: '255.255.255.255',
  Country: '纯真网络',
  Area: '2017年1月5日IP数据' }

qqwry.searchIPScope(beginIP,endIP,[callback]) IP段查询

beginIP : 启始IP
endIP : 结束IP
callback: function(err,arrdata){} 没有回调则使用同步查询;

便捷调用: qqwry(beginIP,endIP,callback) v1.2.0+

> qqwry("8.8.8.0","8.8.8.8");
[ { begInt: 134744064,
    endInt: 134744071,
    begIP: '8.8.8.0',
    endIP: '8.8.8.7',
    Country: '美国',
    Area: '加利福尼亚州圣克拉拉县山景市谷歌公司' },
  { begInt: 134744072,
    endInt: 134744072,
    begIP: '8.8.8.8',
    endIP: '8.8.8.8',
    Country: '美国',
    Area: '加利福尼亚州圣克拉拉县山景市谷歌公司DNS服务器' } ]

qqwry.searchIPScopeStream(beginIP,endIP,options) 流形式反回IP段结果 v1.3.0+

beginIP : <string|int> // 启始IP
endIP : <string|int> // 结束IP
options:

• format : //输出格式, 支持 'text' , 'csv', 'json', 'object'
• outHeader: //为true时 'csv' 会输出表头 , 'json' 会以对像数组形式输出(参考searchIPScope方法); 默认 false

流模式适合查询结果数据量较大的情况使用
format说明: 'csv' , 'json' 格式适合直接输出到文件, 'object' 将返回对像流, 适合程序二次处理数据

> qqwry.searchIPScopeStream("8.8.8.0","8.8.8.8").pipe(process.stdout);
8.8.8.0 - 8.8.8.7                   美国 加利福尼亚州圣克拉拉县山景市谷歌公司
8.8.8.8 - 8.8.8.8                   美国 加利福尼亚州圣克拉拉县山景市谷歌公司DNS服务器

> qqwry.searchIPScopeStream("8.8.8.0","8.8.8.8",{format:'csv'}).pipe(process.stdout);
134744064,134744071,8.8.8.0,8.8.8.7,美国,加利福尼亚州圣克拉拉县山景市谷歌公司
134744072,134744072,8.8.8.8,8.8.8.8,美国,加利福尼亚州圣克拉拉县山景市谷歌公司DNS服务器

> qqwry.searchIPScopeStream("8.8.8.0","8.8.8.8",{format:'json'}).pipe(process.stdout);
[[134744064,134744071,"8.8.8.0","8.8.8.7","美国","加利福尼亚州圣克拉拉县山景市谷歌公司"],[134744072,134744072,"8.8.8.8","8.8.8.8","美国","加利福尼亚州圣克拉拉县山景市谷歌公司DNS服务器"]]

qqwry.speed() 启用急速模式

急速模式实质为将IP库文件读入内存中以提升效率.

qqwry.unSpeed() 停用急速模式

lib-qqwry's Issues

朋友，IPv6的问题

貌似node v0.12.7 发现 有IPv6格式的IP，不知道有没有打算兼容和支持下。

另外国外的ip地址库 怎么处理，一个gbk.js 能显示完么

建议命令行版本独立一个新模块

模块非常好，但为什么要吧命令行硬加进来？
单独提取一个命令行版本会好点。
保持模块小而干净，会更加优秀。

ReferenceError: ua is not defined

gbk.js:6
str += String.fromCharCode(ua[Code << 8 | arr[++n]]);

再pm2启动项目,会有 too many open files的错误

qqip(data, isstr = false) {
//我写在一个工具类里面了
if (data.indexOf(':') != -1) {
let iparr = data.split(':')
data = iparr[iparr.length - 1]
}
var qqwry = libqqwry.init();
// qqwry.speed(); //启用急速模式 比不开启效率率快非常多 但多占10M左右内存;
//我现在就是关闭了急速模式, 才没有too many open files的错误
var ip1 = qqwry.searchIP(data); //查询IP信息
// qqwry.unSpeed();//关闭急速模式
if (isstr) {
return ip1.Country + '-' + ip1.Area
}
if (ip1.int) {
delete ip1.int
}
return ip1
// var ips = qqwry.searchIPScope("0.0.0.0", "1.0.0.0"); //查询IP段信息
}

改为普通模式后,速度明显没有急速模式快了

"The IP address is not normal! >> ::1"

var libQqwry = require("lib-qqwry")
let qqwry = libQqwry();
qqwry.speed();

let ip1 = qqwry.searchIP("::1");

不支持IPv6地址。

希望对于这个IP库数据能够有规律

再pm2启动项目,会有 too many open files的错误

(node:11672) UnhandledPromiseRejectionWarning: Unhandled promise rejection (rejection id: 3): Error: EMFILE: too many open files, open '/www/wwwroot/test/node_modules/lib-qqwry/data/qqwry.dat'

暂未发现问题，仅致谢

非常好用，感谢🙏

Bug report

system: mac os x

/usr/local/lib/node_modules/lib-qqwry/lib/qqwry_v1.x.js:220
throw ("The IP address is not normal! >> " + IP);
^
The IP address is not normal! >> 182.138.150.192

总是报错 cant resolve fs

项目需要npm run build:dll 才可以运行,在执行这条命令时,一直提示
Module not found: Error: Can't resolve 'fs' in '/home/hai/Documents/aminer-master/aminer2b/node_modules/lib-qqwry/lib'
重装也不管用,请问有什么解决方案么

传入外部qqwry.dat无法获取

如题，传入外部qqwry.dat无法获取，查看代码qqwry_v1.x.js 19行var Qqwry = function(speed,_path)，参数位置更换一下，不然无法解析最新的数据

安装在Debian上 运行出错

提示错误
root@debian:~# qqwry 8.8.8.8
/usr/bin/env: ‘node\r’: No such file or directory

async searchIP ?

取地址的这个函数能否做成异步的呢,本身io操作,nodejs建议是异步的,这样才能提高异步的性能

建议加上d.ts

比较好用。现在typescript这么火建议加上d.ts

ISP信息

请问可以解析出ISP相关的信息吗？

希望去掉console信息

每次加载总会提示如下信息，希望能去掉，并更新到npm，thanks

console.log("==== IP Server Start! ==== [Begin:"+ipBegin+" End:"+ipEnd + " Count:" + ipCount + "]");