日志统计脚本
今天同学说让我写个脚本统计日志。日志是一些ip的捕捉记录,根据协议的类型定义了一些ID和子ID。统计的需求是统计出各个类型的客户IP和服务IP。
今天同学说让我写个脚本统计日志。日志是一些ip的捕捉记录,根据协议的类型定义了一些ID和子ID。统计的需求是统计出各个类型的客户IP和服务IP。
备战百度,在海量数据处理的主题上做一个总结。
详情来自cnblogs
将数据通过hash函数映射到位数组,比如hash(str)=3则将位数组第三位置为1
对每一条数据都用k个hash函数进行映射,也就是一条数据会将位数组的最多k位的值置1。
今天处理“如何读取文件偶/奇数行”这个问题的时候,本来是打算用python来解决
python本身是很简单的,偶数代码如下:
|
|
奇数行代码如下:
历史的河流打算按照日记的样子重新流过
OpenVPN 从架构上来看,OpenVPN在某种程度上和 tinc
或者和VTun
比较相近,它是一个基于用户模式(user-mode)的程序,通过 TUN/TAP
接口与 TCP/IP
栈进行通信。
By Matthew Juke(新闻作者,译者注) 20世纪九十年代,中国从一个封闭的壳中苏醒,开始看到越来越多的科幻作家涌现出来。在我们面前的,则是中国最突出也是最高产的两位科幻作家,韩松和潘海天。书虫准备在三月十七日的中国科幻和中国未来可能性的主题中邀请此二人(who are going to be putting forth the case for Chinese science fiction and the prospects for the future of the country at the Bookworm on March 17)。他们对环球时报谈到了科幻的过去,当下,以及在未来的状况。
这一段时间,一直想写一点关于村上春树的一点感受,现在终于有时间了。 刚洗了澡,宿舍还真冷。
接触村上春树,算是从10年刚开始。当然,再早一点,高中的时候算是久仰过大名,但也只限于听说过那部《挪威的森林》。 真正用拜读的态度去读村长,应该就是从《挪》开始。
当我们的作品可以勉强跑起来,足够我们通过课程设计的答辩的时候,自习室的窗台已经有晨曦爬了进来。尽管在夏天,天亮的比较早,但我们还真是和代码斗争了一整晚。电脑桌面上的时钟忠实地告诉我,还有一个小时就到了早饭时间了。
大鸟说,好虚啊,出去吃东西补补吧。于是就去了。
天气还不错,出来吃饭的人很多。路两旁的小摊都支了起来。在外面点上一些烧烤,要上几瓶啤酒,是享受黄昏的好方式。 和小林三个人一路走到火万里,点了肉串和拉皮。然后就是闲扯。