Linux 下比较文件内容并删除相同部分

作者: Tscccn | 日期: 2013 年 08 月 01 日 | 围观: 14716次+ | 没有评论

别人问我，我自己突然不知道怎么弄又懒得想，搜索了一下，找到一篇文章。然后稍微了解了一下。
先做好准备工作，简单准备两个文本文件，如下

[root@kinggoo.com test1]# cat file1
a
b
c
d
e
[root@kinggoo.com test1]# cat file2
c
e

[root@kinggoo.com test1]# cat file1

[root@kinggoo.com test1]# cat file2

说明，是通过file2内容与file1做比较，最后列出file1与file2不同的部分
方法一

comm
功能说明：比较两个已排过序的文件。
语法：comm [-123][–help][–version][第1个文件][第2个文件]
补充说明：这项指令会一列列地比较两个已排序文件的差异，并将其结果显示出来，如果没有指定任何参数，则会把结果分成3行显示：第1行仅是在第1个文件中出现过的列，第2行是仅在第2个文件中出现过的列，第3行则是在第1与第2个文件里都出现过的列。若给予的文件名称为"-"，则comm指令会从标准输入设备读取数据。

方法一例子：

[root@kinggoo.com test1]# comm -23 file1 file2
a
b
d

[root@kinggoo.com test1]# comm -23 file1 file2

方法二
grep
请看文章[……]

继续阅读

Android App应用包增量升级(one)

作者: Tscccn | 日期: 2013 年 07 月 12 日 | 围观: 28657次+ | 7 条评论

Android增量升级这东西很不错，当时我们这运营的人把百度的一个管理软件拿过来说他们这个升级包提示可以节省流量是怎么回事，当时各种猜测，难道是有什么特殊算法将包压缩了？特意试了一下压缩，根本大小就没变化~后来开发的人找到是增量升级，文章抛给我研究下。拿过来后发现如果单纯的用命令处理真的很简单，当时想法也是很简单，就是让开发把bspatch这个命令内嵌到Apk包里，反正它不大，但后来我在Android模拟器里试了一下，发现根本不行，在继续看参考的那篇文章，发现下面还有，c++这部分要弄成so包，然后在通过javah 去生成一个中间的class才能执行bspatch（另一个开发研究的，在参考的那篇文章里也有这个处理方法）
bsdiff网站：http://www.daemonology.net/bsdiff/
下载bsdiff：百度网盘
windows:
http://sites.inka.de/tesla/download/bsdiff4.3-win32.zip (32[……]

继续阅读

将rsync与linux内核中的Inotify功能复用，达到实时监控同步数据，附带脚本

作者: Tscccn | 日期: 2013 年 06 月 20 日 | 围观: 24640次+ | 13 条评论

一直以来不想用rsync，之前dongnan向我推荐过一次，后来查了查感觉那会也用不上，自己安装一下，试了试感觉没啥太好的地方，而主要是当你文件比较多的时候会在速度很资源上有多余浪费，所以一直也没用（就好比，你拷贝1G的文件，如果里面有上万个小文件。那这个速度肯定比不上一个1G的大文件一次性传输快了。这时候谁管你用的是固态还是高速硬盘）。
但这次实在没办法，同机备份，我也懒得自己写脚本了，干脆就整个目录每次备份吧。这次有些事情，没办法如果用脚本的话会很不方便，所以跟linux内核内的inotify配合达到实时备份的作用 什么是rsync
Rsync，Remote Synchronize，意思很明显就是远程同步软件。该软件能够在同步文件的同时，保持文件的权限、时间、软硬链接等一些信息。
地址：http://rsync.samba.org/ windows下请转战cwRsync rsync 包括如下的一些特性：

能更新整个目录和树和文件系统；
有选择性的保持符号链链、硬链接、文件属于、[……]

继续阅读

WordPress文章同步到新浪微博的三种方法

作者: Tscccn | 日期: 2013 年 05 月 09 日 | 围观: 81054次+ | 99 条评论

同步到微博大概有三种方法，插件、关联博客、非插件微博接口第一种，直接百度搜索就可以；
第二种，由于新浪现在已经取消了关联博客的选项，但该功能却没有被取消你可以放问下面这个地址，然后配置一下就可以了

http://weibo.com/tool/bloglink

第三种方法需要使用新浪的接口，如下操作：
1）到新浪微博开放平台创建一个站内应用http://open.weibo.com/apps/new?sort=app，通过不通过审核都可以，只不过通过的话可以在微博下方显示来自某某应用，如来自KingGoo技术博客，具体怎么创建你可以在百度谷歌上搜索一下，很简单（但如果你一直没有通过审核，还想通过审核的话，我可以提供有偿帮助嘎嘎~），创建好应用后，下面需要使用到申请应用的 App Key；
2）编辑你主题的functions.php文件，在其最后加入如下代码

// 微博同步
function post_to_sina_weibo($post_ID) {
  if( wp_is_post_revision($post_ID) ) return;
    $get_post_info = get_post($post_ID);
    $get_post_centent = get_post($post_ID)->post_content; 
    //去掉文章内的html编码的空格、换行、tab等符号(如果你文章的编码格式是这样子，可以将下面的"//"去掉即开启此功能)
    //$get_post_centent = str_replace("\t", " ", str_replace("\n", " ", str_replace(" ", " ", $get_post_centent)));
    $get_post_title = get_post($post_ID)->post_title;
  if ( $get_post_info->post_status == 'publish' && $_POST['original_post_status'] != 'publish' ) {
    $request = new WP_Http;
    $status = '【' . strip_tags( $get_post_title ) . '】 ' . mb_strimwidth(strip_tags( apply_filters('the_content', $get_post_centent)),0, 132,'...') . ' 全文地址:' . get_permalink($post_ID) ;
    $api_url = 'https://api.weibo.com/2/statuses/update.json';
    $body = array( 'status' => $status, 'source'=>'4135063399');
    $headers = array( 'Authorization' => 'Basic ' . '1fFjYc3uQHZpcF32fS5jb146MxFeY19DYF53aWfzNA==' );
	/*
	如果你使用改方法，请注释掉上面$headers = array( 'Authorization' => 'Basic ' . '1fFjYc3uQHZpcF32fS5jb146MxFeY19DYF53aWfzNA==' );
	换成如下代码
	//你的新浪微博登陆名
	$username = '' ;
	//你的新浪微博登陆密码
	$password = '' ;
	$headers = array( 'Authorization' => 'Basic ' .  base64_encode('$username:$password'));
	*/	
    $result = $request->post( $api_url , array( 'body' => $body, 'headers' => $headers ) );
    }
}
add_action('publish_post', 'post_to_sina_weibo', 0);

// 微博同步

function post_to_sina_weibo($post_ID) {

if( wp_is_post_revision($post_ID) ) return;

$get_post_info = get_post($post_ID);

$get_post_centent = get_post($post_ID)->post_content;

//去掉文章内的html编码的空格、换行、tab等符号(如果你文章的编码格式是这样子，可以将下面的"//"去掉即开启此功能)

//$get_post_centent = str_replace("\t", " ", str_replace("\n", " ", str_replace(" ", " ", $get_post_centent)));

$get_post_title = get_post($post_ID)->post_title;

if ( $get_post_info->post_status == 'publish' && $_POST['original_post_status'] != 'publish' ) {

$request = new WP_Http;

$status = '【' . strip_tags( $get_post_title ) . '】 ' . mb_strimwidth(strip_tags( apply_filters('the_content', $get_post_centent)),0, 132,'...') . ' 全文地址:' . get_permalink($post_ID) ;

$api_url = 'https://api.weibo.com/2/statuses/update.json';

$body = array( 'status' => $status, 'source'=>'4135063399');

$headers = array( 'Authorization' => 'Basic ' . '1fFjYc3uQHZpcF32fS5jb146MxFeY19DYF53aWfzNA==' );

如果你使用改方法，请注释掉上面$headers = array( 'Authorization' => 'Basic ' . '1fFjYc3uQHZpcF32fS5jb146MxFeY19DYF53aWfzNA==' );

换成如下代码

//你的新浪微博登陆名

$username = '' ;

//你的新浪微博登陆密码

$password = '' ;

$headers = array( 'Authorization' => 'Basic ' . base64_encode('$username:$password'));

$result = $request->post( $api_url , array( 'body' => $body, 'headers' => $headers ) );

}

add_action('publish_post', 'post_to_sina_weibo', 0);

大概一般都应该知道是什么意[……]

继续阅读

ubuntu手机系统刷回android系统

作者: Tscccn | 日期: 2013 年 05 月 08 日 | 围观: 14944次+ | 3 条评论

在之前ubuntu系统刚出来的时候，帮同事把三星 I9250（Galaxy Nexus）刷为ubuntu系统（Ubuntu手机版体验，附刷机教程），但发现一个问题，如果你想刷回来真的很麻烦（原因应该是当时在刷为ubuntu时把boot.img刷为了ubuntu的boot.img了，所以用网上的方法根本就行不通）之前一直很忙，也没来得及帮他刷回去，最近公司需要用这部手机所以比较急于刷回android，所以昨天试了一下，好顿折腾。
具体什么原因我也不知晓，能刷回来也很纳闷的，估计是跟boot.img（要种跟里面的组件驱动关系很大，换boot.img就可以刷回来了）有关系吧，反正用这个方法我是刷回android了。

网上之前的一些方法，虽然我没有成功但应该也可以。我刷的这部手机是因为没有sd卡，而在之前刷的时候没有把之后要用的rom放到sd卡上，然后通过ubuntu手机系统的浏览器也没办法下载rom文件。我其他同事帮往回刷的时候使用的都是网上的一些工具，但都是无法刷回来。

在脚本内的数[……]

继续阅读

Linux系统下修改主机名脚本

作者: Tscccn | 日期: 2013 年 05 月 01 日 | 围观: 18458次+ | 7 条评论

文章由来：前段有问我如何修改主机名，今天又有人问。
何为sed：sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。以下介绍的是Gnu版本的Sed 3.02。查看脚本文件nhN.sh（将以下内容保存为nhN.sh）
cat nhN.sh

#!/bin/bash
# 说明：修改Liunx系统主机名。在Centos、rh5试验过
# 使用方法：sh nhN.sh kinggoo ###意思是修改新主机名为kinggoo
# 缺点：在处理hosts文件的时候我觉得跟我想要的还是不太一样
# 知识点：sed的 t/T这东西挺不错，跟if语句一样效果
# $1:The new host name
oldname="`hostname`"
hostname "$1"
HOSTNAME=`hostname`
Network="/etc/sysconfig/network"
Hosts="/etc/hosts"
sed -r -i 's/^HOSTNAME='${oldname}'.*$/HOSTNAME='`hostname`'/g' ${Network}
sed -r -i 's/'${oldname}'/\ '`hostname`'\ /g;t;s/$/&\ '`hostname`'/g' ${Hosts}
echo -e "hostname:{`hostname`}\n
Setting up hosts file:\n{\n`cat ${Hosts}`\n}\n
Setting up network file:\n{\n`cat ${Network}`\n}\n
HOSTNAME:\n{\n`echo ${HOSTNAME}`\n}\n"
echo -e "完成，请查看以上修改信息是否正确\n\r如无误，请重启生效！"

#!/bin/bash

# 说明：修改Liunx系统主机名。在Centos、rh5试验过

# 使用方法：sh nhN.sh kinggoo ###意思是修改新主机名为kinggoo

# 缺点：在处理hosts文件的时候我觉得跟我想要的还是不太一样

# 知识点：sed的 t/T这东西挺不错，跟if语句一样效果

# $1:The new host name

oldname="`hostname`"

hostname "$1"

HOSTNAME=`hostname`

Network="/etc/sysconfig/network"

Hosts="/etc/hosts"

sed -r -i 's/^HOSTNAME='${oldname}'.*$/HOSTNAME='`hostname`'/g' ${Network}

sed -r -i 's/'${oldname}'/\ '`hostname`'\ /g;t;s/$/&\ '`hostname`'/g' ${Hosts}

echo -e "hostname:{`hostname`}\n

Setting up hosts file:\n{\n`cat ${Hosts}`\n}\n

Setting up network file:\n{\n`cat ${Network}`\n}\n

HOSTNAME:\n{\n`echo ${HOSTNAME}`\n}\n"

echo -e "完成，请查看以上修改信息是否正确\n\r如无误，请重启生效！"

参考资料：

t label
if分支，从最后一行开始，条件一旦满足或者T，t命令，将导致分支到带有标号的命令处，或者到脚本的末尾。
T label
错误分支，从最后一行开始，一旦发生错误或者T，t命令，将导致分支到带有标号的命令处[……]

继续阅读

vps内wordpress数据备份切割后发送到指定邮箱脚本

作者: Tscccn | 日期: 2013 年 04 月 17 日 | 围观: 20792次+ | 7 条评论

脚本功能说明：备份对应数据文件后，会通过邮件附件形式发送到指定邮箱内，由于各种邮箱限制不同，可以修改“split -b 30m -d”中的30m。
站点文件结构如下

[root@kinggoo.com htdocs]# tree -L 1
.
├── kinggoo.com
│?? ├── K.blog
│?? ├── K.demo
│?? ├── K.media
├── wanquer.com
│?? └── blog
├── tscccn.com
│?? └── blog

[root@kinggoo.com htdocs]# tree -L 1

├── kinggoo.com

│?? ├── K.blog

│?? ├── K.demo

│?? ├── K.media

├── wanquer.com

│?? └── blog

├── tscccn.com

│?? └── blog

站点文件结构如下
所以请仔细阅读，如果你使用到里面的某一块就不需要了。
我以为我以前发过的，脚本由于后期修改过，所以有些变量名字起的比较随便，必定行数不是很多。
有问题请在文章下留言，我会尽快回复！
思考：其实我也在考虑，切割压缩包后，最大的那个包大小是永远不变的，是不是不需要二次发送。但没时间去做实验，其实可以认定是肯定一样的。ls -l备份包信息，31457280这一行的3个备份包大小均相同，如下：所以可以妄下一个决定就是不需要二次发送同样大小包（做个if判断大小即可了）。

-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 10 02:00 kinggoo.com.201304100200.tar.gz.K.00
-rw-r--r-- 1 kinggoo kinggoo 30006693 Apr 10 02:00 kinggoo.com.201304100200.tar.gz.K.01
-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 14 02:00 kinggoo.com.201304140200.tar.gz.K.00
-rw-r--r-- 1 kinggoo kinggoo 29943682 Apr 14 02:00 kinggoo.com.201304140200.tar.gz.K.01
-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 17 02:00 kinggoo.com.201304170200.tar.gz.K.00
-rw-r--r-- 1 kinggoo kinggoo 29929964 Apr 17 02:00 kinggoo.com.201304170200.tar.gz.K.01

-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 10 02:00 kinggoo.com.201304100200.tar.gz.K.00

-rw-r--r-- 1 kinggoo kinggoo 30006693 Apr 10 02:00 kinggoo.com.201304100200.tar.gz.K.01

-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 14 02:00 kinggoo.com.201304140200.tar.gz.K.00

-rw-r--r-- 1 kinggoo kinggoo 29943682 Apr 14 02:00 kinggoo.com.201304140200.tar.gz.K.01

-rw-r--r-- 1 kinggoo kinggoo 31457280 Apr 17 02:00 kinggoo.com.201304170200.tar.gz.K.00

-rw-r--r-- 1 kinggoo kinggoo 29929964 Apr 17 02:00 kinggoo.com.201304170200.tar.gz.K.01

脚本里用到了split

功能说明：切割文件。
语法：split [[……]

继续阅读

Linux find命令详解，查找时非管道排除目录

作者: Tscccn | 日期: 2013 年 04 月 12 日 | 围观: 14639次+ | 3 条评论

find是linux 命令，它将档案系统内符合 expression 的档案列出来。你可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合，只有完全相符的才会被列出来。find 根据下列规则判断 path 和 expression，在命令列上第一个 – ( ) , ! 之前的部分为 path，之后的是 expression。还有指DOS 命令 find，Excel 函数 find等。
find命令的参数

pathname: find命令所查找的目录路径。例如用.来表示当前目录，用/来表示系统根目录。
-print： find命令将匹配的文件输出到标准输出。
-exec： find命令对匹配的文件执行该参数所给出的shell命令。相应命令的形式为’command’ { } \;，注意{ }和\；之间的空格。
-ok：和-exec的作用相同，只不过以一种更为安全的模式来执行该参数所给出的shell命令，在执行每一个命令之前，都会给出提示，让用[……]

继续阅读

第 12 页，共 39 页« 最新 «...7 8 9 10 111213 14 15 16 17 18...»最旧 »

描述IT民工在家的故事，记录生活点滴！

Linux 下比较文件内容并删除相同部分

Android App应用包增量升级(one)

将rsync与linux内核中的Inotify功能复用，达到实时监控同步数据，附带脚本

WordPress文章同步到新浪微博的三种方法

ubuntu手机系统刷回android系统

Linux系统下修改主机名脚本

vps内wordpress数据备份切割后发送到指定邮箱脚本

Linux find命令详解，查找时非管道排除目录

文章分类

最新评语

友情连接

我的