很久没有更新博客了,最近handle了一个项目需要处理大量csv文件,需求是将csv文件中某单个列的多个values(该多个vaules以回车分隔)拆分成多个相同列的单个value,由于python在处理脚本先天比shell更有优势,这里把自己的最近学到python知识加以应用,编写了一个脚本,供大家参考.#!/usr/bin/env python import csv import sys # Define the duality list Csv_content_edited = [] # Define the file that needs to be handled. try: file_name = sys.argv[1] new_file_name = file_name.split('.')[0] + '_new.' + file_name.split('.')[1] except IndexError: pass # Define the collumns that need to be dealt with. Field = ['Affects Version/s','Fix Version/s','Component/s'] """ Search the index numbers of each components of "Field" l ...继续阅读 (21)

与Linux相比，Mac OS X的终端总是欠缺些什么。对了，是色彩，Linux的ls命令使用不同颜色区分各种文件类型，Vim编辑器也支持语法高亮，而Mac终端却总是以黑白示人。其实，只要稍微做一些工作，Mac的终端同样可以多姿多彩，请往下看。彩色化ls的输出Mac中BSD的ls命令可以使用-G参数彩色化输出的文件列表，需要配置LSCOLORS环境变量定义颜色，具体配置方法可以输入man ls查看。不过，我推荐安装Linux使用的GNU Coreutils替换Mac的ls命令，因为：Coreutils提供了配置工具，定义颜色代码更加方便；Coreutils包含的不仅仅是ls，同时作为Linux用户，我更习惯于使用GNU的各种shell工具。Coreutils的安装与配置方法如下：通过Homebrew安装Coreutils# brew install xz coreutils注：Coreutils并不依赖于xz，但它的源码是用xz格式压缩的，安装xz才能解压。生成颜色定义文件# gdircolors --print-database > ~/.dir_colors在~/.bash_profile配置文件中加入以下代码if brew list | grep coreutils > /dev/null ; thenPATH="$(brew --prefix coreutils)/libe ...继续阅读 (24)

Gitlab默认的配置推荐使用shell命令行与server端进行交互,作为搞SCM的表示无压力,但是作为开发人员还是比较适应windows的GUI图形管理,方便他们将注意力集中到代码编写上,所以今天刚好接着昨天给大家介绍一下使用windows下的git client工具实现将本地代码提交到远程服务器.解决方案：环境部署操作系统 Windows7 x64 Sp1TortoiseGit TortoiseGit-1.8.11.0-64bit.msiGit Git-1.9.4-preview20140815.exePutty PuTTY 0.63OpenSSH owned by Git下载地址:http://yunpan.cn/QaaLGsd23BsWL(访问密码 96d7)注: 此处下载地址中的安装包都为64位版本,32位请另行下载.一.部署前的准备工作安装TortoiseGit,Git,Putty,默认下一步安装即可,其中Git为Git client环境安装包,确保windows包含git环境.二.配置PuTTY authentication agent在安装TortoiseGit后,可以选择使用OpenSS ...继续阅读 (71)

Gitlab是一个用Ruby on Rails开发的开源项目管理程序.可以通过WEB界面进行访问公开的或者私人项目. 它和Github有类似的功能，能够浏览源代码，管理缺陷和注释.本文选择NGINX与MYSQL来配合GitLab实现web管理,数据存储等功能,配置过程中难点基本在GitLab的脚本修改,SSH秘钥连接,Nginx SSL证书等这些方面,作者也是耗费非常大的力气,结合很多文档的clue以及很多老外的debug comment,终于最终完成,希望在此给大家一个抛砖引玉的机会,了解到SCM(软件配置管理)其实也不是想象中那么小儿科,很多逻辑也着实需要下功夫investigation.最后我是一路向北,我为我自己带盐....解决方案：环境部署操作系统 centos6.3 x64GitLabGitLab6-3-stableGitLab Shell 1.8.0Ruby 2.0.0p353NGINX nginx-1.4.0MYSQL mysql-5.6.10Git server(centos6.3 x64): git.example.comGit client(centos6.3 x64): client.example.com ...继续阅读 (185)

如果在LINUX系统上需要使用PHP连接Microsoft SQL Server 2005数据库,我们常见的连接数据库方式是使用ODBC方式连接.FreeTDS为Linux系统提供了TDS协议的开源客户端。由于MSSQL和Sybase使用的恰是TDS协议，所以在Linux中可以用FreeTDS连接MSSQL，下面简绍使用php的db-lib连接Microsoft SQL Server 2005数据库.LINUX操作系统: centOS6.3 64bit(安装了系统默认开发包)APACHE: httpd-2.4.4PHP: php-5.4.13freetds: freetds-0.91一.关闭iptables和SELINUX# service iptables stop# setenforce 0# vi /etc/sysconfig/selinux---------------SELINUX=disabled---------------二.同步时间# ntpdate cn.pool.ntp.org一.安装APACHE+PHP传送门：http://www.showerlee.com/archives/6二.使用FreeTDS启用PHP连接MSSQL1.下载FreeTds# su -# wgetftp ...继续阅读 (18)

Git作为一个分布式的版本控制系统，使用git的时候，一般和服务器通讯使用的是ssh协议，用ssh的主要优点是速度快（传输前数据会先压缩，比HTTP快），安全，方便读写。客户端通过ssh访问服务器端的验证方式一般有两种，一种是用户名密码的方式，一种是使用公私钥认证的方式. 使用公私钥的方式比较方便，无需每次登录输入密码。某个受信任的客户端的公钥会被设置在服务器端的 ~/.ssh/authorized_keys文件中，有关此文件的格式可以参见 sshd的用户手册 man sshd . authorized_keys有个比较厉害的功能是 支持 command参数，使得每次用户使用此公钥进行验证的时候执行此后面的命令.这样就可以做一些逻辑处理了.一般git库的管理需要权限控制，如何方便简单的进行库的权限管理呢？ authorized_keys是一个思路，指定特定command参数，每次验证好用户后首先执行相关逻辑，检测当前用户是否具有某个权限。 所以便有了gitosis，与其说gitosis是一个git权限管理系统，还不如说它是一个authorized_keys文件管理器.解决方案：一.环境部署操作系统： centos6.3 x64Git: git-1.7.1Gitosis: G ...继续阅读 (32)

本篇博文目的是将本地SVN服务器的project迁移为GIT格式,并上传到目前大家常用的github托管服务器.解决方案：一.环境部署操作系统： centos6.3 x64SVN: subversion-1.8.0apache: httpd-2.4.4svn server(centos6.3 x64): node2.example.comsvn client(centos6.3 x64): node1.example.comgit server:https://github.com/leonIi/一.关闭iptables和SELINUX# service iptables stop注：如需开启防火墙,则添加如下一条规则打开svn 3690端口# iptables -A INPUT -p tcp --dport 3690 -j ACCEPT# setenforce 0# vi /etc/sysconfig/selinux---------------SELINUX=disabled---------------二.同步时间# ntpdate cn.pool.ntp.org三.安装apache传送门：http://www.showerlee.com/archives/6四.关闭系统自带svnserve# service svns ...继续阅读 (39)