Here comes the Sun » foss

beanstalkd

Sunng — Wed, 11 Aug 2010 14:40:54 +0000

beanstalkd是一个极轻量级的消息队列服务，作者的说法叫做Work Queue。

概念

Beanstalkd里包含以下几个概念：

Producer
Worker
Job
Tube

Producer 与传统的消息队列服务中的概念类似，是Job的生产者。这个角色通过put命令来创建Job。

Worker 即消费者，worker通过reserve / release / bury / delete 等命令操作job的生命周期。

Job 是beanstalkd中的基本单元，一个job包含id和body，从属于一个tube。Job的生命周期是beanstalkd中的核心概念，它包含DELAYED / READY / RESERVED / BURIED / DELETED等状态。beanstalkd文档中的这个图对Job的声明周期进行了说明：
http://github.com/kr/beanstalkd/blob/master/doc/protocol.txt#L81

Tube 是类似namespace的概念，Producer在生产Job前通过use指定相应的Tube。而Worker通过watch / Ignore命令来决定从哪些Tube中获得Job。

安装

Beanstalkd 可以通过很多Linux发行版的包管理器直接安装。依赖libevent 1.4.1 以上版本。
通过以下命令启动即可

beanstalkd -d -p

协议

Beanstalkd在各方面都继承memcached的风格，协议也与memcached类似，同样是基于文本的：

命令参数 [参数...] [命令体字节数]\r\n
[命令体]\r\n

beanstalkd很多命令的返回是yaml格式，但是系统对命令体的格式并没有限制。

客户端

Beanstalkd协议见简单，有各种语言的客户端实现。python有一个非常简单的beanstalkc，可以通过easy_install安装。不过，这个客户端缺少断线重连机制，正式发布的0.2.0版本也有一些严重的bug。可以从github上下载源代码安装，并在使用时控制重连。

The post is brought to you by lekhonee v0.7

用markdown书写文档

Sunng — Mon, 26 Jul 2010 11:36:54 +0000

写文档是头疼事，没人愿意写文档。在word里写文档，时间长了都怀疑自己是不是搞技术的。我阅历有限，在我的印象里就没有用word格式看过什么有价值的东西。只要一打开word想到的就是连篇累牍的废话、码字。word最重要的功能是什么？保存。其次呢？字数统计。我所写过的word文档绝大多数都是“只写”的，通常作为流程里的一个附件，没有人真正去看。

以上是人身攻击，接下来比较实际的问题，word文档不是符合unix哲学的东西。格式不开放，你就没有办法进行diff操作，把word文档放到svn里，只能使用最基本的版本控制，没法查看changeset，只知道改了，不知道改了什么。

为了改变这种情况，我试过用docbook格式。docbook用xml书写，定义了一套复杂的Schema，详细到作者的email都有定义。docbook还有丰富的工具集，可以通过xsl把docbook转换成所有你知道的文档格式。Maven: the Definitive Guide就是用docbook写成的。不过用docbook也存在一些问题，docbook太复杂了，用纯文本编辑器很难处理，作者的学习曲线也比较高，需要所见即所得的编辑器支持。与docbook相类似的DITA，也存在这样的问题，它们是重量级的格式。

轻量级的Wiki格式不错，但是Wiki格式很让人头疼就是没有统一的规范。举例，dokuwiki里顶级标题是6个=，而moinmoin里顶级标题恰恰相反是一个=，不portable，文档维护起来就非常麻烦。

铺垫了这么多，委屈以上格式了，该markdown出场了。markdown是简单的html原型，用来生成html，它的设计目标就是为了KISS，兼容html。看看一些必要的格式吧：（或者直接看Wikipedia）
标题
# 标题
## 二级标题
…
###### 六级标题

对于一级标题还可以这么写
headline
========
二级标题可以
headline
——–
这个怎么输入呢，我想起来前几天看vim hacks里的一组快捷键
yypoVr=
yypoVr-
谁用谁知道

段落：
一段文本以两个换行结束。
换行：
一行文本行末两个空格。

图片
![alternative text](image-url “image-title”)
用markdown，图片的alt你不写都不行。

链接
[Linktext](link “linktitle”)

列表
ul 无序列表
*
*
ol 有序列表
1.
2.

以上就是主要的格式支持。用标题来划分文档层次，没有多余的格式，没有机会让你五颜六色。

在linux上可以安装markdown的处理脚本：
apt-get install markdown
安装vim的语法文件：

http://www.vim.org/scripts/script.php?script_id=1242

这里是一个简单的例子：

http://github.com/sunng87/exaile-doubanfm-plugin/blob/master/README.mkd

The post is brought to you by lekhonee v0.7

Exaile-doubanfm-plugin 0.0.2

Sunng — Sun, 04 Jul 2010 14:17:53 +0000

Exaile doubanfm plugin 0.0.2 预览版，目标是在Linux桌面提供豆瓣电台的完整体验。

目前插件只能运行在Exaile 0.3.1版本上。

0.0.2增加了豆瓣电台专用的视图：

相比第一版通过rating来实现豆瓣电台喜欢、跳过和删除的功能，在专用视图上有专门的按钮来操作。

其他细节更新：

当剩余曲目超过15首时不再增加播放列表
当播放到最后一首歌曲取新播放列表时增加重试机制
修正libdbfm跳过曲目bug一个

安装：
打开Exaile Preference，Plugin页，点击按钮Install Plugin，选择doubanfm.exz即可。如果存在问题，可以执行以下命令：
mv doubanfm.exz douban.tar.gz
tar xf doubanfm.tar.gz
mv doubanfm ~/.local/share/exaile/plugins/

转到doubanfm设置页面，填写用户名密码重启Exaile。

打开File菜单，选择豆瓣电台频道

选择曲目就可以开始播放了，选择视图中豆瓣电台视图可以切换到豆瓣电台视图。

项目地址：
http://github.com/sunng87/exaile-doubanfm-plugin

下载：
http://github.com/sunng87/exaile-doubanfm-plugin/downloads

另外，doubancovers插件也有一个针对豆瓣电台的更新可以快速获取豆瓣电台音乐的封面：
http://bitbucket.org/sunng/exailedoubancovers/downloads?highlight=9265

The post is brought to you by lekhonee v0.7

交通游戏OpenTTD

Sunng — Sun, 02 May 2010 15:12:28 +0000

我总是对这种城市建设、交通规划一类的游戏欲罢不能，以前在Linux上一直只是玩Lincity，后来发现了纯交通类的simutrans，最近升级到Ubuntu10.04以后，终于可以玩这个六年磨一剑，精雕细琢的OpenTTD了。

可以建造各种客运货运的汽车站、火车站，机场，码头等等，可以建设道路、铁路，可以购买公交车、卡车、火车头、火车车厢等等。可惜我玩了大半天还不知道怎么盈利。。。

Douban provider for Alexandria

Sunng — Fri, 30 Apr 2010 11:25:33 +0000

Alexandra is a desktop book collection manager on gnome written in ruby. With an extensible architecture, Alexandria uses different sources to retrieve book’s data, including Amazon and many local sites.

Douban.com is considered to be most applicable data source for books published in Chinese. So I write this provider according to Alexandria’s SPI. Now it’s possible to add Chinese books and manage reading lists.

Now the code can be found in Alexandria’s bug tracker:
http://rubyforge.org/tracker/index.php?func=detail&aid=28160&group_id=205&atid=865

However, the patch file of book_providers.rb in that list is for svn trunk head version only. To use it with currently stable version of Ubuntu, first, make sure you have Alexandria version 0.6.5-0ubuntu1 and libjson-ruby1.8 installed.

Download douban.rb from rubyforge:
http://rubyforge.org/tracker/download.php/205/865/28160/4923/douban.rb
Copy the file to /usr/lib/ruby/1.8/alexandria/book_providers/ with super user privileges.
Use this patch to /usr/lib/ruby/1.8/alexandria/book_providers.rb

310a311,323
< begin
< begin
< require 'json'
< rescue LoadError
< require 'rubygems'
< require 'json'
< end
< require 'alexandria/book_providers/douban'
< rescue LoadError =< ex
< log.error{ex}
< log.warn {'Fail to load douban as provider'}
< end
<

Feel free to report issue here.

搞定gwibber

Sunng — Mon, 22 Mar 2010 04:48:31 +0000

升级10.04之后，gwibber2.29开始使用pycurl来处理IO。结果一条更新都拿不下来，为此搜到很多相关、不相关的bug。最后终于自己找到问题，原来是pycurl.setopt方法传入字符串如果是unicode就会报typeerror。而通过gwibber配置界面输入的所有字符都是unicode编码，于是问题也就简单了。做个处理，在 /usr/lib/python2.6/dist-packages/gwibber/microblog/network.py 第18到21行：

self.curl.setopt(pycurl.URL, str(url).encode('ascii'))

if username and password:
self.curl.setopt(pycurl.USERPWD, ("%s:%s" % (username, password)).encode('ascii'))

另外，使用StatusNet的Twitter兼容API来做Twitter API代理，需要把代理的目录名设置为api，因为/api这个路径是写死在gwibber代码里的。通过界面输入的，只是代理的domain。

说实在的gwibber还是挺烂的。

https://bugs.launchpad.net/bugs/542501

https://bugs.launchpad.net/bugs/543860

I ♥ Free and Open Source Software

Sunng — Sun, 14 Feb 2010 13:43:22 +0000

使用gnome-dictionary和dictd

Sunng — Sun, 07 Feb 2010 10:57:20 +0000

最近琢磨字典多一些，以前一直不知道gnome自带的gnome-dictionary如何使用，因为默认的字典源里都没有中文字典，而且离线更是无法使用。其实不然，字典服务可以自架，并且可以使用自己的字典。

在自己的机器上架设dictionary server，以ubuntu为例：

安装dictd / dict
sudo apt-get install dictd dict

前者是字典服务器，后者是字典服务客户端。还可以从仓库里安装已经打包好的字典，如
sudo apt-get install dict-stardic
是一个英汉字典

dictd安装好后会默认自启动，也可以通过
sudo service dictd start
来控制dictd的启动、重启和关闭。

通过dict测试服务的状况
dict -D
命令会列出可用的数据库（即字典）

在gnome-dictionary中添加字典源 Edit->Preference->Source->Add
Name: 自定义的字典名
Transport: Dictionary Source
Hostname: 127.0.0.1
Port: 2628

Close之后可以到主界面打开侧边栏，在Dictionary Source中双击选定此字典，在Aailable Dictionaries里双击选中目标字典，于是就可以在gnome-dictionary里使用本地的字典服务了。

接下来安装自己的字典。stardict的网站上有很多中文字典，上面也都标示了授权协议。要在dictd里使用这些字典，需要进行一个简单的格式转换。安装一个工具
sudo apt-get install dictconv

它的使用方法：
dictconv -o OUTPUT_FILE INPUT_FILE

在input_file指定stardict的.ifo文件，在output_file指定要生成的dictd的.index文件。这个转换非常耗时，需要有足够的耐心。这个操作将会生成.index和.dict文件。对.dict文件进行压缩：
dictzip OUT.dict

转换完成后，编辑/var/lib/dictd/db.list文件，在其中添加一个database定义
database YOUR_DB_NAME{
data PATH_TO_DICT_DZ
index PATH_TO_INDEX
}

其中PATH_TO_DICT_DZ是上一步的.dz文件，PATH_TO_INDEX是到上一步生成的.index文件的路径。编辑完成后，重启dictd服务
sudo service dictd restart

使用dict -D可以查看启用的字典。

建议备份/var/lib/dictd/db.list文件，因为每次从apt-get安装字典后，这个文件都会被覆盖。

dictd服务也可以在fantasdic里访问。

很山寨

Sunng — Wed, 03 Feb 2010 14:03:10 +0000

经常访问GNU的网站你会发现一些很神奇的东西，比如gNewSense，又比如最新的：

怎么样，够震撼啊，GNUzilla套件里的第一个发布，IceCat。IceCat是嘛？你知道Firefox吧，那拉开冰箱门，把Firefox塞进去，带上冰箱门，嗯，那就是IceCat了。当然是开玩笑了，GNU IceCat is the GNU version of the Firefox browser. Its main advantage is an ethical one: it is entirely free software.

现在已经可以在Ubuntu中使用这个病猫，哦不，冰猫了：

sudo add-apt-repository ppa:gnuzilla-team/ppa
sudo apt-get update
sudo apt-get install icecat

Patch for Fantasdic Google Source

Sunng — Tue, 02 Feb 2010 14:15:40 +0000

I found fantasdic a great powerful dictionary tool with friendly UI and supports multiply sources. Unfortunately, this project seems to be no longer maintained. The latest version is 1.0-beta7.

The google translate source was created in 2007. As the google translate service page changed, this module doesn’t work any more, so I just picked up my vim then created this patch for those still want to use it.

This patch has dependency with ruby’s json module, so before you apply it, run:
sudo gem install json
or
sudo apt-get install libjson-ruby1.8

Download the patch at:
https://bugzilla.gnome.org/attachment.cgi?id=152835

Patch it (Ubuntu installation as example):
cd /usr/lib/ruby/1.8/fantasdic/sources/
sudo patch google_translate.rb /home/sun/google_translate.rb.diff

Restart fantasdic, then your get it works! And this bug is tracked at:
https://bugzilla.gnome.org/show_bug.cgi?id=605641