Wendal随笔

YeelinkTester 总算弄好了

2014-08-13 12:00:00 +0800

直接上程序截图

源码:

https://github.com/wendal/yeelink_tester

用到的东西

python 2.7.8
pyqt 4.11.1
mqtt
pyserial

功能

从串口读取数据,上传到yeelink
从yeelink接收mqtt通知,写到串口
从串口读取指令,然后会写数据(当前实现了查询最新的值)
一个API测试对话框, 支持文件上传
一个Yeelink Http API请求分析器(API虚拟服务器),用于排查api调用的错误

arduino pro mini的电压问题

2014-08-04 12:00:00 +0800

arduino pro mini的MCU是 atmega328p

http://www.atmel.com/devices/atmega328.aspx

电压从 1.8-5.5

工作频率最高20Mhz

电压与频率的关系

3.3v 安全频率约12.5Mhz 5v 安全频率 20Mhz

淘宝上绝大多数都是5V 16Mhz的, 但我手上的几块均能工作在3.3V

所以就很奇怪这5v和3.3v到底影响了什么.

由于3.3v下, 16Mhz高于安全频率, 所以mcu事实上工作在”超频”的状态

探索yeelink

2014-07-31 12:00:00 +0800

yeelink官网

http://www.yeelink.net/index

yeelink的传感器

支持5种类型: 开关,数值,gps,图片,泛型

Yeelink API

支持v1和v1.1两个版本, 我是直接跳过v1,实现了v1.1的版本

不过v1.1依然是测试期,被我遇到几个bug,哈哈

最后弄了个java库

http://github.com/wendal/yeelink4j

用NDK编译ssdb

2014-05-13 12:00:00 +0800

首先,需要准备一下环境

ubuntu 14.04 x86 版 – 当前最新啦,哈哈

android ndk r9b – 为啥用这个版本?因为我机器上有…

编译环境准备

把ndk转为独立工具链, 这是今天获取的新技能,呵呵,以后不写Android.mk也能编译部分软件了.

/opt/android-ndk-r9b/build/tools/make-standalone-toolchain.sh --install-dir=/opt/ndk-armv7 --arch=armv7

下载源码,暂时从我fork出来的库里面取吧,不知道ideawu会不会合并这个修改, who knows …

cd /opt/
wget https://github.com/wendal/ssdb/archive/android2.zip
unzip android2.zip
cd ssdb-android2

执行编译

需要指定3个变量 CXX CC TARGET_OS, 以使用对应的编译器及源码

CC 指定c源文件的编译器

CXX 指定cpp源文件的编译器

TARGET_OS 是ssdb的build.sh和leveldb构建脚本中,判断系统环境的属性,默认是通过uname -s获取,需要指定为OS_ANDROID_CROSSCOMPILE

CC=/opt/ndk-armv7/bin/arm-linux-androideabi-gcc CXX=/opt/ndk-armv7/bin/arm-linux-androideabi-g++ TARGET_OS=OS_ANDROID_CROSSCOMPILE make

与原版的差异

因为android下没有pthread_cancel, 所以, 修改了thread.h里面的WorkPool::stop方法,意味着线程池不可关闭.由于线程池仅在ssdb退出时关闭,所以没大影响
没有使用jemalloc

性能测试

测试环境, 某全志A10开发板, 单核1G内存, 8G nand

cpu参数

root@android:/ # cat /proc/cpuinfo
Processor       : ARMv7 Processor rev 2 (v7l)
BogoMIPS        : 238.54
Features        : swp half thumb fastmult vfp edsp neon vfpv3
CPU implementer : 0x41
CPU architecture: 7
CPU variant     : 0x3
CPU part        : 0xc08
CPU revision    : 2

Hardware        : sun4i
Revision        : 0000
Serial          : 07c1521b5654484880778253162367cb
root@android:/ #

内存状态

root@android:/ # free -m
             total         used         free       shared      buffers
Mem:           797          428          369            0            6
-/+ buffers:                421          376
Swap:            0            0            0

将ssdb-server和ssdb.conf传输到/dev/shm/ 内存目录下,开始执行

cd /dev/shm/
mkdir var
chmod 777 ssdb-server
./ssdb-server ssdb.conf

显示效果, 也许有人会问为啥数据文件夹也在/dev/shm下,那是因为, 放/sdcard跟/dev/shm测试结果没多少差别.

root@android:/dev/shm # ./ssdb-server ssdb.conf
ssdb 1.6.8.6
Copyright (c) 2012-2014 ideawu.com

跑ssdb-bench, 提醒一下,测试结果极其飘忽, qps从500到2500都出现过.

Copyright (c) 2013-2014 ideawu.com

========== set ==========
qps: 1196, time: 8.360 s
========== get ==========
qps: 1704, time: 5.866 s
========== del ==========
qps: 1268, time: 7.883 s
========== hset ==========
qps: 897, time: 11.141 s
========== hget ==========
qps: 772, time: 12.944 s
========== hdel ==========
qps: 635, time: 15.733 s
========== zset ==========
qps: 1251, time: 7.992 s
========== zget ==========
qps: 1584, time: 6.311 s
========== zdel ==========
qps: 1631, time: 6.129 s
========== qpush ==========
qps: 1263, time: 7.912 s
========== qpop ==========
qps: 1463, time: 6.831 s

用途

Cubieboard可以跑ssdb了, 安卓机能跑ssdb了… 其他场景自行补充…

用NDK编译Live555

2014-04-29 12:00:00 +0800

针对 live555 2014.03.25和 live 2014.04.23 也就是当前最新咯.

准备工作

下载源码 http://www.live555.com/liveMedia/public/ 该地址经常被X,请问候非圆校长

解压到一个空文件夹, 并将目录名从live改成jni

建一个文件, 叫 Android.mk

文件内容在 https://gist.github.com/wendal/11399988

编译

在jni目录下执行

ndk-build

如无意外,在 libs/armeabi/ 生成一个so文件.

为Golang程序打上编译标记

2014-04-02 12:00:00 +0800

参考文章: http://stackoverflow.com/questions/11354518/golang-application-auto-build-versioning

昨天在查询怎么生成一个小体积的golang程序的时候,无意中发现这个文章.

对于固定的代码,及固定的golang版本,下面的命令总是得到一模一样的程序

go build

有时候需要为每个编译都打上标记,不然真的很乱啊

演示用的golang代码

package main

var _VERSION_ = "unknown"

func main() {
    print("http_su ver=" + _VERSION_ + "\n")
}

编译时,加入需要的版本号信息,而不是直接去改main.go的源码

export TAG=v1.b.50
go build -ldflags "-X main._VERSION_ '$TAG'"

运行结果:

> go build
> ./demo
http_su ver=unknown
> export TAG=v.1.b.50
> go build -ldflags "-X main._VERSION_ '$TAG'"
> ./demo
http_su ver=v.1.b.50

可以看到, 版本号根据编译参数的变化而变化了. 关键点是, 必须是 $package.$varName

本demo在linux/macos/windows/arm下测试通过.

JDK8 Access to Parameter Names at Runtime

2014-03-30 12:00:00 +0800

JDK 8的新特性之一, 运行时获取方法参数的名称

JDK8之前, Eclipse自带的ECJ编译器,同本地变量表,把方法参数的名字,放在最前面,使其编译出来的class的名字看推测.

而 JDK8把这种行为规范化(终于…) http://openjdk.java.net/jeps/118

参考文章 Java 8 parameter name at runtime

演示代码

package nutz_jdk8;

import java.lang.reflect.Constructor;
import java.lang.reflect.Parameter;

public class Bot {
    private final String name;
    private final String author;
    private final int rating;
    private final int score;

    public Bot(String name, String author, int rating, int score) {
        this.rating = rating; // 注意这里的顺序,并非按参数顺序逐一调用
        this.score = score;
        this.name = name;
        this.author = author;
    }

    public static void main(String[] args) throws NoSuchMethodException, SecurityException {
        Class<Bot> clazz = Bot.class;
        Constructor ctor = clazz.getConstructor(String.class, String.class, int.class, int.class);
        Parameter[] ctorParameters =ctor.getParameters();
        for (Parameter param: ctorParameters) {
            System.out.println(param.isNamePresent() + ":" + param.getName());
        }
    }
}

输出的结果是:

true:name
true:author
true:rating
true:score

然后, 这个特性并未默认启用,javac需要额外的参数”-parameters”

javac -parameters nutz_jdk8\Bot.java
java -cp nutz_jdk8.Bot

如果是Eclipse 4.4 (正式支持JDK8的初始版本), 则需要手动在”Java Compiler”中启用之

如果是maven,则需要这段

<plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-compiler-plugin</artifactId>
    <version>3.1</version>
    <configuration>
        <source>1.8</source>
        <target>1.8</target>
        <compilerArgument>-parameters</compilerArgument>
    </configuration>
</plugin>

JDK8 , 开始学习啦

开始学习新特性啦,哇哈哈

tcpdump加Wireshark抓包分析才是王道啊

2014-02-23 12:00:00 +0800

最近折腾RTSP协议,焦头乱额.

Receiver Report RTCP Packets (RR)

  Receiver Reports are structured in the same way as Sender Reports. Of course, they include no sender information block, and the packet type code is 201.
 0               1               2               3
 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|V=2|P|    RC   |   PT=RR=201   |            length L           |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|                     SSRC of packet sender                     |
+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+
|                 SSRC_1 (SSRC of first source)                 |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
| fraction lost |       cumulative number of packets lost       |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|           extended highest sequence number received           |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|                      inter-arrival jitter                     |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|                         last SR (LSR)                         |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
|                   delay since last SR (DLSR)                  |
+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+
|                 SSRC_2 (SSRC of second source)                |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+
:                               ...                             :
+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+=+
|                  profile-specific extensions                  |
+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+-+

PS: github的pages默认使用Jekyll编译了,真是无语啊,必须自行加个文件才能发布成功了. 稍后要修正一下gor,默认产生这个文件才行

https://help.github.com/articles/using-jekyll-with-pages#troubleshooting

touch .nojekyll
git add .nojekyll
git commit -m "..."
git push

为pcduino编译内核

2013-12-15 12:00:00 +0800

软件环境

lubuntu 13.10 amd64版 / Ubuntu Server 13.10 amd64版
虚拟机20G硬盘,1G内存

为这篇教程,我全新安装多次lubuntu/ubuntu,验证过每个命令,保证能编译出一个能用的内核

安装依赖的库/工具

打开控制台,执行

sudo apt-get install -y g++-arm-linux-gnueabihf vim make u-boot-tools libusb-1.0-0-dev openssh-server pkg-config
sudo apt-get install -y texinfo ccache zlib1g-dev gawk bison flex gettext uuid-dev lib32stdc++6 curl wget ncurses-dev

下载内核源码

推荐从百度网盘下载 pcduino内核源码打包下载

里面的均为github官网代码库的打包, 非git版删掉了.git目录,源码内容完全一样

从github下载(建议网速可以的才使用)

git clone https://github.com/pcduino/kernel.git
cd kernel
git submodule init
git submodule update       #会下载全志的sun4i内核源码, 慢慢等吧

开始编译

打开shell,开始耗cpu吧!!

tar xf pcduino_kernel_20131127_nogit.gz   #如果是百度网盘下载的,就需要先解压咯,git下载的就无视这句了

cd kernel
make clean

cd sunxi-tools
make clean
cd ..

./configure pcduino
make hwpack

最后输出的信息类似

  INSTALL output/lib/firmware/mts_gsm.fw
  INSTALL output/lib/firmware/mts_edge.fw
  INSTALL output/lib/firmware/edgeport/boot.fw
  INSTALL output/lib/firmware/edgeport/boot2.fw
  INSTALL output/lib/firmware/edgeport/down.fw
  INSTALL output/lib/firmware/edgeport/down2.fw
  INSTALL output/lib/firmware/edgeport/down3.bin
  INSTALL output/lib/firmware/whiteheat_loader.fw
  INSTALL output/lib/firmware/whiteheat.fw
  INSTALL output/lib/firmware/keyspan_pda/keyspan_pda.fw
  INSTALL output/lib/firmware/keyspan_pda/xircom_pgs.fw
  DEPMOD  3.4.29+
make[1]: Leaving directory `/home/wendal/kernel/linux-sunxi'
cd /home/wendal/kernel/build/sun4i_defconfig-linux && arm-linux-gnueabihf-objcopy -R .note.gnu.build-id -S -O binary vmlinux bImage
#git submodule init
#git submodule update cedarx-libs
scripts/mk_hwpack.sh /home/wendal/kernel/output/pcduino_a10_hwpack_20131215.tar.xz
Debian/Ubuntu hwpack
Done.

编译好的压缩包在output目录中,有日期标记,例如pcduino_a10_hwpack_20131215.tar.xz

自定义内核

跟大多数A10的板子一样,你可以修改2个配置文件(ps: android的话还有个分区文件)

第一个是内核配置文件,也就是编译内核时常见的.config文件

#编译成功后可以找到,但编译之前是没有的,可见这不是真正的配置文件
find -name .config
>> ./build/sun4i_defconfig-linux/.config

#真正的配置文件在
find -name sun4i_defconfig
>> ./patch/linux-sunxi/arch/arm/configs/sun4i_defconfig

所以,需要先在build/sun4i_defconfig-linux/进行配置,然后覆盖回去

cd build/sun4i_defconfig-linux/
make menuconfig
# ... ... 配置你需要的选项
#..........

#然后把配置直接覆盖回去,不然下一次build的时候依然是老的
cp .config ../../patch/linux-sunxi/arch/arm/configs/sun4i_defconfig

另外一个是uboot的配置,这个文件有很多很多好东西,看文档吧Fex指南

./sunxi-boards/sys_config/a10/pcduino.fex

More?

我上传了一个ubuntu的vbox磁盘镜像, 用vbox新建一个虚拟机,选择这个文件作为主磁盘启动,即可拥有pcduino编译环境!

镜像地址(还在上传中…)

pcduino报告

2013-12-08 12:00:00 +0800

先上个图, 399大洋的货物

5V2A供电, 带USB,hdmi,tf卡槽,wifi,及最有特殊的类arduino接口

功能

抛开arduino接口,pcduino就是一个单纯的A10开发板,跑linux和Android都没任何问题,这是全志A10提供的基本功能了

其arduino接口, 源于A10芯片自带的gpio/pwm等针脚,在linux层做了一个libarduino.so,适配arduino源码

通过其pcduino c_enviroment,可兼容arduino源文件,本质上就是个普通的C库. 使用其Makefile改造一下,可以实现跨平台编译,而不需要使用arduino ide(与eclipse相比真是烂得可以)

在QQ群中,很多人以为pcduino能直接跑编译好的arduino程序,而非把它当成linux+arduino库来看待.

arduino接口的细节

提供一个UART接口。
引出6个ADC。ADC0和ADC1是6bit的ADC分辨率，其余的都是10bit的ADC分辨率。
提供2个硬件PWM，能支持最大24MHz的PWM。
提供14个GPIO。
提供一个I2C接口。
提供一个SPI接口。
有5V,3.3V输出

性价比

单单从板子的配置看,性价比不高, 其最大卖点就是提供了arduino库及对应的针脚

北京几张图

2013-10-28 12:00:00 +0800

飞机着陆

北京第一餐 – 脑残酸菜撸肉面

灰太狼大平卖 – 只要9毛9!!

后海 – Three-Person

离开北京那天, 灰霾爆表了

让redis支持动态库

2013-10-20 12:00:00 +0800

So, let’s put some fun in redis

redis的命令列表是写死在代码里面,编译后就没法修改(跟nginx一个德行)

硬编码一些额外的方法到redis中

最初写的一个hello world级的测试命令

void wendalCommand(redisClient *c) {
    struct timeval tv;           // 从timeCommand拷贝的...
    addReplyMultiBulkLen(c,3);   // 共返回3个结果
    addReplyBulkCString(c, "Hi,Wendal"); // 输出个字符串啦
    gettimeofday(&tv,NULL);              // 获取时间, 也是从timeCommand拷贝的
    addReplyBulkLongLong(c,tv.tv_sec);   // 不解释了
    addReplyBulkLongLong(c,tv.tv_usec);  // 不解释了
}

然后在redisCommandTable中声明一个新的命令,就搞定了

{"wendal", wendalCommand,1,"rR",0,NULL,0,0,0,0,0}

做得更灵活?上动态库,哈哈

so,我声明了2个新的命令, 加载/卸载动态库

    {"loadlib",loadlibCommand,2,"wmaR",0,NULL,0,0,0,0,0},
    {"unloadlib",unloadlibCommand,2,"wmaR",0,NULL,0,0,0,0,0}

其中, 加载动态库,就是接受一个路径,并执行其redis_lib_init方法

// 简化版的loadlibCommand
void loadlibCommand(redisClient *c) {
    void *handle;
    char *error;
    int (*redis_lib_init)(redisClient*, dict*);
    int re;
    
    handle = dlopen(c->argv[1]->ptr, RTLD_LAZY);
    if (!handle) {
        addReplyError(c, dlerror());
        return;
    }
    redis_lib_init = dlsym(handle, "redis_lib_init"); // 查找redis_lib_init
    if ((error = dlerror()) != NULL)  {
        dlclose(handle);
        addReplyError(c, error);
        return;
    }
    re = redis_lib_init(c, server.commands); // 执行之, 返回0就成功
    if (re) {
        dlclose(handle);
        addReplyError(c, "lib init error");
        return;
    }
    addReply(c,shared.ok);
    server.dirty ++;                        // 使dirty自增,这样就能同步到slave了
}

redis动态库示例

禁用flushdb命令

#include <redis.h>

static void* flushdb;

extern int redis_lib_init(redisClient *c) {
    flushdb = dictFetchValue(server.commands, sdsnew("FLUSHDB")); // 命令列表就是server.commands中,一个dict
    if (!flushdb) return 1; // 找不到? 被其他库删掉了?
    dictDeleteNoFree(server.commands, sdsnew("FLUSHDB")); // 删除但不要执行free
    return 0;
}

extern void redis_lib_depose(redisClient *c) {
    dictAdd(server.commands, sdsnew("FLUSHDB"), flushdb); // 卸载的时候就赋值回去,呵呵
    return;
}

项目地址

https://raw.github.com/wendal/redis_plugins

https://raw.github.com/wendal/redis

perth归来

2013-10-15 12:00:00 +0800

其实已经回国几天了,但群里的狼友依然很high

奋斗吧,童鞋们 -_-

perth是什么地方? 大概做了些啥?

西澳大利亚的首府, 西临南印度洋

阳光下睡个觉,海滩戏水,河边看美女,超市看各种降价,郊外看农场

总之,待了七天七夜,完整地走了perth的一周

Day1 – 阳光下睡个觉

3号晚上21:45的飞机,实际21:55起飞,直飞perth, 凌晨5:30到达

按最初的想法,以为my little girl会一直睡到目的地,结果却是各种折腾.

飞机上没有长时间的熄灯与安静,外加发动机持续的轰鸣声,一家三口都没能睡上3个小时.

下飞机,大家都很困,但还是要入境的嘛,例行的移民局查护照,盖章,领取行李接受检查,就出小插曲了.

缉毒犬(我猜是吧)盯上了我们(次偶,10人队伍,就我们需要额外检查…),工作人员指出饭盒是否有使用过(看来狗狗是饿了,开玩笑的),得到否定的答复后,就让我们pass了(汗啊,吓得半死)

perth机场并不大,但是有4个航站楼,T4还是专门给必和必拓员工用的,奇葩啊

出口处就是各种租车,电话卡的店铺,然后我惊奇发现航站楼就2层… 出口处旁边就是登机柜台

出示了护照,驾驶证,翻译件,预定单后, 10分钟左右就拿到了钥匙,然后就买了个$30的电话卡,果断电话回家报平安.

当我们坐上车(澳洲本地产,类似于宝来),小鸣鸣按捺不住了,看来真困了,一看时间,已经8点了

硬着头皮,在GPS还没准备好的情况下开车了… 绕了10分钟吧我猜,终于找到一个停车场,里面进去了

鸣鸣急不可耐地从安全座椅上挣脱出来,趴在妈咪的怀中就睡着了

就这样,没开空调,一家三口,开着窗户,就在阳光下的车厢中睡着了

醒来已经是10点,被乌鸦叫醒的(澳洲的乌鸦真是无处不在)

虽说是阳光下,但还是不觉得热,温度就20上下,很舒服, 到停车场旁边的KFC用生硬的英文买了个套餐,一家三口吃饱了,才调好GPS去酒店

GPS里面的提示,实在不习惯,外加右胎车,不熟悉的交通规则及路面标注,花了一个多小时才到了酒店附近

但依然看不懂路边复杂的停车标记,大胆地往酒店路边一停,老婆飞奔进了酒店,不一会,一位工作人员带着一个小纸条,告知停车的事宜, 也不记得当时是否听懂了,反正能把车停进去了(好吧,停车场里面其实也绕了5分钟,各种NO NOAUTH PACKING)

到处闲逛到下午2点左右,终于能入住了,一家人又睡了一觉

剩下的就是去苹果店买了台苹果呗,哈哈

Day2 – 袋鼠并非想象中那么美好

最初,我打算去距离酒店30km的一个野生动物园,但老婆依然担心我的车技,so,还是到附近的perth zoo

这perth zoo,我们Day1就路过,原因?走错路咯…

跟国内的动物园一样,就是看看各种动物,但入口是自行购票,没有栏杆!!买了票就自己走进去!! 虽然29刀/人,但这个zoo door,值了!!

澳洲小企鹅,黑天鹅,考拉,大象,长颈鹿,鳄鱼,鹦鹉,长臂猿的一家三口,犀牛,其实跟都是那些样子

但最最让我们印象深刻的,是袋鼠!!为啥呢?? 那股味道把鸣鸣弄哭了,真的”好难顶”!!

外加动物园内好吃好住,袋鼠个个都在晒太阳,懒洋洋到爆,而且为啥就看不到袋鼠的袋呢?!! 万马奔腾呢!!

饥渴难耐的小鸣鸣,终于扛不住了,拉着一个自动售货机不肯走,但没零钱啊,只好自身跑了半个动物园找到一家餐厅买了点东西,悲催啊…

傍晚时分,去了一趟West Perth的海滩,看海草与岩石,狗狗与健身的男女

Day3 – 超市各种打折

由于动物园的刺激,我们决定去找超市储备粮食,幸运地找到了woodworth,一家我之前就留意过的澳洲连锁超市

0.99刀/L的鲜牛奶,5刀/整只的熟鸡,还有各种贵到吐血的蔬菜和水果

超市是自助结账,没有收银员…

中午时分的超市,并没有遇到多少中国人

下午去了趟Kings Park, 看当地小孩各种疯玩(自愧不如啊)

Day4 – 鲨鱼在头顶路过,还有阳光与海滩

充足的食物,开始熟悉的路况车况交通规则,我们一早就往AQWA(The Aquarium of Western Australia)进发

依然绕错了路,也开始熟悉导航的指令,顺利到达海边的AQWA

AQWA旁边就是一个游艇码头,几百艘的样子吧,各种拍照免不了

水族馆里面,最出名的就是其水底隧道,看大鲨鱼大海龟从头顶路过,看各种大小的鱼穿梭

但最让我印象深刻的是暗室中的水母,实在太美了,相机根本拍不到那种美妙

水族馆向西就是大海,没有想象中那种蓝

从水族馆出来,周围逛了一下,才发现这是当地人游玩的地方,浅浅的海滩,小朋友各种玩耍

最最强悍的是,看到一个不到一岁,看样子刚刚会爬的小奶娃,在老爸的注视下,自行从沙滩爬到海浪里玩,OMG!~!

晚上,又是woodworth,花掉了100刀啊,背包得很沉啊

Day5 – 郊外看农场

这是属于我的一天,在出发来perth之前就确定要去的northam airport, 距离perth城区100km, 94号公路上的较大城镇

94号公路,一直向东走,连接1号公里,通往阿德莱德,墨尔本等南澳大利亚城市.

很多时候就是2车道,双向限速110公里,没有分隔带,相向的2台车的相对速度是220公里,每次遇到对面开过来的大货车就一顿心寒.

去northam,仅仅是我的要求,去看看那个小小的airport,走走这条94号公路

出了perth city,就开始爬坡(其实是回来的时候才知道那么高),经过几个国家森林公园之后,就是各种农场.

看过几次袋鼠出没的警示牌,但始终没看到野生袋鼠,算是个遗憾,绵羊倒是不少

路边各种野花,正在收割的小麦,还有airport里面的小型螺旋桨飞机,让人觉得很放松

Day6 – 到处逛逛

在河边看看跑步经过的美女,搭乘CAT(Central Area Transit’s,perth的免费bus)走马观花

看了好久查了很多资料才弄懂的停车标注

在售的Car

中餐厅的菜牌,不知道是不是又只收现金?!

咩表

中介的房屋出租信息

本地报纸

推销私人气象站设备,不知道在天朝是不是非法的…

Day7 – 买啊买

最后一天了,累积了几天的购物经验,开始在perth city中购买各种东西,呵呵,这就没啥好说了,顺便去了趟机场,探探路

忍不住还是吃了顿中餐

Day8 – 凌晨起床坐飞机

早上8:45的飞机,为了保险起见,5点就起床了, 冷啊冷(10度以下), 然后还看到短衣短裤的美女带着耳机在河边跑过,惊呆了!~!

路上加油,加德士,全自助,弄了5分钟还是没搞懂,唯有硬着头皮请工作人员帮忙

还车的时候,比预约时间晚了半个小时,二话没说就pass了

登机行李限制23kg/件,结果有一件超过了,又是各种翻腾重新分配

退税,一直惦记着这事,结果发现TSC(旅客退税计划)的办理点,就在海关旁边,排队,10分钟搞定

关于租车

靠左行驶,对我这种老手来说还是严重不习惯,总是偏左,不时压线

澳洲租车,护照驾驶证当然省不了,还得要驾照的翻译件,淘宝100块钱搞定, 最最关键的是信用卡,不能带银联标志!!

西澳大利亚,全州限速110km,任何道路的最高限速了,出机场的时候就看到这个牌子,可以说每条路都表明限速,而且每个人都按限速的值狂飙

也就是94号公路这种,双向无间隔,都能来个110限速,各种大货车私家车在路上狂飙

路上几乎严格的避让规则, 转弯让直行,车辆让行人

举个例子, 你突然发现前方50米处就是你需要的高速公路出口(我已经干过这事,而且我是看过其他人这样做之后才敢的), 立马打转向灯,后面的车全部减速,然后你就可以按部就班地转入到出口去.

又如某个车道封闭,那次我走到最前面,发现是封路了,打转向灯,目标车道的车就减速让我进入了.

Perth印象

店铺9点开门5点关门,准时得很,星期六日还有不一样的营业时间(反正就是更短啦)

空气质量满分,对我这种深受呼吸道疾病困扰的人来说,简直就是解脱,喉咙没疼,鼻子通畅,OMG!

Android系统配置数据库注释(settings.db)

2013-09-23 12:00:00 +0800

system表

参考: http://developer.android.com/reference/android/provider/Settings.System.html

1|volume_music|11               // 媒体音量
2|volume_ring|5                 // 闹钟音量
3|volume_system|7               // 系统音量
4|volume_voice|4                // 通话音量
5|volume_alarm|6                // 警报音量
6|volume_notification|5         // 提示音的音量
7|volume_bluetooth_sco|7        // 蓝牙耳机的音量
8|mode_ringer|2                 // 情景模式. 0=静音,1=震动,2=普通
9|vibrate_on|10                 // 震动的级别
10|mode_ringer_streams_affected|166 // ...
11|mute_streams_affected|46     // ...
12|power_on_able|false          // 不清楚
13|default_screen_orientation|0 //默认屏幕方向, 0=横向,1=竖向
14|dim_screen|1                 // 自动调暗屏幕, 1自然就是开启咯
15|stay_on_while_plugged_in|0   // 插入电源时保持屏幕开启,不锁屏
16|screen_off_timeout|-1        // 屏幕超时,进入锁屏的耗时, -1自然是不启用咯
17|emergency_tone|0             // 
18|call_auto_retry|0            // 呼叫失败后自动重拨
19|dtmf_tone_type|0             // 
20|hearing_aid|0                //
21|tty_mode|0                   //
22|airplane_mode_on|0           // 飞行模式
23|airplane_mode_radios|cell,bluetooth,wifi,nfc,wimax // 飞行模式下,需要关闭的设备
24|airplane_mode_toggleable_radios|bluetooth,wifi,nfc //
25|auto_time|1                  // 从移动网络自动获取时间, 据说中国移动和中国联通均不支持
26|auto_time_zone|1             // 从移动网络自动获取时区
27|screen_brightness|102        // 屏幕亮度
28|screen_brightness_mode|0     // 屏幕亮点自动调节
29|window_animation_scale|1.0   // 窗口动画-缩放
30|transition_animation_scale|1.0 // 依然是窗口动画
31|accelerometer_rotation|1     // 屏幕自动旋转
32|haptic_feedback_enabled|1    // 虚拟按键的反馈
33|notification_light_pulse|1   // 提示灯
34|set_install_location|0       // 允许设置安装位置
35|default_install_location|0   // 允许设置缺省的安装位置
36|power_sounds_enabled|1       // 开机关机的声音
37|low_battery_sound|/system/media/audio/ui/LowBattery.ogg // 低电量的警告语,极其恶心那个
38|dtmf_tone|1
39|sound_effects_enabled|1      // 声音效果
41|dock_sounds_enabled|0        // 插入或移除设备的时候,"叫"~~
42|desk_dock_sound|/system/media/audio/ui/Dock.ogg // 插入时的叫声
43|desk_undock_sound|/system/media/audio/ui/Undock.ogg // 拔出时的叫声
44|car_dock_sound|/system/media/audio/ui/Dock.ogg  //车载模式下,插入的叫声
45|car_undock_sound|/system/media/audio/ui/Undock.ogg //车载模式下,拔出的叫声
46|lockscreen_sounds_enabled|0  // 屏幕加锁解锁的声音
47|lock_sound|/system/media/audio/ui/Lock.ogg // 加锁的声音
48|unlock_sound|/system/media/audio/ui/Unlock.ogg //解锁的声音
49|vibrate_in_silent|1          // 静音时启用震动
50|pointer_speed|0              // 不知道...
51|accelerometer_coordinate|default
52|is_scan_tf_card|1            // 是否扫描sdcard
53|hidden_google_application|0  // 隐藏google应用
54|time_12_24|24                // 时间按12小时制还是24小时制
55|display_adaption_mode|center // 屏幕适配模式
56|is_scan_usb_host|1           // 扫描U盘不?
57|shortcut_key_0|website--split--http://tv.sohu.com // 快捷键0, 我XX
58|shortcut_key_1|website--split--http://v.qq.com/   // 快捷键1, 我XX
59|shortcut_key_2|app--split--com.android.settings--split--com.android.settings.Settings // 快捷键2, 我XX
60|shortcut_key_3|app--split--com.softwinner.TvdFileManager--split--com.softwinner.TvdFileManager.MainUI // 快捷键3, 我XX
61|display_adapter_enable|1     // 自动适配显示设备
62|display_area_ratio|100       // 显示的区域
63|smart_brightness_enable|0    // 自动调整屏幕亮度
66|mouse_advance|30             // USB鼠标的设置? 不清楚
67|color_brightness|50          // RGB的调色
68|color_contrast|50            // RGB的调色
69|color_saturation|50          // RGB的调色
70|audio_output_type|NORMAL     // 音频输出类型
71|audio_output_channel|HDMI    // 音频输出的通道 -- 可以查audiomode表, 见过: HDMI VGA LVDS
72|directly_power_off|1         // 直接关闭电源,无需再次确认
73|bd_folder_play_mode|1        // 蓝光目录模式, 当打开蓝光光盘格式的目录时,自动开始播放 -- XX
74|hdmi_output_mode|255         // hdmi的输出模式,无解中
75|display_output_format|HDMI 1080P 60HZ // 显示输出的模式,这个太重要了,可选模式? 因机器而异的...
76|first_boot_system|true       // 是否为第一次启动, 不准确的值
77|alarm_alert|content://media/internal/audio/media/9 //警告音
78|notification_sound|content://media/internal/audio/media/50 // 提示音
79|ringtone|content://media/internal/audio/media/124 // 闹钟

secure 表

参考1: http://developer.android.com/reference/android/provider/Settings.Global.html#DATA_ROAMING

参考2: http://developer.android.com/reference/android/provider/Settings.Secure.html

1|bluetooth_on|0                // 是否开启蓝牙
2|data_roaming|0                // 数据漫游
3|install_non_market_apps|1     // 安装非认证的程序--100%是开启啦(1)
4|location_providers_allowed|gps // 允许使用的定位方式, gps
5|assisted_gps_enabled|1        // 是否开启agps
6|network_preference|1          // 
7|usb_mass_storage_enabled|1    // 允许使用U盘
8|wifi_on|1                     // 启用wifi
9|wifi_networks_available_notification_on|1 // 有可用网络的时候提示一下
10|wifi_country_code|EU         // wifi国家码,鬼知道啥东西,反正都一样
11|eth_on|1                     // 开启有线网络,就是网卡啦...
12|eth_conf|1                   // 启用有线网络的配置
13|eth_mode|1                   // 有线网络的模式: 1=dhcp 0=静态ip
14|eth_ifname|eth0              // 端口名, 一般就是eth0啦
15|preferred_network_mode|0     // 优选网络模式
16|cdma_cell_broadcast_sms|1    // 
17|preferred_cdma_subscription|1
18|mock_location|1              // 是否允许模拟地址信息
19|backup_enabled|0             // 是否启用备份
20|backup_transport|android/com.android.internal.backup.LocalTransport
21|mount_play_not_snd|1
22|mount_ums_autostart|0
23|mount_ums_prompt|1
24|mount_ums_notify_enabled|1
25|accessibility_script_injection|0
26|accessibility_web_content_key_bindings|0x13=0x01000100; 0x14=0x01010100; 0x15=0x02000001; 0x16=0x02010001; 0x200000013=0x02000601; 0x200000014=0x02010601; 0x
200000015=0x03020101; 0x200000016=0x03010201; 0x200000023=0x02000301; 0x200000024=0x02010301; 0x200000037=0x03070201; 0x200000038=0x03000701:0x03010701:0x030207
01;
27|long_press_timeout|500
28|touch_exploration_enabled|0
29|speak_password|0
30|default_input_method|com.android.inputmethod.latin/.LatinIME // 默认输入法
31|pppoe_interface|eth0         // pppop的端口,就是ADSL咯
32|pppoe_auto_conn|0            // pppop自动连接
33|pppoe_enable|0               // 启用pppop
34|lockscreen.options|enable_facelock //锁屏设置
35|android_id|a906a1d1a3c594c   // android id?不知道神马东西
37|enabled_input_methods|com.android.inputmethod.latin/.LatinIME:jp.co.omronsoft.openwnn/.OpenWnnJAJP // 可用的输入法
38|input_methods_subtype_history| 
39|selected_input_method_subtype|-1
40|selected_spell_checker|com.android.inputmethod.latin/.spellcheck.AndroidSpellCheckerService
41|selected_spell_checker_subtype|0
42|eth_ip|                     // 网卡的ip
43|eth_dns|                    // 网卡的dns
44|eth_route|                  // 网卡的route
45|eth_netmask|                // 网卡的掩码
46|adb_enabled|1               // 是否启动adb
47|throttle_reset_day|3        
48|device_provisioned|1
49|dropbox:data_app_wtf|disabled
50|ssl_session_cache|file
51|facelock_detection_threshold|0.0
52|dropbox:data_app_crash|disabled
53|send_action_app_error|1
54|dropbox:data_app_anr|disabled
55|web_autofill_query_url|http://android.clients.google.com/proxy/webautofill

最后说一句, id不是固定的,就是个自增的值而已

记录一下jetty的异步请求

2013-09-06 12:00:00 +0800

nutz加jetty 的测试代码

    @At
    @Ok("void") //不要视图啊... 因为多次进入
    @Fail("void")// 一样不需要...
    public void async(final @Param("wait")long wait, @Attr("obj")Object obj, final HttpServletRequest req) {
        System.out.println("async IN");
        if (obj == null) { // 第一次进入时,必然是null, 第二次,如果是线程唤醒的,那就有值了,呵呵
            System.out.println("OBJ NULL");
            // 获取这个关键的对象,哈哈哈
            final Continuation continuation = ContinuationSupport.getContinuation(req);
            if (continuation.isExpired()) { // 往下的代码设置了超时,so,这样判断一下咯
                System.out.println("async TIMEOUT");
                return;
            }
            continuation.setTimeout(15*1000); //设置超时哦
            continuation.suspend(); // 非阻塞的方法... 仅仅是设置一个状态
            new Thread() { //我在这启动一个线程,休眠一定时间之后唤醒这个异步请求
                public void run() {
                    System.out.println("async Thread Start");
                    if (wait < 1) {
                        Lang.quiteSleep(10 * 1000);
                    } else {
                        Lang.quiteSleep(wait * 1000);
                    }
                    System.out.println("async Thread wakeup");
                    req.setAttribute("obj", "I do it!");
                    continuation.resume();
                };
            }.start();
        } else {
            System.out.println("async GET OBJ --> " + obj);
        }
        
        System.out.println("async OUT");
    }

简单来说,就是多次进入入口方法.通过

让golang的get命令兼容gitlab

2013-08-28 12:00:00 +0800

我们有些什么呢?

Gitlib已经发布了6.0,号称是企业级的版本了,作为私有git库的首选,自然越来越多人用

假设有这样一个golang 的库,URL是 http://git.wendal.net/wendal/gofly

如果尝试执行下面的语句去获取这个库的话

go get git.wendal.net/wendal/gofly

#会输出
package git.wendal.net/wendal/gofly: unrecognized import path "git.wendal.net/wendal/gofly"

然而,如果我们输入

go get git.wendal.net/wendal/gofly.git

#会输出
fatal: repository 'git.wendal.net/wendal/gofly' does not exist
package git.wendal.net/wendal/gofly.git: exit status 128

为什么呢?貌似go get不支持自定义的库地址啊(git的)

且看 $GOROOT/src/cmd/go/vcs.go里面的一段代码

    // General syntax for any server.
    {
        re:   `^(?P<root>(?P<repo>([a-z0-9.\-]+\.)+[a-z0-9.\-]+(:[0-9]+)?/[A-Za-z0-9_.\-/]*?)\.(?P<vcs>bzr|git|hg|svn))(/[A-Za-z0-9_.\-]+)*$`,
        ping: true,
    },

可以看到, 对于未知的库地址(非github/Google Code/Bitbucket/Launchpad),都按这里的配置进行设置

按上述的正则表达式,输入git.wendal.net/wendal/gofly可以得到

root = git.wendal.net/wendal/gofly
repo = git.wendal.net/wendal/gofly
vcs  = git

What? 当使用git进行clone的时候,其实就执行了

git clone $repo $GOPATH/src/$root
#展开之后(假设GOPATH=/opt/gopath)
git clone git.wendal.net/wendal/gofly /opt/gopath/src/git.wendal.net/wendal/gofly

git库的地址当成本地路径了,不出错才怪呢

怎么解决呢? 添加自定义的库地址,跟github类似

首先,拷贝一份github的配置

    // Github
    {
        prefix: "github.com/",
        re:     `^(?P<root>github\.com/[A-Za-z0-9_.\-]+/[A-Za-z0-9_.\-]+)(/[A-Za-z0-9_.\-]+)*$`,
        vcs:    "git",
        repo:   "https://{root}",
        check:  noVCSSuffix,
    },

改成

    // git.xwoods.org
    {
        prefix: "git.wendal.net/",
        re:   `^(?P<root>git\.wendal\.net/(?P<p>.[A-Za-z0-9_.\-]+/[A-Za-z0-9_.\-]+))(/[A-Za-z0-9_.\-]+)*))$`,
        ping:   false,
        repo:   "git@git.wendal.net:{p}.git",
        vcs :   "git",
    },

注意 re和repo,做了特别处理哦,多一个p变量, 这样repo就把凑成标准的ssh式git地址,自动使用密钥(哈哈,私有库嘛)

最后,还需要把golang编译

# linux/mac 下
$GOROOT/src/make.bash

#windows下
cd %GOROOT%\src\cmd\go
go install

再说Ioc

2013-08-23 12:00:00 +0800

很多人都没搞懂Ioc到底什么原理,搞不懂里面有什么魔术.

注: 不讨论JavaAgent/JNI/动态类创建/自定义ClassLoader/自定义JVM下的行为

这些gif我曾经在nutz群中发送多次,但多少人真的看懂了…

首先,看第一种理解 – 加几个注解,对象就能注入

上面的@Inject是Nutz Ioc的注解,你可以替换成Spring之类的注解,完全没有区别.

运行即可看到, 变量dao为null,但为什么呢? 已经加了@Inject注解了啊

再看第二种理解 – 加了注解,有Ioc容器,就能注入

明明加了注解,而且Ioc容器(可替换为其他任何ioc容器)也启动了,为啥还是null呢?

到底什么东西能被注入?

首先,被注入的,必须是个对象,而非一个类 – 注解仅仅是ioc配置信息,这些配置信息可以通过js/xml/yaml/数据库记录甚至UI操作来读取

然后,必须是ioc管理的对象 – 由ioc容器,通过某种方法(一般就是反射API的newInstance方法)创建的对象

就是说, 一个对象要被注入某个属性, 必须由ioc容器创建,根据配置信息进行组装,然后用户通过ioc的api直接/间接获取到.

如何知道某个对象是否是ioc管理?

由于没有API可以获知一个已知对象的创建过程,所以只能在对象创建时进行跟踪

在Java中,一个对象的生成,要么new,要么反射newInstance,但总得调用其构造方法

所以,我们可以在构造方法中加入这样的代码,检测是不是ioc容器创建对象

        // 获取调用构造方法的堆栈信息
        // eles[0]指向Thread,eles[1]指向构造方法
        StackTraceElement[] eles = Thread.currentThread().getStackTrace();
        // 反射的特征类(仅针对Sun JDK和OpenJDK)
        if (eles[2].getClassName().startsWith("sun.reflect") || eles[2].getClassName().startsWith("java.lang.reflect")) {
            log.debug(getClass() + " Born using reflect");
            for (int i = 2; i < eles.length; i++) {
                StackTraceElement stackTraceElement = eles[i];
                String className = stackTraceElement.getClassName();
                if (className.startsWith("sun.reflect") || className.startsWith("java.lang.reflect"))
                    continue;
                log.debug(getClass() + " Born by --> " + className);
                break; //必须考虑到嵌套生成的情况,仅查找第一个非反射调用
            }
        } else {
            // 当对象通过 new XXXX(...)方式创建,就会打印下面的log
            log.debug(getClass() + " Born using new");
        }
        //上述代码如果放在独立的方法中,那么堆栈index要相应增加

剩下的,就是配置信息是否正确的问题了

注解到底是什么?在字节码中,就是一个新增的属性罢了,注解并非可执行的代码,换句话说,他们没法被执行,只有其他代码读取他们.

而注解如何就变成ioc的配置呢?这纯粹就是ioc容器的约定罢了,规定某些符合规律的注解组合与值,可以转化为抽象的配置对象

这些抽象的配置对象,一样可以通过js/xml等一切可描述文档,数据,甚至UI输入,硬编码进行构建,IOC容器往往都把这一层抽象了. 不同配置方式得到的最终的配置对象,总是一样的.

用openresty做redis订阅发布

2013-08-09 12:00:00 +0800

openresty依然很强大,先上服务器端的代码, 定义一个通用的订阅接口

    location =/subscribe {
        send_timeout 365h; #很久很久很久,呵呵
        content_by_lua "
        local redis = require \"resty.redis\"
        local red = redis:new()
        red:connect(\"127.0.0.1\", 6379)
        red:subscribe(ngx.var.arg_key) -- 严格来说,需要判断空值和url decode
        local res, err = red:read_reply()
        if res then 
            ngx.say(res) -- 其实是个数组.. 第3个值才是publish的值
        else
            ngx.status = 500
        end
        red:close()
        ";
    }

客户端? 简单啦,Nutz一行代码搞定

String str = Sender.create(url).setTimeout(60*60*1000).send().getContent();

Ubuntu12.04下asoundrc不起效

2013-07-25 12:00:00 +0800

因为要配置asound,所以用到~/.asoundrc, 但ubuntu下总是没效果的样子

最后,终于发现这个痕迹

wendal@ubuntu:~$ aplay -L
default
    Playback/recording through the PulseAudio sound server
sysdefault:CARD=I82801AAICH
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Default Audio Device
front:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Front speakers
surround40:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    4.0 Surround output to Front and Rear speakers
surround41:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    4.1 Surround output to Front, Rear and Subwoofer speakers
surround50:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    5.0 Surround output to Front, Center and Rear speakers
surround51:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    5.1 Surround output to Front, Center, Rear and Subwoofer speakers
iec958:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    IEC958 (S/PDIF) Digital Audio Output
dmix:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Direct sample mixing device
dsnoop:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Direct sample snooping device
hw:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Direct hardware device without any conversions
plughw:CARD=I82801AAICH,DEV=0
    Intel 82801AA-ICH, Intel 82801AA-ICH
    Hardware device with all software conversions

最可疑的就是default这段,在我之前测试的centos 5.6上是没有的

default
    Playback/recording through the PulseAudio sound server

果断卸载之,管他是啥

sudo apt-get autoremove pulseaudio

重启,搞定,哦也!!

篮子里的鸡蛋

2013-07-04 12:00:00 +0800

一个鸡蛋,一块吐司

成品

py2exe练手

2013-07-03 12:00:00 +0800

受老同学所托,写了个字符串抽样的东西(就是N个字符串抽取固定的几个),代码如下:

#!python
# -*- coding: UTF-8 -*-

import os.path
import time
import sys
import itertools 
import random

if not os.path.exists("numbers.txt") :
    print u"没找到数据文件 numbers.txt"
    time.sleep(5)
    sys.exit()

with open("numbers.txt") as f :
    d = str(f.read())

#print d
numbs = d.split(",")
#print numbs, u"长度" ,len(numbs)

re = itertools.combinations(numbs, 5) #内置的一个库,so easy
re = list(re)
random.shuffle(re)                    #把顺序打乱,哈哈

with open("re.csv", "w") as f:        #按同学要求,输出为csv文件
    for p in re :
        f.write(', '.join(str(x) for x in p))
        f.write("\n")

然后?就是py2exe做成可执行文件了

from distutils.core import setup
import py2exe

setup(console=["main.py"])

非常简单的执行

python setup.py py2exe

搞定,哈哈

微信公众平台开发小结

2013-07-02 12:00:00 +0800

只讨论低权限帐号,高端帐号请绕道…

能做什么?不能做什么?

应答机,自主查询机都能做,但由于没法主动推送(除非你能拿到很高的权限),所以呢,什么预警系统的,一时半刻做不了

机制

基本流程

用户发信息  -->微信服务器-->我们的服务器

用户显示信息<--微信服务器<--

#如果是图文信息,就有额外的通信

用户访问图文-->我们的服务器

基本限制

开发文档

所有都是基于http,服务器发给你的是xml,你响应的也是xml
必须在5秒内响应,必须是合法格式
xml的节点名与文档必须完全一样
文本信息必须小于2k字节
图文信息每次最多10个”作品”,每个都有标题,简单描述,图片链接,链接
图文信息的图,是直接访问你的服务器然后显示
注意图片的缓存问题,同一个URL在多次响应中,是不会重复访问

goweixin的那些代码

项目地址https://github.com/wendal/goweixin

核心代码之一,签名校验

func Verify(token string, timestamp string, nonce string, signature string) bool {
    if DevMode {
        return true
    }
    strs := []string{token, timestamp, nonce}
    sort.Strings(strs)                 //需要按值进行排序,蛋疼不?
    key := strs[0] + strs[1] + strs[2] //接着拼起来 
    if _Debug {
        log.Println("Verify key=", key)
    }
    h := sha1.New()                    //然后算sha1
    h.Write([]byte(key))
    re := fmt.Sprintf("%x", h.Sum(nil))
    if _Debug {
        log.Println("Verify", signature, re)
    }
    return signature == re            // golang嘛,字符串直接比较值
}

一点提醒

使用bluestacks在电脑上安装微信,可以抛开手机进行调试
一定一定要把生成的xml打印出来检测哦,错误的响应,微信不会有任何提示!!

实例消息

订阅通知

<xml><ToUserName><![CDATA[gh_2dc74cccf555]]></ToUserName>
<FromUserName><![CDATA[oSmHgjqYZN7zD4pOjsb_jK88wKFs]]></FromUserName>
<CreateTime>1372736407</CreateTime>
<MsgType><![CDATA[event]]></MsgType>
<Event><![CDATA[subscribe]]></Event>
<EventKey><![CDATA[]]></EventKey>
</xml>

文本信息

<xml><ToUserName><![CDATA[gh_2dc74cccf555]]></ToUserName>
<FromUserName><![CDATA[oSmHgjqYZN7zD4pOjsb_jK88wKFs]]></FromUserName>
<CreateTime>1372736658</CreateTime>
<MsgType><![CDATA[text]]></MsgType>
<Content><![CDATA[演示信息]]></Content>
<MsgId>5895859052130344107</MsgId>
</xml>

文本响应

<Content><![CDATA[Hi,
你好啊
]]></Content>
<xml>
<FromUserName><![CDATA[gh_2dc74cccf555]]></FromUserName>
<ToUserName><![CDATA[oSmHgjqYZN7zD4pOjsb_jK88wKFs]]></ToUserName>
<MsgType><![CDATA[text]]></MsgType>
<CreateTime>1372736571</CreateTime>
<FuncFlag>0</FuncFlag>
</xml>

图文响应

<xml>
<MsgType><![CDATA[news]]></MsgType>
<ArticleCount><![CDATA[6]]></ArticleCount>
<Articles><item><Title><![CDATA[北京达诺视通]]></Title>
<PicUrl><![CDATA[http://www.danoonetworks.com/css/imgs/logo.png]]></PicUrl>
<Url><![CDATA[http://www.danoonetworks.net]]></Url>
</item>
<item><Title><![CDATA[V1 2013-07-02 11:42:03]]></Title>
<PicUrl><![CDATA[http://wx.wendal.net/snap/zhaoxun/1372737416.jpg?id=8589943729]]></PicUrl>
<Url><![CDATA[http://wx.wendal.net/snap/zhaoxun/index.html?id=8589943729]]></Url>
</item>
<item><Title><![CDATA[VZ 2013-07-02 11:56:01]]></Title>
<PicUrl><![CDATA[http://wx.wendal.net/snap/zhaoxun/1372737416.jpg?id=8589943893]]></PicUrl>
<Url><![CDATA[http://wx.wendal.net/snap/zhaoxun/index.html?id=8589943893]]></Url>
</item>
<item><Title><![CDATA[V2 2013-06-26 10:47:08]]></Title>
<PicUrl><![CDATA[http://wx.wendal.net/snap/zhaoxun/1372737416.jpg?id=8589941622]]></PicUrl>
<Url><![CDATA[http://wx.wendal.net/snap/zhaoxun/index.html?id=8589941622]]></Url>
</item>
<item><Title><![CDATA[V3 2013-07-02 11:56:04]]></Title>
<PicUrl><![CDATA[http://wx.wendal.net/snap/zhaoxun/1372737416.jpg?id=8589935214]]></PicUrl>
<Url><![CDATA[http://wx.wendal.net/snap/zhaoxun/index.html?id=8589935214]]></Url>
</item>
<item><Title><![CDATA[V4 2013-07-02 11:42:23]]></Title>
<PicUrl><![CDATA[http://wx.wendal.net/snap/zhaoxun/1372737416.jpg?id=8589956309]]></PicUrl>
<Url><![CDATA[http://wx.wendal.net/snap/zhaoxun/index.html?id=8589956309]]></Url>
</item>
</Articles>
<FromUserName><![CDATA[gh_2dc74cccf555]]></FromUserName>
<ToUserName><![CDATA[oSmHgjqYZN7zD4pOjsb_jK88wKFs]]></ToUserName>
<CreateTime>1372737330</CreateTime>
<FuncFlag>0</FuncFlag>
</xml>

在windows下编译OpenResty

2013-06-25 12:00:00 +0800

折腾了一天,终于解决了

首先,准备cygwin环境

cygwin下载setup.exe,启动并开始安装,建议选163源或者日本的源,速度较快

需要的安装的包及其devel包: openssl zlib pcre

还有就是一些编译需要的工具: gcc4 make perl lua (不使用openresty内置的lua)

下载openresty, openresty官网

并解压到 C:\cygwin\tmp下

修正lua的C模块编译脚本

共需要修正3个文件(其实就是3个模块),而且都是一样的修改. 版本号日新月异,自己搞定啦

打开 C:\cygwin\tmp\ngx_openresty-1.2.8.6\bundle\lua-cjson-1.0.3\Makefile, 加入 -llua5.1

然后就是如法炮制,修正rds和redis处理模块

开始编译吧,童鞋们!

启动cgywin

开始执行配置,注意,这里使用系统的lua,而非openresty内置的lua,原因就是cjson等模块会找不到内置的lua(配一下也可以,但麻烦)

cd /tmp/ngx_openresty-1.2.8.6

./configure --without-select_module --prefix=/opt/openresty --with-lua51=/usr

开始编译(按你的实际情况设置并发数哦,不然很久很久的)

make -j8                  #8就是内核数,并行编译,按你的实际情况而定

编译完成

安装那点小事

如果你直接执行make install, 你会看到这些错误(也许?)

这个我也纠结了一段时间,然后改成这样执行,注意是/opt2,而非原本的/opt

make install DSETDIR=/opt2

你以为完了?其实还没有,你需要把名字改回去

rm -fr /opt/openresty
mv /opt2/opt/openresty /opt/

先简单测试一下

测试最基本的配置文件检查

/opt/openresty/nginx/sbin/nginx.exe -t

然后就是测试核心的lua调用

打开nginx.conf文件,添加一个location

        location /lua/hi {
            content_by_lua 'ngx.say("LUA Here")' ;
        }

保存,启动nginx, 然后curl一下看看

/opt/openresty/nginx/sbin/nginx.exe
curl -v http://127.0.0.1/lua/hi

测试数据库连接

数据库的resty.mysql库需要LuaBitOP库(汗,为啥openresty不包含?)

下载LuaBitOP库, 猛击下载地址,并解压到C:\cygwin\tmp下

惯例了,修正编译参数

编译然后拷贝到openresty的lualib

cd /tmp/LuaBitOp-1.0.2
make
cp bit.so /opt/openresty/lualib

接下来,就是修改nginx.conf,加上官方的测试例子了

        location /lua/mysql {
            content_by_lua '
            
            local mysql = require "resty.mysql"
            local db, err = mysql:new()
            if not db then
                ngx.say("failed to instantiate mysql: ", err)
                return
            end

            -- 省略1000字,自行到官网拷贝吧
            ' ;
        }

让nginx重新加载配置,然后访问之

/opt/openresty/nginx/sbin/nginx.exe -s reload
curl -v http://127.0.0.1/lua/mysql

哦也,上截图

打完收工!! 但有啥不足呢?

没有luajit,反正我没弄出来, configure阶段总是找不到库,不管了,windows就不那么追求性能了

马来西亚,闲游

2013-06-14 12:00:00 +0800

严重声明

很多图,慎入!!

超级啰嗦,慎入!!

你还是想看?好吧… 不同情你

旅游是最好的投资

4天的马来西亚之行,是首次真正的出国之行,而且还真的是自由行了

出发: 2013-06-10 10:20 亚航 AK1013 白云机场

返航: 2013-06-13 16:05 亚航 AK1016 马来西亚LCCT机场

花费: 1.5w/4人 -_- 泪奔进行时,大部分都是机票酒店的钱

护照和签证

护照是一早就办好了,200元,户籍所在地的办证大厅办理一下,20个工作日搞定.

马来西亚签证算是最简单签证吧,只需要护照原件和2寸照片,直接去使馆的话80RMB,但我选择代送,168RMB,4天搞定

PS: 现在已经涨价到130了,泪奔吧…,想省钱就自己送签吧,就在中信,2张2寸照片就行

机票

亚航的机票依然是最便宜的,但由于是上有老下有小,不能简单挑选最便宜的航班.

故,选择了早上出发,下午返航,价位偏高咯(人均2.5k),大小同价

网上好多好多攻略都是拿到什么特价机票,我是没那个本事了,呵呵,机票人均2.2k往返

托运行李

出发预定了25kg,实际使用了20kg,返航预定了55kg,实际使用了26kg,明显就是浪费了不少钱

原因很简单,老婆没准我买大米,我原本打算买20kg的,哇哈哈

货币

一般是100人民币对46马来西亚币,就RM46元,但银行ATM提款能到RM51(RM500实际扣了976人民币,算上10人民币的手续费),非常超值,比任何兑换点都高

所以,见到ATM你就提款吧!! 不必到处找兑换点

飞机餐

往返均预定了3份饭,1份椰子汁,事实上证明口味均为负分滚粗啦.事实证明,偷偷带点食物,其实没问题的

值机

由于预定了座位(15元/人),故,提前了好多天就打印了Boarding Pass.

白云机场,亚航的位置是H或J值机口(貌似会变化,很神奇)

护照和自行打印的机票,统统交给柜台的MM,不一会就打印了红色的登机牌.

然后,行李过磅,贴上条形码.值得一提的是,随身行李也需要贴纸.

亚航的规定手提行李是7kg+小挎包/电脑包(不称重的哦),你懂得啦

等待登机

分配的登机口是107,提着小包,快速通过安检和海关(需要拍照),对自己人还是很宽容的

9点已经到达登机口,但亚航的飞机还没出现,跟小鸣鸣看飞机咯

小鸣鸣有点烦躁了….

亚航的飞机终于到了

机上的乘客正准备下机.. 次偶,真是省啊,离我的航班只剩下半小时了,够紧凑的

这时候,一台飞机走过

怎么那么大呢,为什么呢…

次偶,原来是A380了,对比之下,亚航的A320好小啊-_-

再来一张,四发双层,好羡慕啊^_^

飞机上,哪里是天,哪里是海呢?这是个问题.

刚起飞时,还是能看到陆地的

然后… 我发现… 小鸣鸣睡着了…

飞机餐来袭

本来就飞机餐的预期就不大,但还是被外包装吸引了(凭登机牌的尾联确认座位后派发)

才说着呢,小鸣鸣闻到香味了,起床吃饭了

机舱除了我身后2位no show都坐满了,满满的各种调味料的味道

接近降落

起飞后3小时,我开始头皮发麻,脑袋发晕… 然后,我终于又看到陆地了

好吧,事实上在飞行过程中,我看到了海岛(西沙群岛?),机场,还有越南的小城市.

为啥我知道那是越南? 看这个地址吧, AK1013飞行记录图

不知道啥原因,飞机绕到马六甲海峡,然后回来,so,我看到不少油轮

菜市场一样的LCCT

如网上攻略所说,全部都是楼梯下飞机,现场跟菜市场差不多

原本想多拍几张飞机的照片,机务人员不停的催赶 -

入境,前往酒店

经过长长的走廊,真的很长的啊,期间还不停地吸飞机尾气,因为离飞机不到50米!!

进入室内的时候,有个岔口,上楼就是入籍,左转就是联程,标志很明显,但还是有人走错了.

入境大厅有一个货币兑换点,100/46的样子,比较坑(照片太模糊了,不上了)

排队准备入境时,看到几个被带走的旅客(啥情况呢?不清楚… 我XXX)

到我的时候,工作人员让我一家三口同时上,然后,很神奇的,不需要按指纹,并非网上所说的必须按

而且,工作人员一句话都没说,也没要求我出示回程机票(就塞在包里呢),就盖章pass了

下楼梯,回到1楼的时候(开头上楼的了嘛),当头就是Tune talk的服务台,这时候,我忽然想起没打印行程单.

我万马奔腾啊… 开电脑找,我X,pdf被删了,好吧,试试我的英语吧.

me: er,I book sim card in airasia, er, online , er , how can I provive(貌似发错音了) it ?
MM: I need you booking number
me: what????... -_- (没听清啊大姐)
MM: booking ... number ...
me: ok!! ... ... (狂翻电脑包,哦也,找到了,原来订单号就ok嘛) , here, thank you

MM翻看了电脑上的文档, 目测是Excel,然后选了2个sim卡

MM: I need your passport
me: one or two?
MM: one

哦也,我能对话了… 递上护照

MM: active it?
me: (what.... 哦,激活?!!) No, I will do it myself. (我日,为啥我要自己激活呢?!!)
MM: ok. (然后就用笔写上*100#   1  同2行,我觉得我看懂了...)

待我满头大汗的拿到了sim卡,老妈和老婆已经提着行李回来了

然后就是兑换货币啦,拿出我特意办的华夏借记卡,ATM拿钱,结果,XXX,没现钞!!!!!!!!!!!!

我又万马奔腾啊,旁边就是这家银行的柜台,分明就是要人工兑换,¹⁰⁰⁄₄₇,忍了!!

如何去酒店呢?

准备离开到达大厅的时候,有几个售票亭,售卖Taxi票和Bus票.

按我原本的计划,是坐摆渡Bus到KLIA机场(真正的大机场),然后坐机场轻轨,最后坐Taxi去酒店

So,无视了这些售票亭,兴冲冲的跑到外面去找摆渡Bus,结果,-_-找不到,我XXX

好吧,硬着头皮,从边上偷偷进入到达大厅(直接无视工作人员的手势),在Taxi票的地方,开了张票

原本预算是RM120,结果开了张RM118的Taxi票,没说什么就付钱了(后来才知道多坑爹啊…)

酒店,4星啊!!厨房,有木有?!

路上的风景没啥说的了,全程紧绷神经,生怕被载到荒山野岭了(网上好多攻略说Taxi坑爹,我也怕啊)

结果,无惊无险,除了小塞车了几分钟,顺利到达酒店(难道是因为付了足够的费用,赚足了?)

酒店的气派一般般啦,前台只有一个大妈(奔腾中)

拿出预定单,对话开始了…

me: I book this (递上打印好的预定单)
MM: I need your passport (指了指预订单上的英文姓名)
me: ok, (递上护照)
MM: (转身去办公室,复印了我的护照,并且在复印纸上按了个啥章)
MM: sign here, here (原来早已经打印好相关文件,就差签名)
me: chinese or ? (小心驶得万年船)
MM: up to you
me: (好吧,分明是给机会show我的中文书法!!)

10楼,恩,有点低,算了(其实,原因是不知道改房间怎么讲)

窗外的马路,听不到汽车的声音,但…

晚上入睡前,才发现,我XX,摩托车的声音才是王道啊,响彻云霄啊!! 好吧,我的隔音耳塞上场了

吃饭的时候也到了,在酒店对面吃了一顿穆斯林餐厅的美食,胃口没了…

马路对面是超市,哈哈,好多东西买(半数以上是进口货),顺便买了小番茄给鸣鸣吃

价钱嘛, 800/晚,2个独立卧式

早餐劵

房费中已经包含了早餐,比较一般的马来西亚式早餐(我瞎编的),面包火腿肠炒饭各种酱料

KLCC

双子塔还是要去一下的,参观要RM80,就没上去了,因为不是登顶,而且价格太贵

第一天的时候,我们是步行到Ampang Park轻轨站,然后坐一个站到KLCC站,出站就是KLCC

路上买的牛奶,RM2

霸气不?

KLCC的价目表,说是每天限量,估计这么贵也卖不完吧,懒得去问了

在KLCC下的KFC吃中午餐

KL Tower

吃完午餐,前往今天主力景点,吉隆坡塔,由于没有轻轨,就走过去了,途中还下雨了

原以为RM20就能登顶(网上攻略是这样是说的啊),结果要RM49,万马奔腾啊!!好在小鸣鸣免费,算是省了点

塔上瞻仰吉隆坡的风景

拿了份旅游地图,研究一下先

远远看到大雨将至

但一直没等到,算了,下楼,结果,XXX,暴雨了!!

老婆跟一位马来西亚美女搭讪上了… 教我们做免费bus回酒店,准备抓拍一张,结果,对不起啊… 真的是美女的啊

吉隆坡的轻轨和旅游地图

吉隆坡轻轨全图,价钱便宜量又足! 基本上RM3到处都能ok

每个站都有自己的名字,例如Ampang Park是KJ9站,Taman Bahagia是KJ23站(去吃榴莲自助餐)

旅游地图

图片来至于 VisionKL

云顶

云顶其实是个赌场,但我去的目的是缆车

首先,响彻云霄的Bus,随便拦了一台,RM1到轻轨站. 吉隆坡的Bus没路线图,站台也没有,真是服了的

轻轨站的自助买票机(人工不售票,次偶),2种语言,没影响

车上怎么没什么人呢?难道我们太早了?窃喜中…

全自动驾驶,车很短,3节车厢,班次很密,2分钟不到就一班车, Ampang Park与KL Sentral之间的轻轨线是底下了,其他都地上站

除了轻轨站,一个讲中文的大叔前来搭讪,RM上云顶,原本想着不赖嘛,本来就是RM30,但一说缆车今天停了,次偶,我XXXXXXXXXX

连缆车停运都被我赶上了… 怪不得没人啦!!

哎,算了,还是买票去看看不动的缆车吧,结果,一算,RM10搞定,次偶,大叔想坑我RM50!!!

缆车没坐成,那只好去其他景点了,下山依然是大bus,时速90km/h不减速,各种急弯,上山已经吓得半死,下山就真吓死了,过弯不减速有没有,会车不减速,有没有?!!

独立广场和回教堂

回教堂就是Masjid Jamak站(KJ13),出来就奔麦当劳,结果,依然失望!! 小鸣鸣倒是吃得很欢乐,传说中的薯条嘛

回教堂

独立广场的马来西亚国旗,号称100米高

然后瞄了瞄吉隆坡的城市模型

马来西亚最高法院

榴莲啊榴莲

按网上攻略,直奔Taman Bahagia轻轨站(KJ23),出站就有一堆taxi在等,挑了台比较新的,RM15送达

来,上图!! RM9,吃到饱!

吃啊吃

吃饱之后,买了3公斤的山竹,RM10有交易,就是蚂蚁很多

路边拦了辆Taxi,RM7送到轻轨站(次偶,咋便宜一半呢?原来不是同一个站),是Taman Parament站(KJ22),荒芜好多

站内的路线牌

小小的车厢

旁边坐的都是穆斯林,不好意思拍照了

晚餐,自己来!

受不了马来西亚各种新奇的口味,还是自己煮了吧!

餐前水果,黄肉西瓜和蓝莓

鸡翅面条乌冬,还有大大的果汁

早餐?把剩下的食材解决掉

微波炉,电磁炉,冰箱,刀叉碟筷子,全用遍了

LCCT的Taxi

在前台花了10秒钟就退房了,光速啊,然后工作人员喊价RM100到LCCT,貌似很超值啊,便宜了RM20

来个为黑皮肤的Taxi司机,超级能聊

由于是4点的飞机,当时才12点不到,就载我们去购物点了,纯自愿,估计他也能收点返点吧

号称马来西亚最大的巧克力工厂,门外清一色的旅游大巴,全写着XX旅行社,果然是中国水鱼必到的购物点

最后,下车的时候,司机说,其实他只能拿到RM70(次偶,酒店白赚RM30!!),同情心来了,RM5消费送上,拍照之(太模糊,坑爹的手机)

亚航的skybus,果断赶过他啦

LCCT出发大厅

菜市场不等于差,其实也是便宜的代名词啦,简单但指示牌很清晰

瞄瞄电视机,S18办理登记手续,托运行李,才26kg,我可买了55kg,严重严重浪费啊

出境,边检,竟然把我的山竹也过机,哦也,很自觉地在候机室吃完,不带上飞机

候机室离最近的飞机不到50米,不时可以看到飞机经过…

到点登机,走好长好长的路… 热浪滚滚,都快烤熟了

怎么是蓝色的?!坐错飞机了??? 马来西亚航空的飞机,空姐还是亚航的,放心了

准点起飞,真正看到了排队起飞…

由于还有多余的马来西亚币,买了额外的飞机餐,味道… 哎…

X11的xcb库卡死

2013-05-23 12:00:00 +0800

一个多月没写blog,郁闷了…

X11的xcb库(1.7版)在不知道神马情况下会卡死

操作系统: opensuse 11.4 x86 语言: Qt 4.8.4,vdpau + Nv卡

症状: 在多线程下,调用vdpau_create_decoder会卡住

堆栈:

#0  0xffffe424 in __kernel_vsyscall ()
#1  0xb43dc03e in __poll (fds=0xa5d15798, nfds=1, timeout=-1) at ../sysdeps/unix/sysv/linux/poll.c:87
#2  0xb1cc63f0 in _xcb_conn_wait (c=0x80f0b58, cond=0xa5d157f0, vector=0x0, count=0x0) at xcb_conn.c:313
#3  0xb1cc7d4f in xcb_wait_for_reply (c=0x80f0b58, request=13576, e=0xa5d1587c) at xcb_in.c:379
#4  0xb4213f92 in _XReply (dpy=0x80ffdb0, rep=0xa5d158bc, extra=0, discard=1) at xcb_io.c:533
#5  0xb0698032 in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#6  0xb061715b in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#7  0xb06174b7 in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#8  0xb064dddb in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#9  0xb067dbef in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#10 0xb063b645 in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#11 0xb061a423 in ?? () from /usr/lib/vdpau/libvdpau_nvidia.so.1
#12 0x0806d123 in mx::create_decoder (vdp=0x81f37f0, w=1920, h=1080, decoder=0x8235810) at ../../src/disp/xde_res_vdpau.cpp:79

最初,我猜是这个bug的原因

(Thread hangs in xcb_wait_for_reply() if another thread calls xcb_poll_for_event())[https://bugs.freedesktop.org/show_bug.cgi?id=40372]

看着bug的意思,是不正确的使用xcb库,但,我XXX, 那是驱动调用的,我哪知道呢…

按部就班修改了一下,测试,继续死… 我XXXX!!

好吧,换驱动

换最新的310系列,依然死,我XXXXXX

看来是bug,但怎么解决呢?

还是回到堆栈去, 卡死在xcb_wait_for_reply方法上,而这个方法有这样一句

378         while(!poll_for_reply(c, request, &ret, e)) {
379             if(!_xcb_conn_wait(c, &cond, 0, 0)) {
380                 break;
381             }
382             count ++; // 所以我加上下面几个逻辑,强制break,看看死不死
383             if ( count > 1000 ) {
384                 printf("Loop more than 1000 times, break");
385                 break;
386             }
387         }

结果,还是死….

看来要釜底抽薪啦,从最底层的api给跳出来

从第1帧来灭掉它

#1  0xb43dc03e in __poll (fds=0xa5d15798, nfds=1, timeout=-1) at ../sysdeps/unix/sysv/linux/poll.c:87

这一帧调用linux标准的poll方法,但timeout传入的是-1,即永久等待.

反正不知道神马原因,就是没等到触发条件,卡住了, SO,妹的,改成1秒吧!!

代码如下:

312 #if USE_POLL
313         ret = poll(&fd, 1, 1000);
314 #else
315         ret = select(c->fd + 1, &rfds, &wfds, 0, 0);
316 #endif

编译,重启, 测试, 竟然好了,我XXX,但为什么呢? 不知道呢… 反正没再死了…

mark一下gdb常用命令

gdb -p $pid        直接attach到正在运行的程序中

set height 0       显示时,不分页
info threads       显示所有线程
thread 3           切换到3号线程
bt                 显示当前线程的堆栈
f 2                调到第二帧
c                  继续运行
Ctrl+C             中断运行,进行gdb交互模式
info locals        打印全部本地变量
print fd           打印名为fd的变量的值

在windows下编译nginx

2013-04-12 12:00:00 +0800

又有人在windows下编译nginx – 为什么那么多人喜欢自残呢?

官网教程

Building nginx on the Win32 platform with Visual C

本文基本上就是对着做,但需要对其进行微调 – 不爽吗?咬我啊!!

准备工具

系统: winxp sp3 32位, 例如你可以用个虚拟机什么的安装一个winxp

MSYS-CN 2010-08-19 更新版本

zlib 1.2.7

pcre 8.32

openssl 1.0.1e

VS2008 Express With SP1

Perl 5.16.3.1

Subversion 或者你喜欢的svn客户端

安装必要的程序

VS2008,附带的sqlserver无需安装,也用不上

Perl,一直下一步即可

Slik-Subversion,一直就是下一步

将MSYS-CN解压到C盘

下载源码

到C:\MSYS启动msys.bat,进入msys的bash

非常重要哦, 官网的tar包是不包含windows构建文件的!!

svn co svn://svn.nginx.org/nginx/tags/release-1.3.15
cd release-1.3.15
mkdir objs
mkdir objs/lib

然后, 把pcre/zlib/openssl的源码,均解压到C:\MSYS\home\UserName\release-1.3.15\objs\lib, 即上述语句所建立的文件夹,其中UserName是你的用户名.

生成构建脚本

依然在msys bash下.

cd release-1.3.15
auto/configure --with-cc=cl --builddir=objs --prefix= \
--conf-path=conf/nginx.conf --pid-path=logs/nginx.pid \
--http-log-path=logs/access.log --error-log-path=logs/error.log \
--sbin-path=nginx.exe --http-client-body-temp-path=temp/client_body_temp \
--http-proxy-temp-path=temp/proxy_temp \
--http-fastcgi-temp-path=temp/fastcgi_temp \
--with-cc-opt=-DFD_SETSIZE=1024 --with-pcre=objs/lib/pcre-8.32 \
--with-zlib=objs/lib/zlib-1.2.7 --with-openssl=objs/lib/openssl-1.0.1e \
--with-select_module --with-http_ssl_module --with-ipv6

语句比较长,可以写到build.bat中,然后执行 ./build.bat

编译

总有要编译啦,哇哈哈. 在开始菜单找VS2008的VS2008命令行,启动之

执行下面的语句

C:
cd \MSYS\home\UserName\release-1.3.15\
nmake -f objs/Makefile

你很快就会发现报错了,说找不到某某头文件.

用你喜欢的编辑器打开 C:\MSYS\home\UserName\release-1.3.15\objs\lib\pcre-8.32\config.h

找到并注释掉(加//):

#ifndef HAVE_INTTYPES_H
#define HAVE_INTTYPES_H 1
#endif

#ifndef HAVE_STDINT_H
#define HAVE_STDINT_H 1
#endif

然后再执行就成功了:

nmake -f objs/Makefile

好吧,祝你好运!!

C:\MSYS\home\Administrator\release-1.3.15>nginx.exe -V
nginx version: nginx/1.3.15-http://wendal.net
TLS SNI support enabled
configure arguments: --with-cc=cl --builddir=objs --prefix= --conf-path=conf/ng
nx.conf --pid-path=logs/nginx.pid --http-log-path=logs/access.log --error-log-p
th=logs/error.log --sbin-path=nginx.exe --http-client-body-temp-path=temp/clien
_body_temp --http-proxy-temp-path=temp/proxy_temp --http-fastcgi-temp-path=temp
fastcgi_temp --with-cc-opt=-DFD_SETSIZE=1024 --with-pcre=objs/lib/pcre-8.32 --w
th-zlib=objs/lib/zlib-1.2.7 --with-openssl=objs/lib/openssl-1.0.1e --with-selec
_module --with-http_ssl_module

Golang下通过syscall调用win32的api

2013-04-06 12:00:00 +0800

源于golang群中再次提到windows下获取磁盘空间的方法

由于golang的api并非完全跨平台, golang本身并没有直接提供windows下的方式

syscall.Syscall系列方法

当前共5个方法

syscall.Syscall
syscall.Syscall6
syscall.Syscall9
syscall.Syscall12
syscall.Syscall15

分别对应 3个/6个/9个/12个/15个参数或以下的调用

参数都形如

syscall.Syscall(trap, nargs, a1, a2, a3)

第二个参数, nargs 即参数的个数,一旦传错, 轻则调用失败,重者直接APPCARSH

多余的参数, 用0代替

调用示例

获取磁盘空间

//首先,准备输入参数, GetDiskFreeSpaceEx需要4个参数, 可查MSDN
dir := "C:"
lpFreeBytesAvailable := int64(0) //注意类型需要跟API的类型相符
lpTotalNumberOfBytes := int64(0)
lpTotalNumberOfFreeBytes := int64(0)

//获取方法的引用
kernel32, err := syscall.LoadLibrary("Kernel32.dll") // 严格来说需要加上 defer syscall.FreeLibrary(kernel32)
GetDiskFreeSpaceEx, err := syscall.GetProcAddress(syscall.Handle(kernel32), "GetDiskFreeSpaceExW")

//执行之. 因为有4个参数,故取Syscall6才能放得下. 最后2个参数,自然就是0了
r, _, errno := syscall.Syscall6(uintptr(GetDiskFreeSpaceEx), 4,
            uintptr(unsafe.Pointer(syscall.StringToUTF16Ptr("C:"))),
            uintptr(unsafe.Pointer(&lpFreeBytesAvailable)),
            uintptr(unsafe.Pointer(&lpTotalNumberOfBytes)),
            uintptr(unsafe.Pointer(&lpTotalNumberOfFreeBytes)), 0, 0)
            
// 注意, errno并非error接口的, 不可能是nil
// 而且,根据MSDN的说明,返回值为0就fail, 不为0就是成功
if r != 0 {
    log.Printf("Free %dmb", lpTotalNumberOfFreeBytes/1024/1024)
}

简单点的方式? 用syscall.Call

跟Syscall系列一样, Call方法最多15个参数. 这里用来Must开头的方法, 如不存在,会panic.

    h := syscall.MustLoadDLL("kernel32.dll")
    c := h.MustFindProc("GetDiskFreeSpaceExW")
    lpFreeBytesAvailable := int64(0)
    lpTotalNumberOfBytes := int64(0)
    lpTotalNumberOfFreeBytes := int64(0)
    r2, _, err := c.Call(uintptr(unsafe.Pointer(syscall.StringToUTF16Ptr("F:"))),
        uintptr(unsafe.Pointer(&lpFreeBytesAvailable)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfBytes)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfFreeBytes)))
    if r2 != 0 {
        log.Println(r2, err, lpFreeBytesAvailable/1024/1024)
    }

小提示

传struct不是个好想法, 不同语言之间的差异不好磨合

Python还是很适合快速开发的

2013-03-25 12:00:00 +0800

上周为了重写公司的其中一个关键进程,断然选用Python快速开发了一版

首先,是启动器

虽然python脚本可以直接启动,但为了兼容其他进程,需要封装成一个原命名的进程

#include <Python.h>
#include <sched.h>

int main(int argc, char *argv[]) {
    //设置进程优先级,因为有其他更重要的进程
    nice(10);
    // 设置cpu亲和性,因为是4线程的机器,所以仅亲和后2个cpu
    cpu_set_t  mask;
    CPU_ZERO(&mask);
    CPU_SET(2, &mask);//第3个
    CPU_SET(3, &mask);//第4个,其实就是第二个core
    sched_setaffinity(0, sizeof(mask), &mask);

    Py_SetProgramName(argv[0]);
    Py_Initialize(); //标准的啦,初始化Python环境
    PySys_SetArgv(argc, argv);
    FILE * fp = fopen("/home/xxx/yyy/zzz.py", "r"); //打开入口py脚本的句柄,准备打开
    // 这里并没有去判断是否真的存放,因为必须存放,不然也什么都做不了
    //PyRun_SimpleFile(fp, "zzz.py");
    PyRun_AnyFile(fp, "zzz.py"); //启动之,哈哈
    Py_Finalize(); // 严格来说从不调用,哈哈,因为是守护进程,退出的话,都是直接退
    return 0;//符合标准C嘛,哈哈
}

编译之

gcc -O2 -I/usr/include/python2.7 -lpython2.7 -MD -MT -pthread -ldl zzz.c -o zzz

需要带上-pthread和-dl等参数,否则可能无法加载模块

python代码部分

把路径添加进去,防止找不到py文件

import sys
sys.path.append("/home/xxx/yyy")

接下来的,自然就是业务逻辑了

话说,最近耗子哥跟百毒闹得很欢哦,哈哈

Golang的坑之http读取大文件必须读完

2013-03-16 12:00:00 +0800

先上代码

package main

import (
    "fmt"
    "net/http"
)

func main() {
    resp, err := http.Get("http://mirrors.ustc.edu.cn/opensuse/distribution/12.3/iso/openSUSE-12.3-GNOME-Live-i686.iso")
    if err != nil {
        panic(err)
    }
    fmt.Println("Resp code", resp.StatusCode)
    resp.Body.Close() // 注意,这里并不读取resp.Body, 而resp.Body有大概700mb未读取
}

你猜会怎样呢? 卡住了?!

如果你的网速够快,你会发现, 几十秒之后, 程序自动退出了,但如果你很不幸是小水管,你会发现一直卡住…

原因是啥呢?

http包默认会重用连接,重用连接就需要先把前一个连接的数据读完

代码片段(net/http/transfer.go)

func (b *body) Close() error {
    if b.closed {
        return nil
    }
    defer func() {
        b.closed = true
    }()
    if b.hdr == nil && b.closing {
        return nil
    }
    
    if b.res != nil && b.res.requestBodyLimitHit {
        return nil
    }

    // 操,问题就在这了,读完整个body!!
    if _, err := io.Copy(ioutil.Discard, b); err != nil {
        return err
    }
    return nil
}

怎么解决呢?

按上面代码片段的逻辑, 需要提前返回nil,从而避免被读取

    // b.hdr 总是为nil,因为从不设置
    // 那b.closing什么时候为true呢?
    if b.hdr == nil && b.closing {
        return nil
    }

读源码可知, b.closing依赖于transferReader的Close值

而transferReader的Close值, 是根据shouldClose方法判断的

// 这里的header是resp的
func shouldClose(major, minor int, header Header) bool {
    if major < 1 {
        return true
    } else if major == 1 && minor == 0 {
        if !strings.Contains(strings.ToLower(header.Get("Connection")), "keep-alive") {
            return true
        }
        return false
    } else {
        // TODO: Should split on commas, toss surrounding white space,
        // and check each field.
        if strings.ToLower(header.Get("Connection")) == "close" {
            header.Del("Connection")
            return true
        }
    }
    return false
}

由于没法在这些代码之前修改resp的header,所以修改req的header,使服务器总是返回Connection: close

最终代码

package main

import (
    "fmt"
    "net/http"
)

func main() {
    req, _ := http.NewRequest("GET", "http://mirrors.ustc.edu.cn/opensuse/distribution/12.3/iso/openSUSE-12.3-GNOME-Live-i686.iso", nil)
    req.Header.Set("Connection", "close")
    resp, err := http.DefaultClient.Do(req)
    if err != nil {
        panic(err)
    }
    fmt.Println("Resp code", resp.StatusCode)
    resp.Body.Close()
}

一个月没写blog了, 心情欠佳+身体抱恙 ~_~ 哎,多事的3月

2013年4月5号更新

coocood提醒到, go1.1有个新的API来完成这个蛋碎的东西

http.DefaultTransport.(*http.Transport).CancelRequest(req)

如果不是默认的DefaultTransport,就找你自己set的Transport吧

天语T619也能Root

2013-02-16 12:00:00 +0800

昨天,小黄蜂终于到手 – 广东移动周销售1.4w台的299元廉价机

玩了一天,还是忍不住要root掉的. 实在无法忍受那些百度的app!!!

但,官方固件在哪里呢?

官网,木有常见论坛,木有

最后,在592zn找到了天语T619官方固件+592zn带ROOT固件

接下来,当然是root固件啦: 用yaffey 修改好,刷机,搞定!!

接下来,就是各种删除,哈哈

刷机步骤

安装驱动(文章末尾有地址),会提示签名无效,一概接受.(win7 x64需要重启系统,按F8进高级选项,选禁用驱动签名)
手机关机,按住”音量减”,接入USB线,出现驱动安装就可放手.待驱动安装完毕,拔掉USB线
打开刷机工具,载入官方固件

根据图中的路径,找到system.img文件,将root好的system.img覆盖上去
刷机软件按”Start”, 手机按住”音量减”,接入USB线,应该很快就开始刷机,一旦开始刷机,就可以松手

刷机固件及资源

百度云,Wendal的T619专用文件夹

我的T619是1月27号生产的, 软件版本(设置-关于手机,最底下)是 TBT960230_8514_V0101

据说T619有N个版本,不能通刷… 如果没有更加可靠的官方版本,以后就只能玩这版了,呵呵

声明

刷机有风险,官方固件常备哦!!

Gor 2.1 发布了

2013-02-15 12:00:00 +0800

重要改进

脱离了libyaml引入的cgo限制, 使用纯golang实现, 实现真正的跨平台

下载地址已编译好的linux/windows/macx下的二进制程序

当然, 也可以通过go install来安装

go get -u github.com/wendal/gor
go install github.com/wendal/gor/gor

ChangeLog

Update: goyaml2 v2.0 纯golang实现的yaml解析器,兼容部分yaml语法(常用的部分)
Update: mustache v2.0 纯golang实现的mustache模板引擎
Add: 同时支持yaml与json格式的配置文件及meta数据
Add: 对自定义partials的支持
Add: 对自定义widget的支持 6: Add: 更换markdown引擎,支持github形式的markdown格式
Fix: 引用不存在的layout会NPE
Fix: Post元数据与widget可能冲突

项目地址: Gor@github

哈哈,终于能在真正跨平台了!!

获取goroutine的id

2013-02-05 12:00:00 +0800

获取goroutine的id? 官方不支持的!!

人家官方说了:

"This, among other reasons, to prevent programmers 
for simulating thread local storage using the goroutine id as a key. "

就为了避免咱们当成ThreadLocal的key!! 这是为了神马?为神马?!!

方法还是有的嘛,改动一下源码

神马?!改源码这么大件事?! 对的,但只是添加,不修改不覆盖,不影响其他功能

文件一, $GOPATH/src/pkg/runtime/runtime.c, 在最后面添加一个方法

void
runtime·GetGoId(int32 ret)
{
        ret = g->goid;
        USED(&ret);
}

文件二, $GOPATH/src/pkg/runtime/extern.go 在最后面导出这个方法

func GetGoId() int

然后,就是重新编译golang了

cd $GOROOT/src
./make.bash

好了,测试一下吧

写一个main.go

package main

import "fmt"
import "runtime"

func main() {
        fmt.Println("Id =", runtime.GetGoId())
}

编译并运行之

go run main.go

结果是

Id = 1

恩,暴力到此结束哦,保重啦各位…

在Linux下安装Cuda5

2013-01-30 12:00:00 +0800

所有操作均为root用户.

安装环境

系统环境: Ubuntu 11.10 Desktop 32位硬件环境: Nvidia GT540M 注意!! 虚拟机是不行的!!

下载cuda

wget http://developer.download.nvidia.com/compute/cuda/5_0/rel-update-1/installers/cuda_5.0.35_linux_32_ubuntu11.10-1.run
#当然,我更喜欢用QQ旋风之类的先下载好
#无需额外下载显卡驱动, cuda 5.0已经包含了最适合的显卡驱动

安装必要的库

apt-get install g++ gcc make freeglut-dev vim

切换到控制台

service stop lightdm
#立马会退出桌面,黑乎乎的控制台背景就出来了
#按 Ctrl+Alt+F2, 切换到第2控制台
#使用root登陆

第一次安装(自动配置环境的阶段)

#假设你已经把安装文件准备好了
chmod a+x /cuda_5.0.35_linux_32_ubuntu11.10-1.run
bash /cuda_5.0.35_linux_32_ubuntu11.10-1.run
#按空格键看完授权书
#按提示输入accept/y等同意,严重建议不要修改安装路径

#第一次安装,会报错,要求重启机器

#!!!!重启后再重复上述步骤,即第二三次安装,哈哈!!!

第二次安装(安装驱动及cuda sdk)

#如无意外(缺库之类的),会提示安装驱动成功,安装cuda成功,但安装samples失败
bash /cuda_5.0.35_linux_32_ubuntu11.10-1.run

#配置环境变量
export PATH=$PATH:/usr/local/cuda/bin

#修改ldconfig配置
vim /etc/ld.so.conf.d/cuda.conf
#加入 /usr/local/cuda/lib
#保存,执行使其生效
ldconfig

第三次安装(安装samples)

#再运行一次安装程序
bash /cuda_5.0.35_linux_32_ubuntu11.10-1.run

测试samples了

cd /usr/local/cuda/samples
cd 1_Utilities/deviceQuery
make

#如果出错,执行下面的语句即可查询当前GPU的信息
./deviceQuery

原本期望CUDA 5.0会为Linux加入Video Encode,结果,再次失望了…

一个神奇的周末

2013-01-27 12:00:00 +0800

周六,重写了新版的NutJson的前解析器

Nutz.Json的解析器分2部分, String->MapList, MapList->Pojo

单纯对一个简单的json字符串执行String->Map操作

改造前(3~4x)

Nutz-Json 500w次耗时: 14288
Fast-Json 500w次耗时: 4330
Nutz-Json 500w次耗时: 12336
Fast-Json 500w次耗时: 3029

改造后(1.3~1.6x)

Nutz-Json 500w次耗时: 6033
Fast-Json 500w次耗时: 4618
Nutz-Json 500w次耗时: 4717
Fast-Json 500w次耗时: 3048

当然,这只是String->Map的速度,String-Pojo依然有很大差距

更换了新的机械硬盘

最近,原装的机械硬盘经常出现开机找不到盘,休眠后找不到盘,甚至发展到使用过程中,忽然被卸载

为了避免数据丢失,果断购入新硬盘

接下来,必然是漫长的数据拷贝咯,使用了Ghost的disk2disk功能(哈哈,俺是正版用户–还是不忘”吹嘘”)

“别忽略那些偶发的出错”

周末发现一个公司系统中的bug,深藏不露,一直在寻找,一直没找到那种…

这算是一个很不错的教训.也让我重新思考ErrReport机制,即关注每个出错信息(使用计数器,Log记录器等手段),并尝试为其找到合理的解释,如果找不到,那就肯定是个bug了.

Golang的坑之DNS查询与系统线程

2013-01-23 12:00:00 +0800

这个问题源之于我3个月前开发的一个缓存服务

代理Http请求
缓存部分请求,减少外网访问

但是,在不稳定的网络环境下(例如3G网络),不时出现崩溃的情况

纠结啊纠结啊…

难道是因为我在32位系统下使用golang?
难道是RP问题?

出错信息非常长(几百~上千个goroutine),就只贴头尾

runtime/cgo: pthread_create failed: Resource temporarily unavailable
SIGABRT: abort
PC=0xffffe424


goroutine 1 [chan receive]:
net.(*pollServer).WaitRead(0xd0170f0, 0xd02e850, 0xcfff5e0, 0xb)
    /opt/go/src/pkg/net/fd.go:268 +0x75
net.(*netFD).accept(0xd02e850, 0x80923d3, 0x0, 0xcfc0320, 0xcf7b178, ...)
    /opt/go/src/pkg/net/fd.go:622 +0x199
net.(*TCPListener).AcceptTCP(0xd030358, 0xcfc0d20, 0x0, 0x0)
    /opt/go/src/pkg/net/tcpsock_posix.go:320 +0x56
net.(*TCPListener).Accept(0xd030358, 0x0, 0x0, 0x0, 0x0, ...)
    /opt/go/src/pkg/net/tcpsock_posix.go:330 +0x39
net/http.(*Server).Serve(0xd0170c0, 0xcfff920, 0xd030358, 0x0, 0x0, ...)
    /opt/go/src/pkg/net/http/server.go:1029 +0x77
net/http.(*Server).ListenAndServe(0xd0170c0, 0xd0170c0, 0x40)
    /opt/go/src/pkg/net/http/server.go:1019 +0x9f
net/http.ListenAndServe(0x81f73c4, 0x5, 0xcfff840, 0xd0301f8, 0xd0301f8, ...)
    /opt/go/src/pkg/net/http/server.go:1091 +0x55
    
尾部
eax     0x0
ebx     0x231f
ecx     0x2357
edx     0x6
edi     0xb77ceff4
esi     0xb
ebp     0xafa112f8
esp     0xafa11050
eip     0xffffe424  //就这个,虽然不知道是什么,但很厉害的样子
eflags  0x202
cs      0x73
fs      0x0
gs      0x33

一直没找到原因

直至几天前,忽然灵机一动,难道是DNS的问题?

因为每次崩溃,总会带几个类似的goroutine

goroutine 1614 [syscall]:
net._C2func_getaddrinfo(0x87af730, 0x0)
    net/_obj/_cgo_defun.c:42 +0x32
net.cgoLookupIPCNAME(0xd20b36c, 0x1a, 0x0, 0x0, 0x0, ...)
    net/_obj/_cgo_gotypes.go:177 +0xe7
net.cgoLookupIP(0xd20b36c, 0x1a, 0x0, 0x0, 0x0, ...)
    net/_obj/_cgo_gotypes.go:223 +0x3d
net.cgoLookupHost(0xd20b36c, 0x1a, 0x0, 0x0, 0x0, ...)
    net/_obj/_cgo_gotypes.go:101 +0x43
net.lookupHost(0xd20b36c, 0x1a, 0x0, 0x0, 0x0, ...)
    /opt/go/src/pkg/net/lookup_unix.go:56 +0x3d
net.LookupHost(0xd20b36c, 0x1a, 0x0, 0x0, 0x0, ...)
    /opt/go/src/pkg/net/doc.go:10 +0x3d
net.hostPortToIP(0x81f6d58, 0x3, 0xd20b36c, 0x1f, 0x0, ...)
    /opt/go/src/pkg/net/ipsock.go:120 +0x183
net.ResolveTCPAddr(0x81f6d58, 0x3, 0xd20b36c, 0x1f, 0x0, ...)
    /opt/go/src/pkg/net/tcpsock.go:31 +0x37
net.resolveNetAddr(0x81f9c14, 0x4, 0x81f6d58, 0x3, 0xd20b36c, ...)
    /opt/go/src/pkg/net/dial.go:50 +0x35d
net._func_001(0xd4bf228, 0xd4bf230, 0xd4bf238, 0xd4bf240, 0x0, ...)
    /opt/go/src/pkg/net/dial.go:134 +0x44
created by net.DialTimeout
    /opt/go/src/pkg/net/dial.go:142 +0x13b

So,做了一个简单的DNS Cache,在执行net.Dail前,先自行解析域名

结果,在虚拟机上,模拟各种垃圾网络(断网,拔网线,拔路由器…),没有再出现崩溃

原因是什么呢?

看我10月份发送到讨论组的邮件 runtime/cgo: pthread_create failed: Resource temporarily unavailable

待我解决问题后,马上有人解释原因了(汗… 为啥之前就没人回复呢? 问得太次?)

关键就是: 系统调用阻塞时大量生成内核级线程导致的, 而cgo启用的情况下, 每一次DNS查询,都会起动一个系统线程!

我只能说,你妹啊!! 系统线程啊!! 难道就不能弄个线程池啊!! 再说,有pthread_cancel啊,为啥timeout不执行一下呢?!

写着写着, 忽然回想起之前遇到的一个情况,就是http.Get不返回(一直卡着,不往下执行),现在想起来,99%也是DNS的问题

Golang的坑之文件覆写

2013-01-16 12:00:00 +0800

在Java/Python中, 文件打开后,默认是覆写,但golang默认是不覆盖的

最初以为这些代码会”无则创建,有则覆盖”

f, err := os.OpenFile(dst, os.O_WRONLY|os.O_CREATE, os.ModePerm)

这样得到f, 如果不执行

f.Truncate(0)

就f.Write就只是覆盖当前位置的内容,并不会截断文件.

事实上需要这样写

f, err := os.OpenFile(dst, os.O_WRONLY|os.O_TRUNC|os.O_CREATE, os.ModePerm)

Golang下进行字符集转换

2013-01-15 12:00:00 +0800

演示一下gb2312转UTF8

源网页是国家地震局的一周内地震统计,编码是gb2312

package main

import (
    iconv "github.com/djimenez/iconv-go"
    "io/ioutil"
    "log"
    "net/http" 
)

func main() {
    log.SetFlags(log.LstdFlags | log.Lshortfile)
    resp, err := http.Get("http://data.earthquake.cn/datashare/globeEarthquake_csn.html")
    if err != nil {
        log.Fatal(err)
    }
 
    defer resp.Body.Close()
    input, err := ioutil.ReadAll(resp.Body)
    out := make([]byte, len(input))
    out = out[:]
    iconv.Convert(input, out, "gb2312", "utf-8")
    ioutil.WriteFile("out.html", out, 0644)
}

Gor--极快的静态博客引擎

2013-01-11 12:00:00 +0800

1秒编译200篇文章

Gor的速度极快哦, 编译本网站200篇文章仅需1秒!

为什么写Gor?

Gor源于对ruhoh的不满

依赖一大堆东西
ruby编写,看不懂
速度慢, 需要10秒以上
gor在很多方面就是ruhoh for golang版

Gor跟jekyll/octopress 有啥不同

模板引擎不一样, gor/ruhoh使用mustache模板,更易懂易写
gor更快,必须的

Gor有啥缺陷?

刚起步,还不够成熟
因为基于golang,插件机制比较弱
在windows下还不能很好地工作

Gor使用了些神马golang的第三库

markdown, 负责将markdown转为html
mustache库,wendal自行实现,实现大部分mustache语法(官方版实在太烂)
当前依赖goyaml库,负责解析配置文件和元数据,将来会实现一个纯go的版本

基本用法

建立新站点(无需联网)

gor new wendal.net
cd wendal.net

新建一篇文章

gor post "Hi,Gor"

编译

gor compile

预览编译结果

gor http

然后,打开你浏览器,访问 http://127.0.0.1:8080

Nutz福利之轻功

2013-01-08 12:00:00 +0800

作为挨踢人士,翻过伟大的强,总是那么频繁,Nutz新年福利之轻功,提供给大家一个免费的途径,方便大家访问讨论组,查找技术文章…

连接服务器(Linux下)

ssh -C -N -D 7070 nutz_xxxx@ci.wendal.net
#输入密码即可, nutz_xxxx即为你的账号

连接服务器(Windows下)

下载putty, 请使用官网地址,切勿使用所谓汉化版
启动putty, 填入域名
设置不启动shell及启用压缩
添加tunnel
返回到session, 按”Save”保存设置,然后点击Open,启动连接,输入密码即可

然后就是浏览器设置了

Chrome用户,安装ProxySwitcher, 使用127.0.0.1端口7070, sockt5协议
Firefox用户, 安装AutoProxy,选择ssh -D配置
IE,貌似IE对sockt5支持得不太好,不推荐

祝各位Nutzer轻功了得

Linux下通过CiscoAnyConnectVPN访问Windows远程桌面

2012-12-24 12:00:00 +0800

Cisco的AnyConnect产品,好多大公司都在用,但貌似木有官方的Linux客户端(如果你有,请提供链接,无比感谢)

首先,需要一个开源的客户端openconnect

#部分Linux发行版中有预编译版,但毕竟老
#应该也能用,没试过  yum install openconnect

wget ftp://ftp.infradead.org/pub/openconnect/openconnect-4.07.tar.gz
tar xvf openconnect-4.07.tar.gz
cd openconnect-4.07
./configure
make

得到编译好的openconnect后, 连接服务器

#root权限哦, 或者能添加tun的帐户也行
./openconnect vpn.wendal.net
#提示如下:
Attempting to connect to 124.99.99.99:443
SSL negotiation with vpn.wendal.net
Connected to HTTPS on vpn.wendal.net
GET https://vpn.wendal.net/
Got HTTP response: HTTP/1.0 302 Object Moved
SSL negotiation with vpn.wendal.net
Connected to HTTPS on vpn.wendal.net
GET https://vpn.wendal.net/+webvpn+/index.html
Please enter your username and password.
username: #输入帐户
password: #输入密码

#当然,你可以先指定user和password咯
./openconnect -u wendal -p wendal vpn.wendal.net

登陆成功后, 查看本地地址

ifconfig tun0

接下来,就是远程桌面了

#安装rdesktop
yum install -y rdesktop
./rdesktop -z win.wendal.net
#哈哈,你能看到界面了吗? 输入帐户密码就可以登陆了

#-z是压缩参数
#还可以指定用户名和密码实现自动登陆

看看成果

在Golang中获取系统的磁盘空间内存占用

2012-12-24 12:00:00 +0800

获取磁盘占用情况(Linux/Mac下有效)

import (
    "syscall"
)

type DiskStatus struct {
    All  uint64 `json:"all"`
    Used uint64 `json:"used"`
    Free uint64 `json:"free"`
}

// disk usage of path/disk
func DiskUsage(path string) (disk DiskStatus) {
    fs := syscall.Statfs_t{}
    err := syscall.Statfs(path, &fs)
    if err != nil {
        return
    }
    disk.All = fs.Blocks * uint64(fs.Bsize)
    disk.Free = fs.Bfree * uint64(fs.Bsize)
    disk.Used = disk.All - disk.Free
    return
}

获取内存占用

import (
    "runtime"
)

type MemStatus struct {
    All  uint32 `json:"all"`
    Used uint32 `json:"used"`
    Free uint32 `json:"free"`
    Self uint64 `json:"self"`
}

func MemStat() MemStatus {
    //自身占用
    memStat := new(runtime.MemStats)
    runtime.ReadMemStats(memStat)
    mem := MemStatus{}
    mem.Self = memStat.Alloc

    //系统占用,仅linux/mac下有效
    //system memory usage
    sysInfo := new(syscall.Sysinfo_t)
    err := syscall.Sysinfo(sysInfo)
    if err == nil {
        mem.All = sysInfo.Totalram * uint32(syscall.Getpagesize())
        mem.Free = sysInfo.Freeram * uint32(syscall.Getpagesize())
        mem.Used = mem.All - mem.Free
    }
    return mem
}

后记

很明显,Windows下的支持是最弱的, 当然,还能通过调用win32 API的方式获取缺失的信息
Golang的API并非完全跨平台, 正如上述的syscall.Statfs_t结构体,在Windows下是没有的

2013年4月6号更新,windows下获取磁盘空间的方法

通过调用win32 api

func main() {
    kernel32, err := syscall.LoadLibrary("Kernel32.dll")
    if err != nil {
        log.Panic(err)
    }
    defer syscall.FreeLibrary(kernel32)
    GetDiskFreeSpaceEx, err := syscall.GetProcAddress(syscall.Handle(kernel32), "GetDiskFreeSpaceExW")

    if err != nil {
        log.Panic(err)
    }

    lpFreeBytesAvailable := int64(0)
    lpTotalNumberOfBytes := int64(0)
    lpTotalNumberOfFreeBytes := int64(0)
    r, a, b := syscall.Syscall6(uintptr(GetDiskFreeSpaceEx), 4,
        uintptr(unsafe.Pointer(syscall.StringToUTF16Ptr("C:"))),
        uintptr(unsafe.Pointer(&lpFreeBytesAvailable)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfBytes)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfFreeBytes)), 0, 0)

    log.Printf("Available  %dmb", lpFreeBytesAvailable/1024/1024.0)
    log.Printf("Total      %dmb", lpTotalNumberOfBytes/1024/1024.0)
    log.Printf("Free       %dmb", lpTotalNumberOfFreeBytes/1024/1024.0)
}

或者更简单的版本

func main() {
    h := syscall.MustLoadDLL("kernel32.dll")
    c := h.MustFindProc("GetDiskFreeSpaceExW")
    lpFreeBytesAvailable := int64(0)
    lpTotalNumberOfBytes := int64(0)
    lpTotalNumberOfFreeBytes := int64(0)
    r2, _, err := c.Call(uintptr(unsafe.Pointer(syscall.StringToUTF16Ptr("F:"))),
        uintptr(unsafe.Pointer(&lpFreeBytesAvailable)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfBytes)),
        uintptr(unsafe.Pointer(&lpTotalNumberOfFreeBytes)))
}

在Golang中获取func的名称

2012-12-23 12:00:00 +0800

这个问题源之于群友SeanWu的一个提问

期望的效果

func ABC() {
}

func GetFuncName(fn func()) string {
    return //返回ABC
}

stackoverflow上的方法

链接

func GetFunctionName(i interface{}) string {
    return runtime.FuncForPC(reflect.ValueOf(i).Pointer()).Name()
}

分析

我曾经尝试这种写法

runtime.FuncForPC(reflect.ValueOf(i).Addr()).Name()

但func是不能执行Addr()的, 而

funcPc,_,_ := runtime.Caller(0)
runtime.FuncForPC(funcPc).Name()

只能在func被调用时才能获取到自身的名字

reflect.ValueOf(i).Pointer()

就是绕过了执行过程,直接通过PC值来获取Func对象,从而得到名字

Android中以root权限调用本地程序

2012-12-21 12:00:00 +0800

最近用到Android,需要执行一些本地程序,以前root机做过不少,但还没真正用Java代码调用过

今天,总算解决了

public static boolean runAsRoot(String cmd) {
    try {
        Process p = Runtime.getRuntime().exec("su");
        OutputStream out = p.getOutputStream();
        out.write((cmd + "\n").getBytes());
        out.flush();
        out.close();
        if (p.waitFor() == 0) {
            return true;
        }
        return false;
    } catch (Exception e) {
        return false;
    }
}

原理

前提,当然是你的机器已经root
所谓root过,就是能无限制地执行su
android上的su,就是改变当前进程的uid和gid,然后转为一个shell
上述代码就是先执行su,然后将所需命令传入这个”shell”来执行

在Linux下查看硬盘信息

2012-12-15 12:00:00 +0800

很简单,用hdparm程序就可以了

hdparm -i /dev/sda

/dev/sda:
hdparm: ioctl 0x304 failed: Inappropriate ioctl for device

Model=HSPS35L4U16GCJC0914                     , FwRev=20101212, SerialNo=AA20120906000000181
Config={ HardSect NotMFM Fixed DTR>10Mbs }
RawCHS=16383/16/63, TrkSize=0, SectSize=576, ECCbytes=0
BuffType=(2) DualPort, BuffSize=1kB, MaxMultSect=1, MultSect=?0?
CurCHS=16383/16/63, CurSects=16514064, LBA=yes, LBAsects=30932992
IORDY=on/off, tPIO={min:120,w/IORDY:120}, tDMA={min:120,rec:120}
PIO modes:  pio0 pio1 pio2 pio3 pio4
DMA modes:  mdma0 mdma1 mdma2
UDMA modes: udma0 udma1 udma2
AdvancedPM=no WriteCache=enabled
Drive conforms to: Unspecified:  ATA/ATAPI-7

* current active mode

不得不提一下万能的busybox,竟然也包含hdparm

./busybox-i686 hdparm -i /dev/sda

看来以后找小工具,先看看busybox带不带才行,嘿嘿

./busysbox-i686

BusyBox v1.20.0 (2012-08-22 21:37:17 CDT) multi-call binary.
Copyright (C) 1998-2011 Erik Andersen, Rob Landley, Denys Vlasenko
and others. Licensed under GPLv2.
See source distribution for full notice.

Usage: busybox [function] [arguments]...
    or: busybox --list[-full] //列出全部小工具
    or: busybox --install [-s] [DIR] //安装到指定文件夹
    or: function [arguments]... //直接调用小工具

        BusyBox is a multi-call binary that combines many common Unix
        utilities into a single executable.  Most people will create a
        link to busybox for each function they wish to use and BusyBox
        will act like whatever it was invoked as.

Currently defined functions:
    [, [[, acpid, add-shell, addgroup, adduser, adjtimex, arp, arping, ash, awk, base64, basename, beep, blkid, blockdev, bootchartd, brctl,
    bunzip2, bzcat, bzip2, cal, cat, catv, chat, chattr, chgrp, chmod, chown, chpasswd, chpst, chroot, chrt, chvt, cksum, clear, cmp, comm,
    conspy, cp, cpio, crond, crontab, cryptpw, cttyhack, cut, date, dc, dd, deallocvt, delgroup, deluser, depmod, devmem, df, dhcprelay, diff,
    dirname, dmesg, dnsd, dnsdomainname, dos2unix, du, dumpkmap, dumpleases, echo, ed, egrep, eject, env, envdir, envuidgid, ether-wake, expand,
    expr, fakeidentd, false, fbset, fbsplash, fdflush, fdformat, fdisk, fgconsole, fgrep, find, findfs, flock, fold, free, freeramdisk, fsck,
    fsck.minix, fsync, ftpd, ftpget, ftpput, fuser, getopt, getty, grep, groups, gunzip, gzip, halt, hd, hdparm, head, hexdump, hostid,
    hostname, httpd, hush, hwclock, id, ifconfig, ifdown, ifenslave, ifplugd, ifup, inetd, init, insmod, install, ionice, iostat, ip, ipaddr,
    ipcalc, ipcrm, ipcs, iplink, iproute, iprule, iptunnel, kbd_mode, kill, killall, killall5, klogd, last, less, linux32, linux64, linuxrc, ln,
    loadfont, loadkmap, logger, login, logname, logread, losetup, lpd, lpq, lpr, ls, lsattr, lsmod, lsof, lspci, lsusb, lzcat, lzma, lzop,
    lzopcat, makedevs, makemime, man, md5sum, mdev, mesg, microcom, mkdir, mkdosfs, mke2fs, mkfifo, mkfs.ext2, mkfs.minix, mkfs.vfat, mknod,
    mkpasswd, mkswap, mktemp, modinfo, modprobe, more, mount, mountpoint, mpstat, mt, mv, nameif, nanddump, nandwrite, nbd-client, nc, netstat,
    nice, nmeter, nohup, nslookup, ntpd, od, openvt, passwd, patch, pgrep, pidof, ping, ping6, pipe_progress, pivot_root, pkill, pmap,
    popmaildir, poweroff, powertop, printenv, printf, ps, pscan, pstree, pwd, pwdx, raidautorun, rdate, rdev, readahead, readlink, readprofile,
    realpath, reboot, reformime, remove-shell, renice, reset, resize, rev, rm, rmdir, rmmod, route, rpm, rpm2cpio, rtcwake, run-parts, runlevel,
    runsv, runsvdir, rx, script, scriptreplay, sed, sendmail, seq, setarch, setconsole, setfont, setkeycodes, setlogcons, setserial, setsid,
    setuidgid, sh, sha1sum, sha256sum, sha512sum, showkey, slattach, sleep, smemcap, softlimit, sort, split, start-stop-daemon, stat, strings,
    stty, su, sulogin, sum, sv, svlogd, swapoff, swapon, switch_root, sync, sysctl, syslogd, tac, tail, tar, tcpsvd, tee, telnet, telnetd, test,
    tftp, tftpd, time, timeout, top, touch, tr, traceroute, traceroute6, true, tty, ttysize, tunctl, udhcpc, udhcpd, udpsvd, umount, uname,
    unexpand, uniq, unix2dos, unlzma, unlzop, unxz, unzip, uptime, users, usleep, uudecode, uuencode, vconfig, vi, vlock, volname, wall, watch,
    watchdog, wc, wget, which, who, whoami, whois, xargs, xz, xzcat, yes, zcat, zcip

busybox 是居家旅行,杀人灭口之必备武器,900k不到,却带了N种强大工具.

rm文件不再需要按y了,解脱啊

2012-12-14 12:00:00 +0800

终于解决了在某些linux下rm特定文件需要按y的问题

原因就是在alias

[root@MyVPS2923 ~]# alias
alias cp='cp -i'
alias l.='ls -d .* --color=tty'
alias ll='ls -l --color=tty'
alias ls='ls --color=tty'
alias mv='mv -i'
alias rm='rm -i'
alias which='alias | /usr/bin/which --tty-only --read-alias --show-dot --show-tilde'

再找根源

[root@MyVPS2923 ~]# cat ~/.bashrc
# .bashrc

# User specific aliases and functions

alias rm='rm -i'
alias cp='cp -i'
alias mv='mv -i'

# Source global definitions
if [ -f /etc/bashrc ]; then
    . /etc/bashrc
fi

注释掉那3行alias,保存,重新登录, 哦也, 世界清静了!!

Deploy Nutz as HttpAPI by Jetty 7

2012-12-13 12:00:00 +0800

将Nutz挂载到jetty上,作为HttpAPI

这里描述的,一个这样的web服务

不需要jsp
不需要静态资源,例如js/css
仅挂载一个NutFilter,不需要其他jar

实现

//新建一个Jetty Server,监听8080端口
Server server = new Server(8080); 
//创建一个Servlet容器,并映射在根路径
ServletContextHandler ctx = new ServletContextHandler();
ctx.setContextPath("/");

//加入默认Servlet或者空Servlet类,否则Filter类无法访问NutFilter
ctx.addServlet(DefaultServlet.class, "/*");
//设置Session容器,否则Session不可以(Nutz会使用Session容器)
ctx.setSessionHandler(new SessionHandler(new HashSessionManager()));

//创建Filter持有者,也就是挂载NutFilter
FilterHolder fh = new FilterHolder(NutFilter.class);
//传入必需的参数modules,你还可以传入ignore之类的参数
fh.setInitParameter("modules", "net.wendal.web.MainModule");
ctx.addFilter(fh, "/*", null);

server.setHandler(ctx);

//启动服务
server.start();

通过nutz-web来实现

// 创建一个web.properties,填入
app-root=.
app-port=8080
admin-port=8081
#mainModuleClassName这个参数请查阅最新的nutz-web代码
mainModuleClassName=net.wendal.web.MainModule

//启动代码
public static void main(String[] args) {
    org.nutz.web.WebLauncher.main(args);
}

nutz-web项目简介

一个Jetty封装,外加几个NutMvc的View, (项目地址)[http://github.com/nutzam/nutz]

ssh tunnel without shell

2012-12-10 12:00:00 +0800

IT人士,必备翻墙梯

在VPS创建无权限的用户

useradd -s /bin/false free2
passwd free2 #创建密码

在本地访问之

ssh -D 0.0.0.0:7070 -N -C free2@nutz.cn
#输入密码,就可以了

前提?当然是你有自己的VPS了

Reflect Of Golang

2012-11-30 12:00:00 +0800

正在重新实现mustache for golang

mustache作为模板引擎,必然需要用到反射啦
官方的实现,就一个go源文件,几百行,蛋碎
官方实现只返回一个string类型,出错就返回空字符串!!
原本打算在上面改的,结果还是算了,重新实现一个更好,现在已经完成60%
mustache from wendal

访问Map

// 这里的参数和返回值都用了reflect.Value,是因为这是最下层的实现
// 在此之上,我们可以封装为 Get(_map interface{}, key string)之类的形式
func GetMapValue(value reflect.Value, key reflect.Value) (rs reflect.Value) {
    //进行任何反射操作之前,判断其可用性很重要
    if !value.IsVaild() {
        return
    }
    //判断其真实类型
    //注意,这里的真实,是指最终的类型,例如
    // type AAA map[string]string, 那么仍会得到map,而非AAA
    // 如果想得到AAA,那么应该使用 value.Type().Name()或者全路径value.Type().String()
    if value.Type().Kind() != reflect.Map {
        return 
    }

    //reflect包很多方法都是针对具体类型的,不合乎就panic
    //例如MapIndex,如果value不是map,就直接panic了
    rs = value.MapIndex(key)
    return
}

访问数组/切片

// 在取值方法,数组和切片的规则是一样的,提供索引值即可
func GetArrayValue(value reflect.Value, index int) (rs reflect.Value) {
    if !value.IsVaild() {
        return
    }
    if value.Type().Kind() != reflect.Array ||
         value.Type().Kind() != reflect.Slice {
        return 
    }

    // value.Len()仅限于array和slice,map,string哦
    if 0 <= index && index < value.Len() {
        rs = value.Index(index)
    }
    return
}

访问结构体及其指针

// 这算是最复杂的了吧
// 这里演示一下把T和*T当成Map用,呵呵
// 也就是mustache模板引擎中Section节点
func GetStructValue(value reflect.Value, key string) (rs reflect.Value) {
    if !value.IsVaild() {
        return
    }
    if value.Type().Kind() == reflect.Ptr {
        //value.Elem()可以得到指针所指向的对象
        if value.Elem().Kind() != reflect.Struct {
            return
        }
    } else if value.Type().Kind() == reflect.Struct {
        return
    }

    //好了,来取Struct的Field吧!

    //首先,我们把*T还原为T
    //如果本来就是Struct,那么只是简单返回而已
    //指针类型是不能获取Field的
    v := reflect.Indirect(ctx.value)
    field := v.FieldByName(key)
    if field.IsValid() { //字段存在时返回true
        rs = field
        return
    }

    //接下来,看看有米有对应的Method
    //注意,如果是*T,那么全部方法都能拿到
    //如果是T,那么只能获取那些非指针的方法哦
    //我也很纠结这个,尝试突破但没有成功
    t := value.Type()
    method, ok := t.MethodByName(key)
    if !ok { //没找到
        return
    }

    //输入的参数必须为1,也就是当前value,当然,如果你知道其他参数,也可以是传参的,也就一个数组嘛
    //输出的参数不为0就好了,我们只需要取第一个
    if method.Func.Type().NumIn() != 1 || method.Func.Type().NumOut() == 0 {
        return  
    }
    //调用之
    rs = method.Func.Call([]reflect.Value{value})[0] //最后的[0]就是取第一个返回值
    return
}

总结一下

在任何reflect的func调用前,判断IsVaild
判断具体类型,然后再调用相应的反射方法,不然分分钟会panic
如果传入的是T,那么是无法访问指针类的方法的

Way of VPS

2012-11-25 12:00:00 +0800

VPS之路

从2009年5月份第一次购买VPS,已经3年多了. 尝试过超过5家的vps,最近换用80vps,但它能靠谱多久呢? 下一步,是不是独立服务器呢?

先说说vps

网速

香港机房,对于南方来说,显然是最快的
美国机房,西海岸的,对北方来说也很快
但购买之前,仅能通过ping测试ip的方式来判断, 我就是这样上了yardvps
yardvps的ping很快,貌似配置也给力,结果呢, 网络一段一段的,完全是废品级

IO性能

大部分VPS的IO,都能到30m/s
除了我遇到的某vps,IO性能烂到家, 有时候ls一下都要等2秒,能忍不?
一般来说, 多跑几次dd就知道IO性能了

软件环境

大部分VPS提供商都提供centos 5.x, 真正提供6.x系列的很少
我正在使用80vps的香港机房就不能用centos 6.x,颇为不爽
老内核, 尤其是glibc的版本太低,很多软件会安装不上,很是郁闷

虚拟化技术

除非是玩php,那么OpenVZ肯定是死刑
SunJDK在OpenVZ下是基本上启动不了,mongo也是…

客服

vpsee的印象挺好的,但自从网速慢如乌龟,客服的答复一概推到GFW身上
ctohome的客服很好,但是,机器实在太烂,多好的客服也白搭

罗列一下用过的vps

ctohome OpenVZ 美国机房,各方面都平平
vpsee Xen 美国机房,一起挺好的,用得最久的提供商,今年来网速实在太慢
yardvps Xen 美国机房,网络一断一断的,属于垃圾级
某vps Xen 美国机房,IO不给力,实在没法忍受
80vps Xen 香港机房,网速好(20ms,非常给力),但价钱贵,且不支持CentOS 6.x 更新: 已经支持了
80vps Xen 美国凤凰城机房,网速一般(170ms),价格够便宜(折合45/月), 峰值50M够给力

以后的计划, 独立服务器?

vps毕竟是多人分享,资源竞争是必然的
但,如果买那台相中的香港独立服务器,2年付送产品,要2w港币,实在不忍心…
好吧,再等等吧
干脆贴一下 80vps的推荐链接付费15天后,可以找我要回10%的费用, 相当于再9折

低调发布"短点"

2012-11-15 12:00:00 +0800

庆祝SB大的结束

访问网址

短点!

动机

现有的短地址服务,各种河蟹,各种验证码,各种墙,XXXXXXXXXXXX!!
只单独网址或文件,Wendal我极度不爽!!

用法

直接贴长网址,然后按”短点!“,即刻给你清爽的短地址
贴log,代码,长文章, 然后按”短点!“, 生成的网址有代码高亮哦
需要分享文件?直接将其拖入输入框,即刻自动开始上传,完成后即得到短地址

功能限制

文件及文本信息,上限10mb
不保证时效(国内的服务压根就没告诉你这个),因为是无备份机制
服务器总空间约15G,容量超标了我才会考虑删除老的记录

源码呢?

Wendal一向的风格, 猛击 (短点的源码)[https://github.com/wendal/shortit]
基于Nutz,并没有使用数据库,是文件系统来实现

从WordPress迁移到Ruhoh的经验

2012-11-07 12:00:00 +0800

预备工作

备份旧博客

备份mysql数据库中的wordpress数据
备份wordpress所在的目录

迁移评论

由于ruhoh是静态博客引擎,只能使用社会化评论系统了
wordpress的评论转到DISQUS最为方便, 到DISQUS注册好,wordpress安装插件,等待导入完成即可

导出并转换旧博客的文章

由于ruhoh只认markdown格式,需要将进行转换
在wordpress控制界面导出wordpress.xml

转换老文章

安装ruby,以Fedora 14为例

yum install libxml2-devel libtool gcc gcc-c++ make curl autoconf automake readline-devel
curl -L get.rvm.io | bash -s stable

安装Jekyll,因为要用到其转换脚本

gem install jekyll

下载转换脚本,并执行

wget https://gist.github.com/raw/1394128/cc8a3113c76ab51ea262da517db533e43e7e8c5c/wordpressdotcom.rb
ruby wordpressdotcom.rb wordpress.xml /tmp/output/
#少量文章会转换失败,记下来,需要手工导入

安装ruhoh

安装ruhoh和git,并测试一下是否可用

yum install git
gem install ruhoh
ruhoh help

建文件夹,拷贝已转的文章

mkdir -p /home/web/
cd /home/web
ruhoh new wendal.net
cp /tmp/output/*.xml wendal.net/posts/
cd wendal.net

编译一下,看看是否正常

ruhoh compile

清理自动转换的结果

为老文章修正为原本的wordpress permalink, 我原本的permalink是 /400.html

wget https://github.com/wendal/wendal.net/raw/master/tools/fix_wp_id_permalink.go   
go run fix_wp_id_permalink.go posts/     #这是一个golang小脚本

清理空行, 因为我发现自动转换后的文章带很多空行, 所以又写了一个脚本clean一下

wget https://github.com/wendal/wendal.net/raw/master/tools/cleanup_blank_line.go
go run cleanup_blank_line.go posts/

好了,清理完毕,再编译一次吧

ruhoh compile
find compiled/ #可以看到老文章全部都变回/450.html形式的文件名

设置DISQUS和google分析的账号,然后做些小配置

DISQUS的ID

vim widgets/comments/config.yml #填入你老博客的ID
#当文章的路径跟原博客中的路径相同,DISQUS就能无缝还原之前的屏幕

google分析的账号

vim widgets/analytics/config.yml #然后填入你自己的ID

关闭代码高亮的行号显示

vim widgets/google_prettify/config.yml #设置为false

修改首页,里面有些ruhoh的信息,删掉前面那部分即可

vim pages/index.html

将图片/附件,导入新博客

cp -r wp所在目录/wp-content/uploads/* media/

在文章中查找 http://博客域名/wp-content/uploads,替换为

\{\{ urls.media}} 并做适当的修正

修正文章中的错误排版 – 纯体力了

把导入失败的文章,按照markdown语法,手工转换为新格式

再编译一次吧

ruhoh compile

安装并配置nginx,实现平滑转换,减少坏链接

安装nginx,当然了,我建议自行编译

yum install nginx

修改nginx的配置文件,在将location / {} 替换为

\# 这里是原本的feed地址, ruhoh下叫做rss.xml,需要映射一下
location = /feed {
    root   /home/web/wendal.net/compiled;
    rewrite /feed /rss.xml;
}

\# 一起的分类目录,转到categories页面 -- 貌似不能直接跳到具体分类,原因不明
location /category/ {
    rewrite /category/(.+)/ /categories/#$1-ref permanent;
}

\# 之前的标签页,转到tags页面
location /tag/ {
    rewrite /tag/(.+)/ /tags#$1-ref permanent;
}

\# 直接指向compiled目录,并启用gzip,因为全是静态文件
location / {
    root   /home/web/wendal.net/compiled;
    gzip             on;
    gzip_min_length  1024;
    index  index.html index.htm;
    add_header Cache-Control "max-age=3600, must-revalidate";
}

启动nginx并测试之

/usr/local/nginx/sbin/nginx -t
/usr/local/nginx/sbin/nginx

#访问一下
curl -I http://127.0.0.1/

呵呵,你已经搞定了,用浏览器访问一下你的新博客吧!

Ruhoh,Now!

2012-11-06 12:00:00 +0800

正式转用Ruhoh静态博客引擎

wordpress贴code实在太痛苦,还要排版
由于生成的是静态html,再也不必用神马php,世界清净了

博客内容完整迁移

很早就转用DISQUS,所以全部评论都完整保留
博客文章,转为markdown格式后,使用fix_wp_id_permalink.go和cleanup_blank_line.go修正为原链接及清理空行
本网站的源码存在github的wendal.net库
前端使用nginx 1.2.4, 配合git hook实现自动更新(待完成)

启用80vps的香港机房,弃用vpsee

自从上传GFW发威, vpsee的机房就没快过
80vps的香港机房暂时看来还是很靠谱的,但峰值带宽只有1M
作为翻墙主要途径, vpsee的速度根本无法满足需求了

启用cdnzz,放弃cloudflare

自从使用cloudflare,总用人投诉说博客无法访问,甚为不爽
当前使用cloudflare,也就是因为vpsee太慢
cndzz收费,但1元/G,比较划算,按经验,每月流量也就2G

我做运维的那几个月

2012-10-31 11:28:43 +0800

怎么我觉得这题目这么俗呢? 好吧,将就着吧

肯定又有人骂了,wendal你不是做开发的吗?怎么又做运维了,你让不让人活啊?难道你公司就一个人?

话说,6月的最后一天,公司的someone说:“广州有几台机器需要修一下,要不你跑一趟?”,然后我答:“行啊,不就几台嘛”

然后,就开始了漫长的运维…

谁想到要去这么多趟呢?谁想到那么多机器会出问题呢?谁想到那么多地方的信号不好呢? 那叫一个郁闷和纠结啊

说说经验吧

1. 别跟硬件较劲,坏了就是坏了,你是修不好的

灰尘太多,风扇卡死,机柜密封不透气,电压不稳,漏水,小昆虫,老鼠 – 各种靠谱不靠谱的原因,导致各种各样的硬件损坏, 解决之道,唯有更换

最初硬是较劲,尝试fix各种不靠谱的问题,最近才发现很多都是硬件问题,浪费精力

2. 要精通各种网络连接方式(各种网络隧道,嘿嘿,就是翻V墙)

直接在大屏幕上看命令太不靠谱了,有时候还需要机器联网,让其他同事看

方法1: 设备–网线–笔记本电脑–共享3G连接, 然后配合VPN,即可让同事远程访问故障机

方法2: 设备–网线–笔记本电脑–Putty映射设备端口到远程服务器的某个端口,这样也可以让其他人访问到故障机

3. 尝试fix一个损坏的软件是不靠谱的

程序损坏,数据库数据错误,重新安装并导入数据,比尝试fix要快得多

4. 一次弄好,别太急了,弄不好就拿回家

遇到神奇的问题,一味尝试是没结果的,把设备带回家,网络好,什么都好,一会就搞定了

在windows下编译goexif

2012-10-20 11:28:21 +0800

纯go版:

go get github.com/rwcarlsen/goexif/exif

cgo版:

# 1. 下载libexif源码,获取头文件
# 2. 下载exif.dll, 记得下载cygwin下的版本, 直接google得到的版本不靠谱,版本太老
go get github.com/gosexy/exif

libexif-0.6.21

查找mysql中的低效索引

2012-10-11 09:39:38 +0800

从一个外国博客引用过来的

SELECT t.TABLE_SCHEMA AS `db`,
t.TABLE_NAME AS `table`,
s.INDEX_NAME AS `index name`,
s.COLUMN_NAME AS `FIELD name`,
s.SEQ_IN_INDEX `seq IN index`,
s2.max_columns AS `# cols`,
s.CARDINALITY AS `card`,
t.TABLE_ROWS AS `est rows`,
ROUND(((s.CARDINALITY / IFNULL(t.TABLE_ROWS, 0.01)) * 100), 2) AS `sel %`

FROM INFORMATION_SCHEMA.STATISTICS s
INNER JOIN INFORMATION_SCHEMA.TABLES t ON s.TABLE_SCHEMA = t.TABLE_SCHEMA AND s.TABLE_NAME = t.TABLE_NAME
INNER JOIN (
SELECT TABLE_SCHEMA, TABLE_NAME, INDEX_NAME, MAX(SEQ_IN_INDEX) AS max_columns
FROM INFORMATION_SCHEMA.STATISTICS
WHERE TABLE_SCHEMA != 'mysql' GROUP BY TABLE_SCHEMA, TABLE_NAME, INDEX_NAME ) AS s2 ON s.TABLE_SCHEMA = s2.TABLE_SCHEMA AND s.TABLE_NAME = s2.TABLE_NAME AND s.INDEX_NAME = s2.INDEX_NAME

WHERE t.TABLE_SCHEMA != 'mysql' /* Filter out the mysql system DB */
AND t.TABLE_ROWS > 10 /* Only tables with some rows */
AND s.CARDINALITY IS NOT NULL /* Need at least one non-NULL value in the field */
AND (s.CARDINALITY / IFNULL(t.TABLE_ROWS, 0.01)) < 1.00 /* unique indexes are perfect anyway */

ORDER BY `sel %`, s.TABLE_SCHEMA, s.TABLE_NAME /* DESC for best non-unique indexes */
LIMIT 10;

Windows下隐藏Golang的DOS黑色窗口

2012-10-07 09:45:59 +0800

纯属自己mark一下,其实就是编译为Windows GUI程序, 默认是Windows Console程序

go build -ldflags -Hwindowsgui XXX.go

参考文档 https://golang.org/cmd/ld/

续: 那怎么关掉这个程序呢?

可选方法: 在go代码中监听一个管理端口,用浏览器或telnet访问这个端口,就执行exit操作

Golang连接Oracle数据库(通过OCI库)

2012-10-06 11:17:54 +0800

这是我对mattn/go-oci8的一个fork https://github.com/wendal/go-oci8

在Linux下的安装,应该是没啥难度的了,唯独蛋疼的Windows需要介绍一下:

//假设的GOPATH指向C:\gohome
0. 执行 go get github.com/wendal/go-oci8 ,然后肯定是报错了,没关系,代码会下载下来.
1. 首先,你需要安装mingw到C:\mingw
2. 然后,到Oracle官网,下载OCI及其SDK,解压到instantclient_11_2  -- 当前最新版
3. 从我的go-oci8库的windows文件夹,拷贝pkg-config.exe到C:\mingw\bin\,拷贝oci8.pc到C:\mingw\lib\pkg-config\
4. 设置环境变量 PATH           ,值为     原有PATH;C:\instantclient_11_2;C:\mingw\bin;
5. 设置环境变量 PKG_CONFIG_PATH,值为     C:\mingw\lib\pkg-config
6. 接下来,就最重要的,就是再执行一次,这次应该能成功的:  go get github.com/wendal/go-oci8
7. 测试一下:
    cd %GOPATH%/src/github.com/wendal/go-oci8/example
    go run oracle.go
    #提醒一句, oracle.go里面的写的密码是system/123456, 实例名XE

视频演示

下载视频及编译环境

简单好用的sshfs -- 通过ssh映射远程路径

2012-09-26 08:52:25 +0800

最近习惯性访问N个Linux机器,在不同机器间跳来跳去,很是麻烦,最终,找到了sshfs,可以把远程目录直接映射到本地,无需修改远程机器的设置,仅要求有ssh连接的权限(ssh都没有的话,还能干啥?!~!)

官网地址: http://fuse.sourceforge.net/sshfs.html

安装:

#如果是ubuntu
apt-get install sshfs
#如果是Fedore
yum install fuse-sshfs
#如果是CentOS,貌似只能自己安装了
wget http://nchc.dl.sourceforge.net/project/fuse/sshfs-fuse/2.4/sshfs-fuse-2.4.tar.gz
tar xvf sshfs-fuse-2.4.tar.gz
cd sshfs-fuse-2.4
./configure
#如果缺glib2什么的,就自行装上
make install

先看看选项:

general options:
    -o opt,[opt...]        mount options
    -h   --help            print help
    -V   --version         print version

SSHFS options:
    -p PORT                equivalent to '-o port=PORT'
    -C                     equivalent to '-o compression=yes' #启用压缩,建议配上
    -F ssh_configfile      specifies alternative ssh configuration file #使用非默认的ssh配置文件
    -1                     equivalent to '-o ssh_protocol=1' #不要用啊
    -o reconnect           reconnect to server               #自动重连
    -o delay_connect       delay connection to server
    -o sshfs_sync          synchronous writes
    -o no_readahead        synchronous reads (no speculative readahead) #提前预读
    -o sshfs_debug         print some debugging information
    -o cache=BOOL          enable caching {yes,no} (default: yes) #能缓存目录结构之类的信息
    -o cache_timeout=N     sets timeout for caches in seconds (default: 20)
    -o cache_X_timeout=N   sets timeout for {stat,dir,link} cache
    -o workaround=LIST     colon separated list of workarounds
             none             no workarounds enabled
             all              all workarounds enabled
             [no]rename       fix renaming to existing file (default: off)
             [no]nodelaysrv   set nodelay tcp flag in sshd (default: off)
             [no]truncate     fix truncate for old servers (default: off)
             [no]buflimit     fix buffer fillup bug in server (default: on)
    -o idmap=TYPE          user/group ID mapping, possible types are:  #文件权限uid/gid映射关系
             none             no translation of the ID space (default)
             user             only translate UID of connecting user
    -o ssh_command=CMD     execute CMD instead of 'ssh'
    -o ssh_protocol=N      ssh protocol to use (default: 2) #肯定要2的
    -o sftp_server=SERV    path to sftp server or subsystem (default: sftp)
    -o directport=PORT     directly connect to PORT bypassing ssh
    -o transform_symlinks  transform absolute symlinks to relative
    -o follow_symlinks     follow symlinks on the server
    -o no_check_root       don't check for existence of 'dir' on server
    -o password_stdin      read password from stdin (only for pam_mount)
    -o SSHOPT=VAL          ssh options (see man ssh_config)

Module options:

[subdir]
    -o subdir=DIR       prepend this directory to all paths (mandatory)
    -o [no]rellinks     transform absolute symlinks to relative

[iconv]
    #字符集转换,对我这种UTF8控,默认已经是最好的
    -o from_code=CHARSET   original encoding of file names (default: UTF-8)
    -o to_code=CHARSET      new encoding of the file names (default: UTF-8)

实际使用:

挂载(如果配上ssh key就可以完全自动化了):
sshfs root@192.168.9.109:/opt /opt/s109
卸载:
fusermount -u /opt/s109

在Android中运行go程序(Golang 1.0.2, ARM 6)

2012-08-31 10:14:37 +0800

原本以为很简单的,网上一堆什么5g啊5l啊, 下载go 1.0.2才发现, 我去,根本就没有5g和5l

难道是官方编译版本没带而已,我自己编译一个呗

apt-get install gcc libc6-dev ercurial
#yum install gcc libc6-devel mercurial

#预先把变量设置好
export GOROOT=$HOME/go
export PATH=$PATH:$GOROOT/bin

#获取go的源码
cd $HOME
hg clone -u release https://code.google.com/p/go
cd go/src
./all.bash

#这样就安装好适合当前系统的go,但还需要arm(即Android的低层环境)的版本
CGO_ENABLED=0 GOARCH=arm GOOS=linux ./make.bash

#验证一下,应该会显示有5g和5l
go tool

接下来,就是写个hello world,然后编译

CGO_ENABLED=0 GOARCH=arm go build hi.go
./hi
#呵呵,自己试试吧

提醒一句, 虽然可以通过变通的方式用上cgo,但据说不推荐,所以暂时还是不要用了

参考文章: https://groups.google.com/forum/?fromgroups=#!topic/golang-nuts/ESQ0_yxH130

换种顺序来执行TestCase(Junit适用)

2012-08-26 10:18:26 +0800

Junit的TestCase,总是按固定的顺序执行的. 正如你在Eclipse中跑Run As Junit Test, 无论你跑多少次, TestCase的执行顺序都是一致的,可重复的. 这就导致一个问题, TestCase之间的独立性无法保证.

例如下面一个Test类中的2个TestCase:

public class DaoTest {

    @Test
    public void test_count() {
        dao.insert(new User("root", "123456"));
        assertEquals(1, dao.count(User.class));
    }

    @Test
    public void test_insert() {
        dao.clear(User.class, null);
        dao.insert(new User("admin", "123456"));
        assertEquals(1, dao.count(User.class));
    }

}

如果先执行test_count()然后执行test_insert(),两个TestCase都能通过.

但如果先执行test_insert(),然后执行test_count(),则test_count()会失败.

所以,有必要去打乱TestCase的默认执行顺序,以暴露出TestCase本身的问题. TestCase更可靠,才能让主代码更可靠.

我实现了一个简单的方式,使用的是Junit的公开API, 测试过4.3和4.8.2,均可使用:

        //得到所有带@Test的方法,这里用的是Nutz的资源扫描,反正你能得到全部Test类就行
        List<Class> list = Scans.me().scanPackage("org.nutz");
        List<request> reqs = new ArrayList<request>();
        Map<Request, Method> reqMap = new HashMap<Request, Method>();
        for (Class clazz : list) {
            Method[] methods = clazz.getMethods();
            for (Method method : methods) {
                if (method.getAnnotation(Test.class) != null) {
                    //将单个TestCase(即一个Test Method),封装为Junit的Test Request
                    Request req = Request.method(clazz, method.getName());
                    reqs.add(req);
                    reqMap.put(req , method);//在最终打印测试结果时,方便查找具体出错的Method
                }
            }
        }

        // 因为reqs 是一个List,我们可以按需调整TestCase的顺序
        // 正序 //nothing change.
        // 反序Collections.reverse(reqs)
        // 乱序Collections.shuffle(reqs)

        //把执行顺序保存下来,方便重现执行顺序
        try {
            FileWriter fw = new FileWriter("./test_order.txt");
            for (Request request : reqs) {
                fw.write(reqMap.get(request).toString());
                fw.write("\n");
            }
            fw.flush();
            fw.close();
        }
        catch (IOException e) {}

        //到这里, List已经按我们预期的方式排好,可以执行测试了
        final TestResult result = new TestResult();
        RunNotifier notifier = new RunNotifier();
        notifier.addListener(new RunListener() { //需要设置一个RunListener,以便收集测试结果

            public void testFailure(Failure failure) throws Exception {
                result.addError(asTest(failure.getDescription()), failure.getException());
            }
            public void testFinished(Description description) throws Exception {
                result.endTest(asTest(description));
            }
            public void testStarted(Description description) throws Exception {
                result.startTest(asTest(description));
            }

            public junit.framework.Test asTest(Description description) {
                return new junit.framework.Test() {

                    public void run(TestResult result) {
                        throw Lang.noImplement();
                    }

                    public int countTestCases() {
                        return 1;
                    }
                };
            }
        });
        //来吧,执行之!!
        for (Request request : reqs) {
            request.getRunner().run(notifier);
        }

        //接下来,就是打印结果了.
        System.out.printf("Run %d , Fail %d , Error %d \n", result.runCount(), result.failureCount(), result.errorCount());

        if (result.failureCount() > 0) { //断言失败的TestCase
            Enumeration<testfailure> enu = result.failures();
            while (enu.hasMoreElements()) {
                TestFailure testFailure = (TestFailure) enu.nextElement();
                System.out.println("--Fail------------------------------------------------");
                System.out.println(testFailure.trace());
                testFailure.thrownException().printStackTrace(System.out);
            }
        }

        if (result.errorCount() > 0) { //抛异常的TestCase
            Enumeration<testfailure> enu = result.errors();
            while (enu.hasMoreElements()) {
                TestFailure testFailure = (TestFailure) enu.nextElement();
                System.out.println("--ERROR------------------------------------------------");
                System.out.println(testFailure.trace());
                testFailure.thrownException().printStackTrace(System.out);
            }
        }

来, 考验一下你的TestCase吧!! 让它在乱序中多次执行. Nutz按这种思路,已经爆出几个Bug(当然,我已经迅速fix了)

https://github.com/nutzam/nutz/blob/master/test/org/nutz/AdvancedTestAll.java

fql改造记录 -- fql is a tool that use SQL like query to manipulate files

2012-08-13 04:52:41 +0800

fql is a tool that use SQL like query to manipulate files

挺好玩的一个小工具, 用SQL语法来find文件,官网 https://github.com/dccmx/fql

添加readline支持, 原本是极其简单的fgets读取输入,那叫一个简陋啊

//添加headers #if defined(HAVE_LIBREADLINE) && HAVE_LIBREADLINE==1

include

include

#endif

//改造其获取输入的代码: #if defined(HAVE_LIBREADLINE) && HAVE_LIBREADLINE==1 if (isatty(STDIN_FILENO)) { //如果是控制台输入,则输出提示符 str = readline(“> “); if( str && *str ) add_history(str); //加入到readline历史记录 else continue; } else { str = readline(“”); if (! str) break; } #else //老的,直接读取的方法, 不带历史记录,无法读取多行文本 if (isatty(STDIN_FILENO)) printf(“> “); char str[1024]; fgets(str, 1024, stdin); if (feof(stdin)) break; if (!str || !strcmp(”\n”, str) || !strcmp(”\r\n”, str)) continue; #endif
改为autoconf. 原项目是手写的Makefile,比较蛋疼(例如无法直接使用clang编译)

autoscan mv configure.scan configure.in

vim configure.in #添加AM_INIT_AUTOMAKE,填上版本号,联系人等信息

vim Makefile.am #写上fql_SOURCES bin_PROGRAMS等

aclocal automake -a

#搞定, 可以编译了 ./configure make
修正一个小bug–当文件夹或文件的uid或gid不合法时(指向一个不存在的用户),会发生段错误

if (*ite == “uname”) { struct passwd *pw = getpwuid(st.st_uid); if (pw) row.push_back(new String(pw->pw_name)); else row.push_back(new String(“”)); } else if (*ite == “gname”) { struct group *grp = getgrgid(st.st_gid); if (grp) row.push_back(new String(grp->gr_name)); else row.push_back(new String(“”)); }

再fix掉clang编译时的一个小warning,搞定!

CXX=clang CC=clang LDFLAGS="-Wall -lstdc++" ./configure
make

最大的收获,就是知道原来平时命令行中,向上向下,查询历史命令,都是readline做的,一直以为是系统级的功能…

Golang连接Mysql

2012-07-31 07:33:39 +0800

首先,安装golang-mysql库, 我这里选用是google上的go-mysql-driver

go get code.google.com/p/go-mysql-driver/mysql
#如果访问失败,请翻墙吧!! 需要mysql 4.1以上哦

然后,当然是我的最爱 – 代码

package main

// 导入sql包, 跟java.sql类似的
import "database/sql"
import _ "code.google.com/p/go-mysql-driver/mysql"
import "encoding/json"
import "fmt"

// 定义一个结构体, 需要大写开头哦, 字段名也需要大写开头哦, 否则json模块会识别不了
// 结构体成员仅大写开头外界才能访问
type User struct {
    User      string    `json:"user"`
    Password string `json:"password"`
    Host   string `json:"host"`
}

// 一如既往的main方法
func main() {
    // 格式有点怪, @tcp 是指网络协议(难道支持udp?), 然后是域名和端口
    db, e := sql.Open("mysql", "root:123456@tcp(localhost:3306)/mysql?charset=utf8")
    if e != nil { //如果连接出错,e将不是nil的
        print("ERROR?")
        return
    }
    // 提醒一句, 运行到这里, 并不代表数据库连接是完全OK的, 因为发送第一条SQL才会校验密码 汗~!
    _, e2 := db.Query("select 1")
    if e2 == nil {
        println("DB OK")
        rows, e := db.Query("select user,password,host from mysql.user")
        if e != nil {
            fmt.Print("query error!!%v\n", e)
            return
        }
        if rows == nil {
            print("Rows is nil")   
            return
        }
        for rows.Next() { //跟java的ResultSet一样,需要先next读取
            user := new(User)
            // rows貌似只支持Scan方法 继续汗~! 当然,可以通过GetColumns()来得到字段顺序
            row_err := rows.Scan(&user.User;,&user.Password;, &user.Host;)
            if row_err != nil {
                print("Row error!!")
                return
            }
            b, _ := json.Marshal(user)
            fmt.Println(string(b)) // 这里没有判断错误, 呵呵, 一般都不会有错吧
        }
        println("Done")
    }
}

编译后, 体积高达2.5mb, 实在惊人. 运行速度也很不错, 0.012秒完成:

linux-9rhn:/home/go # time ./test_mysql
DB OK
{"user":"root","password":"*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9","host":"localhost"}
{"user":"root","password":"","host":"linux-9rhn"}
{"user":"root","password":"","host":"127.0.0.1"}
{"user":"","password":"","host":"localhost"}
{"user":"","password":"","host":"linux-9rhn"}
Done

real 0m0.012s
user 0m0.008s
sys  0m0.000s

附上一句, 不用猜密码了,是123456, 写着呢

在Golang中,Log打印行号等信息

2012-07-24 07:11:08 +0800

做个小笔记, 默认情况下,log模块的只打印日期和时间, 没具体行号,比较不爽,嘿嘿

package main
/*
#include <stdlib.h>
*/
import "C"
import "log"

func main() {
    log.SetFlags(log.Lshortfile | log.LstdFlags)
    log.Println( C.random())
}

打印结果:

2012/07/24 19:27:55 X.cgo1.go:14: 1804289383

其中, log.Lshortfile 还可以设置为log.Llongfile 即完整文件路径

获取当前行数,文件名,函数名(方法名):

package main

import (
       "runtime"
       "fmt"
)

func main() {
        funcName, file, line, ok := runtime.Caller(0)
        if ok {
            fmt.Println("Func Name=" + runtime.FuncForPC(funcName).Name())
            fmt.Printf("file: %s    line=%d\n", file, line)
        }
}

Nutz T恤与小鸣鸣

2012-07-21 09:29:48 +0800

45分钟的Nutz敲门砖,高清无码 -- [视频教程] Nutz详解-基础框架的搭建

2012-07-20 09:47:17 +0800

Nutz入门教程, 高清无码哦

下载地址: http://code.google.com/p/nutz/downloads/list

长达45分钟,让你一次性体会Nutz的3大块: Mvc Ioc Dao

NutMVC的View怎么玩?

2012-06-29 11:24:44 +0800

撒手不管 VoidView:

@Ok("void") //不做任何操作,不理会任何返回值,不碰resp对象!!

//适合控制欲极强的童鞋,或有特别需要的

ajax好基友 UTF8JsonView:

@Ok("json") // 将任何返回值转换为json字符串,后面可以加jsonFormat参数
//注意,使用这个视图,你就不要自己拼json字符串了!! 返回map/list/pojo吧!!

示例页面js调用:

$.ajax({
  url: "${base}/login",
  dataType : "json",
  data : {"user" : "wendal", "passwd" : "123456"}, //或者 表单数据
  //如果是复杂的对象,建议使用$.toJSON(obj) 然后后台使用@Adpter(JsonAdpter.class)
  success : function(re) {
    if (re.ok) {
      alert('登陆成功');
      windows.location = "${base}/home"; //跳转到某个URL去, 多嘴一句,ajax是不能自动识别302的!!
    } else {
      alert('登陆失败,请检查用户名及密码!!');
    };
  },
  fail : function(err) {
    alert("服务器错误: "+ err);
  }
});

纯情 RawView:

@Ok("raw") //非常单纯地把返回值写入resp

//虽然很外表单纯,但很有内涵哦
// 如果返回值是File的话,会让浏览器弹出下载框哦 -- 传说中的文件下载
// 这个视图可以接受具体ContentType哦: @Ok("raw:application/vnd.ms-excel")

一意孤行 HttpStatusView:

@Ok("http:403") //管你返回什么,一概sendError(403) !!

幕后英雄 AbstractPathView:

这可是ForwardView和ServerRedirectView,JspView的超类,虽然没啥人直接用它

Nutz视图中的路径转换,就是这个类做的,我这里再描述一下这个规则:

//首先,不考虑后缀的情况下:
// 1. 将路径中的.全部转换为/
// 2. 如果路径不是/开头,则添加/WEB-INF/

//然后是带后缀了, 简单来说就是直接添加后缀

// 来个小测试, 假设后缀为jsp
abc.efg.QQ       --> /WEB-INF/abc/efg/QQ.jsp 不以/开头,故,添加/WEB-INF/
/abc.efg.QQ      --> /abc/efg/QQ.jsp         以/开头,全部.转为/后,添加后缀.jsp
abc.jsp          --> /WEB-INF/abc/jsp.jsp    记住,是先全部替换.为/,然后添加后缀哦!!
/abc/jsp/ZZ      --> /abc/jsp/ZZ.jsp

//JspView只是带后缀的ForwardView而已!!

自给自足自定义View:

国情就是这么复杂,需求就是这么纠结,Nutz的内置View就是说没法满足你的要求?

情况1: 需要根据不同情况跳转(或forward)到不同的URL

继承AbstractPathView的类,均支持EL表达式

@Ok("jsp:${obj == null ? '/index' : '/home'}") 
// obj即方法的返回值, 事实上有需要可用的变量,例如req_attr,p,u等等非公开变量,快去看看源码吧!!

情况2 按需使用不同的视图:

return HttpStatusView(403); //当方法的返回值是View实例时,将无视@Ok的设置
// 很多时候,你需要携带一些信息, 故,你会这样写:
return new ViewWrapper(new JspView("fuck.gfw"), msg); //这里的msg,在JspView看来,就是方法的返回值obj

情况3 符合固定行为的视图:

这个就完成是自定义视图了,实现你自己的ViewMaker及View类,例如最简单的jsonext视图:

public SuperViewMaker implements ViewMaker {
  public View make(Ioc ioc, String type, String value) {
    if ("jsonext".equals(type))
      return new JsonExtView(value);
    return null; //这个很重要,你不认识的视图类型,就应该返回null哦!
  }
}

public JsonExtView extend UTF8JsonView {
  public JsonExtView() {
    super(JsonFormat.nice());
  }
  public void render(HttpServletRequest req, HttpServletResponse resp, Object obj)
            throws IOException {
    resp.setHeader("Cache-Control", "no-cache");
    resp.setContentType("application/json"); //这是跟UTF8JsonView唯一不一样的逻辑
    Json.toJson(resp.getWriter(), obj, format);
    resp.flushBuffer();
  }
}

//当然,你还需要在主模块声明一下这个ViewMaker
@Views({SuperViewMaker.class})

另外,你可以通过IocView的方式变通一下,免得自己写ViewMaker

NutIoc的执行过程

2012-06-23 07:05:17 +0800

越来越多人阅读Nutz的源码,很是欣慰.

首先,什么是Ioc呢? Ioc本质上就是一个有状态的Map, 其中bean就是用户通过各种形式的配置信息所定义的对象

先上一段代码,通过一个js配置一个Ioc容器,并获取一个bean

public static void main(String[] args) {
    IocLoader loader = new JsonLoader("ioc.js");
    Ioc ioc = new NutIoc(loader);
    Pet pet = ioc.get(Pet.class, "pet");
    System.out.println(pet.getName());
}

ioc的js配置文件(ioc.js,名字是随意的)

var ioc = {
    pet : {
        type : "net.wendal.test.Pet",
        fields : {
            name : "wendal"
        }
    }
}

Ioc第一步,读取bean的配置信息 : 任何bean,都有其对应的配置信息,都必须通过一个IocLoader来读取

IocLoader loader = new JsonLoader("ioc.js");

从ioc.js中读取配置信息
ioc.js中,有个前缀”var ioc =“字符串,这是为了方便Eclipse进行语法提示而已, 写不写都可以,但只能写这个字符串,这是JsonLoader所约定的
ioc.js仅定义了一个bean,名叫pet,任何bean都必须有唯一的名字, 因为Ioc实质上就是一个Map,其中的key就是bean的名字
这个bean的信息,会保存在IocObject中, 注意,这是配置信息, 真正的对象并未生成

第二步,生成Ioc容器

Ioc ioc = new NutIoc(loader);
//只是进行一些必要的初始化,并完成与Aop的连接点

第三步,获取对象

Pet pet = ioc.get(Pet.class, "pet");

这时候, 具体的Pet实例要准备生成了

首先,需要生成IocLoading –> createLoading()
然后通过 iocloader的load方法,拿到IocObject, 即bean的配置信息
接着IocMaker实例,通过IocObject和IocMaking实例, 新建实际的bean对象
下一步,就是为刚刚生成的bean注入字段, 因为当前的bean对象,仅仅是new之后的全新状态
收尾的一步, 看看这个bean,是否为单例,是否需要保存到app作用域–大部分的bean都是单例的

// 每一作用域(IocContext),都管理着符合其生命周期的bean – 默认情况下,bean都是app作用域的,单例的

// 如果bean还定义了create/fetch等IocEvent的话,那么,这时候也会触发
将bean作为返回值,交给用户

==补充一句,整个流程,等价于:

Pet pet = new Pet();
pet.setName("wendal");

延伸一下:

1. 注解式Ioc

IocLoader loader = AnnotationIocLoader("net.wendal.test");

//而bean需要定义为
@IocBean
public class Pet {
    @Inject("wendal") //这里只是演示,正常情况下,不可能这样写死
    private String name;
}

就是注解–>IocObject这一步

2. MVC中的Ioc 是通过IocProvider提供的. 不妨看看JsonIocProvider的代码:

public class JsonIocProvider implements IocProvider {

    public Ioc create(NutConfig config, String[] args) {
        //可以看到,就跟我们在main中写的差不多呢
        return new NutIoc(new JsonLoader(args), new ScopeContext("app"), "app");
    }
}

然后,是谁调用了ioc.get(XXX.class, “xxx”)呢? 是ModuleProcessor,摘取一部分源码看看:

Object obj;
/*
* 如果 Ioc 容器实现了高级接口，那么会为当前请求设置上下文对象
*/
if (ioc instanceof Ioc2) {
    reqContext = new RequestIocContext(ac.getRequest());
    SessionIocContext sessionContext = new SessionIocContext(Mvcs.getHttpSession());
    IocContext myContext = new ComboContext(reqContext, sessionContext);
    Mvcs.setIocContext(myContext);
    //看上去比main方法里面写得复杂,事实上还是一个样!!多个上下文而已!
    obj = ((Ioc2) ioc).get(moduleType, injectName, myContext);
}
/*
 * 否则，则仅仅简单的从容器获取
 */
else
    obj = ioc.get(moduleType, injectName);

延展阅读: Mirror类,封装了Nutz中大部分的反射操作

北京之行,就上一张图吧

2012-06-01 10:19:17 +0800

Nutz的代码就是这么来滴~~~~

今天生日,上一张图!

2012-05-24 09:58:24 +0800

鸣鸣玩电脑

明天去帝都: 机票OK,酒店OK,保险OK

香港的婚礼,不一样的

2012-05-21 10:32:38 +0800

先上个google地图:

View Larger Map

整个婚礼的流程如下:

律师兼主持人,宣布仪式开始,全场肃静,婚礼进行曲响起
新郎站在前台(高台),等待新娘入场
大门打开,2个小女孩撒花开路,2个姐妹间隔2米左右,引领新娘缓缓走向新郎
新郎挽住新娘的手,走上前台
律师站2人正中,新郎新娘分站2边,对视
律师提示婚姻在法律上的约束力,并询问双方是否自愿成为夫妻
新郎宣读誓言
新娘宣读誓言
新郎为新娘佩戴戒指
新娘为新郎佩戴戒指
律师摆好结婚证,家长上台,见证双方签字确认
律师宣布2人成为合法夫妻

得强调一下,我参加的是”婚礼”,而非喝喜酒

而且,跟我预先的不太一样,并非一个基督教/天主教婚礼, 虽然带一点基督教婚礼的形式,当然,地点是礼堂,而非教堂

在电视中,香港电影,美国电影,“看过”无数次婚礼,总以为婚礼就是怎样怎样的,呵呵

比较有意思的地方: 1. 誓言是律师亲自修改的 – 原来并不需要官方版本!! 2. 嘿嘿,女方是讲普通话的哦,也就是我前同事, 宣读誓言都是用普通话的 3. 在一个有点点偏僻寂静的公园内,比较现代的礼堂,有空调的呢

在LuaJIT中通过FFI直接调用newlisp

2012-05-17 10:02:59 +0800

首先,当然是编译newlisp,并拷贝到/usr/lib/libnewlisp.so
编译luajit,启动之

上代码

--载入ffi
ffi = require("ffi")
--载入newlisp
newlisp = ffi.load("newlisp")
--定义newlisp的公开API
ffi.cdef[[
char * newlispEvalStr(char * cmd);
]]

--接下来,就是调用过程了
newlisp_str = "()"
tmp = ffi.new("char[2]") -- 因为newlispEvalStr的参数是char*,而newlisp_str是string,需要转一下
ffi.copy(tmp, newlisp_str)

--执行
newlisp.newlispEvalStr(tmp)

---------------------------------------------
--------------封装一下,做个库------------------
---------------------------------------------

function newlisp(newlisp_str)
    local ffi = require("ffi")
    local newlisp = ffi.load("newlisp")
    ffi.cdef[[
       char * newlispEvalStr(char * cmd);
    ]]
    local tmp = ffi.new("char[" .. #newlisp_str .. "]")
    ffi.copy(tmp, newlisp_str)
    newlisp.newlispEvalStr(tmp)
end

TODO: 改为lua-newlisp形式的调用

将诺顿Ghost(诺顿克隆精灵)正版化了

2012-05-12 09:17:33 +0800

不打算说其他的,就贴一下邮件内容吧:

感谢您光临诺顿网络商店。
以下是您所购买产品的下载信息。
请务必妥善保管本邮件。

[订单内容]
───────────────────────────────────
[订单号码]       NSCN0000017XXXX
[定购日期]       2012-05-12 22:09:28
───────────────────────────────────
[订购的商品1]      诺顿克隆精灵15.0 一用戶 下载版
[类别]             下载
[数量]             1 个
[产品密钥]   09-A052-0969-XXXXXX
───────────────────────────────────

增强型Proxy_Pass - 替换nginx内置的proxy_pass

2012-05-09 10:33:34 +0800

项目地址: https://github.com/wendal/lua-resty-http

这个项目是https://github.com/liseen/lua-resty-http的fork版本, 暂未被合并.

nginx内置的proxy_pass有几个问题: 1. 无法方便的调整后端host 2. 总是等待后端host把响应写完了,才开始向客户端写数据 3. proxy_next_upstream不灵活

演示,实时proxy_pass,每读取1k就往浏览器写1k数据:

local url = 'http://'
if ngx.var.http_host then
   url = url .. ngx.var.http_host 
end
url = url .. ngx.var.request_uri  -- 拼接完整的URL
if ngx.var.args then
   url = url .. '?' .. ngx.var.args
end
local ok, code, headers, status, body  = hc:proxy_pass {
    url = url,
    fetch_size = 1024, -- 分段大小
    max_body_size = 100*1024*1024 ,  --响应体的最大大小.
    headers = ngx.req.get_headers(), -- 传递客户端的参数,可以根据需要进行修改哦.
    method = ngx.var.request_method, -- 真实还原客户端的请求方法,当然,你可以改!!
}
if not ok and not ngx.headers_sent then
    ngx.exit(502) -- 出错了哦? 这里只是简单遵循了nginx在后端报错时的响应,你完全可以实现自己的逻辑,进行错误处理
else
    ngx.eof()
end

核心扩展点,这是http.lua中的代码,我在这里附上中文注释:

-- proxy_pass方法支持3种回调哦
-- 提醒一句,回调里面,你可以调用任意ngx_lua的代码哦,就是说,你连ngx.exit(404)之类的中断请求的操作,也是完全可以的
function proxy_pass(self, reqt)
    local nreqt = {}
    for i,v in pairs(reqt) do nreqt[i] = v end

    -- 响应回调,可以替代proxy_next_stream的功能哦,例如替换响应码,或者进行转向其他请求
    if not nreqt.code_callback then 
        nreqt.code_callback = function(code, ...)
            ngx.status = code
        end
    end

    -- header回调,可增减resp的header
    if not nreqt.header_callback then
        nreqt.header_callback = function (headers, ...)
            for i, v in pairs(headers) do
                ngx.header[i] = v
            end
        end
    end

    -- body回调,注意chunked的情况哦
    if not nreqt.body_callback then
        nreqt.body_callback = function (data, chunked_header, ...)
            ngx.print(data)
            if chunked_header then
                ngx.print('\r\n')
            end
        end
    end
    return request(self, nreqt)
end

安装: 先编译openresty 将lib/resty/url.lua和lib/resty/http.lua拷贝进openresty的lualib中

注意: 回调的API尚未锁定, 将来可能根据需要添加更多参数

bfr-非阻塞的管道缓存器,解决Linux管道缓冲区过小的问题!!

2012-05-07 11:34:03 +0800

官网地址: http://glines.org/software/bfr

Google上,“Linux Pipe Buffer size”,“Linux管道缓冲区是否可调整”“增大pipe缓冲区大小”之类的查询,能出30万条记录… Linux上的管道, 要不就是4k,要不就是64k, 很多时候根本不够用 – 我遇到需求的比较夸张,每秒传输200mb的数据通过一个管道,悲催…, 问题如果从几秒钟的跨度看, 输入输出是均衡的,但细看一下, 一秒之内的输入输出非常不均衡, 导致输入输出都耗费大量时间在阻塞式读写中

前一段时间,已经打算自己写一个类似的缓冲器, 桥接管道两段,做个大缓存,可惜,由于C水平有限,且找到替代方案,就不了了之

终于,问题还是回来了, 而且,很巧的,我找到了bfr,一个古老的管道缓冲器(2004年之后就没有更新了…),So, 为其建立一个github的库 https://github.com/wendal/bfr

使用说明,简单翻译:

bfr v1.6 (c) 1999-2003 Mark Glines <mark@glines.org>
Usage follows:

bfr [-v|--verbose] [-t0|--threshold=0] [-T0|--timeout=0]
    [-b100|--bufsize=100] [-p<arg>|--progress=<arg>] [-m0|--minimum=0]
    [-T90|--throttle=90] [-C0|--speedcap=0] [<input file or -> ...]

short --long       default desc
-h    --help       -       display this (hopefully) helpful message.(帮助信息)
-v    --verbose            enable verbosity (use twice for pedantic verbosity) (详尽信息,除非你遇到bug!!)
-p    --progress   k1k     Enables "progress mode" (see manpage) (进度显示, 强烈建议无视这个选项)
-m    --minimum    600k    set the amount of buffer to reach before output
                       begins (to ensure a full stream even at start).(低于多少缓冲,就先不输出)
-i    --initial    minimum Special case of --minimum to preload at the start
                       of operation.  If unset, --mimumum value is used.(真正输出前,先接收多少数据)
-t    --timeout    0       time, in seconds, to wait before aborting if both
                       input and output are locked.  0 = wait forever.(输入输出被阻塞的超时设置,基本上是用不上的)
-T    --throttle   90      after filling the buffer, the percentage to let the
                       amount of onhand data to go down to before accepting
                       more input. (缓冲区接近满的时候,停止接收数据,直至缓冲区的占有率下降)
-C    --speedcap   0       If set to a non-zero value, bfr will allow only
                       this many bytes to be output per second. (限制流出的速率,基本上没用)

-b    --buffersize 1M      full size of memory buffer.(总的缓冲区大小,非常重要!!)

-f    --fork               forks off the read half, to work around buggy
                       kernels which block even in nonblocking mode, such
                       as when reading from a cdrom or nfs volume hangs

-o    --output     -       selects the output device(输出到哪里,默认是stdout)

关于编译,虽然它提供了configure等标准的构建脚本,但实际上,仅bfr.c和bfr.h是必须的, 简单修改bfr.h,定义VERSION,移除config.h,即可直接编译bfr!!

成功编译OpenJDK 7u2 ! 哦也！

2012-05-06 11:12:24 +0800

这个周末，连续编译了好几款开源程序： ffmpeg+x264 很传统的编译,./configure和make mongo+v8 使用scons进行编译，改为V8引擎的mongo，性能是否会大幅提速呢？打算出个报告哦！ mysql5.5 使用cmake

最后一个重头戏，本打算编译Chrome的，但发现其源码实在太大了，改为编译向往已久的OpenJDK 7u2

编译环境，Ubuntu 12.04 x64桌面版, root用户下操作

准备工作

apt-get build-dep openjdk-6
apt-get install openjdk-6-jdk
apt-get install libasound-dev build-essential

下载OpenJDK 7 update 2 的源码

cd /opt
wget http://www.java.net/download/openjdk/jdk7u2/promoted/b13/openjdk-7u2-fcs-src-b13-17_nov_2011.zip
unzip openjdk-7u2-fcs-src-b13-17_nov_2011.zip
cd /opt/openjdk

开始编译，会经历多个错误zzZZ

export ALT_BOOTDIR=/usr/lib/jvm/java-1.6.0-openjdk-amd64
export LANG=c
jdk/make/jdk_generic_profile.sh
make sanity

#确认无错误后，执行
make ALLOW_DOWNLOADS=true

#然后，就等吧，必然出错，需要编辑一个文件
vim hotspot/make/linux/makefiles/gcc.make
#将其中的 WARNINGS_ARE_ERRORS = -Werror 注释掉

#OK，再启动make
make ALLOW_DOWNLOADS=true

#然后，就到sound出错了
cd jdk/make/javax/sound/jsoundalsa
vim Makefile
#找到CPPFLAGS ，在其结尾，添加 -lasound
#如果再次make还是失败在这里，那么 ，先还原上一个修改， 并拷贝出错的最后一条gcc命令，添加-lasound后执行，应该无错误地pass

#再次make
make ALLOW_DOWNLOADS=true

#OK，你会遇到最后的错误， corba的什么什么类找不到？！
cp -r /opt/openjdk/build/linux-amd64/corba/classes/* /opt/openjdk/build/linux-amd64/classes/

#好了，你最后一次跑make了，这次应该能够成功了！！
make ALLOW_DOWNLOADS=true

#漫长编译后，你终于能看到编译成功的提示：
########################################################################
##### Leaving jdk for target(s) sanity all docs images             #####
########################################################################
##### Build time 00:04:19 jdk for target(s) sanity all docs images #####
########################################################################

-- Build times ----------
Target all_product_build
Start 2012-05-06 23:07:41
End   2012-05-06 23:12:30
00:00:04 corba
00:00:14 hotspot
00:00:02 jaxp
00:00:06 jaxws
00:04:19 jdk
00:00:04 langtools
00:04:49 TOTAL
-------------------------
make[1]: Leaving directory `/opt/openjdk'

大功告成，来玩玩吧！

#现在，跑一下你的OpenJDK 7u2吧！！
/opt/openjdk/build/linux-amd64/bin/java -version
openjdk version "1.7.0-internal"
OpenJDK Runtime Environment (build 1.7.0-internal-root_2012_05_06_19_19-b00)
OpenJDK 64-Bit Server VM (build 22.0-b10, mixed mode)

编译一个HelloWorld试试：
/opt/openjdk/build/linux-amd64/bin/javac /tmp/Hi.java
#################################
root@ubuntu:/opt/openjdk/build/linux-amd64# /opt/openjdk/build/linux-amd64/bin/java -cp /tmp Hi
Hi, this is my openJDK!
root@ubuntu:/opt/openjdk/build/linux-amd64# 
#################################

深入一下Git的Hook(钩子)机制

2012-05-06 01:35:16 +0800

首先, 先来看看我刚刚翻译完成的GitHooks.txt(官方文档的翻译)

接着,当然是俺的总结发言了(已经附在翻译稿后面): 1. hook列表:

------------------------------------------------------
|钩子名字          |触发命令    |参数|非0导致取消|备注|
|applypatch-msg    |git am      |1   |Yes||
|pre-applypatch    |git am      |0   |Yes||
|post-applypatch   |git am      |0   |No ||

|pre-commit        |git commit  |0   |Yes||
|prepare-commit-msg|git commit  |1~3 |Yes||
|commit-msg        |git commit  |1   |Yes||
|post-commit       |git commit  |0   |No ||

|pre-rebase        |git rebase  |2   |Yes||

|post-checkout     |git checkout|3   |No ||

|post-merge        |git merge   |1   |No ||

|pre-receive       |git-receive-pack |0   |Yes|通过标准输入获取信息|
|update            |git-receive-pack |3   |Yes||
|post-receive      |git-receive-pack |0   |No |通过标准输入获取信息|
|post-update       |git-receive-pack |可变|No ||
------------------------------------------------------
注: 最后4个才是远程资源库执行的hook,其他都是本地资源库的hook

2. hook的示例 虽然示例中,hook都是perl脚本,但绝对不表示只能用perl.只要是可执行的东西,都可以作为钩子

3. 源码级别的hook信息 我非常神奇地发现, hook的名字,并没有独立写在某个h文件中,而是分布于几个具体的c文件中主执行入口: run_hook(const char *index_file, const char *name, …) 定义于run-command.h,实现于run-command.c 官方说明:

`run_hook`::

    Run a hook.(执行一个hook)
    The first argument is a pathname to an index file, or NULL(第一个参数是index file,可能为NULL)
    if the hook uses the default index file or no index is needed.
    The second argument is the name of the hook.(第二个参数是hook的名字)
    The further arguments correspond to the hook arguments.(剩下的,就是hook自己需要的参数了)
    The last argument has to be NULL to terminate the arguments list.(最后一个参数必须是NULL,C的常识性用法)
    If the hook does not exist or is not executable, the return
    value will be zero.(当hook不存在或不可执行,则返回0 )
    If it is executable, the hook will be executed and the exit
    status of the hook is returned. (方法的返回值,就是hook的退出状态)
    On execution, .stdout_to_stderr and .no_stdin will be set.
    (See below.)

最后说一句: 所谓远程,其实就是你push的目标, 也就是说,仅当push操作时,远程资源库才会有hook触发!!

Nutz编年史--简单图表版

2012-05-01 12:14:01 +0800

先上干货,纯数据:

|版本   |构建日期|文件总数|文件大小|
|1.a.15|2009-09-20| 505| 524|
|1.a.16|2009-10-18| 524| 544|
|1.a.17|2009-11-03| 542| 559|
|1.a.18|2009-11-15| 534| 544|
|1.a.20|2009-11-19| 535| 544|
|1.a.21|2009-11-26| 550| 566|
|1.a.22|2009-11-29| 550| 568|
|1.a.23|2009-11-30| 550| 568|
|1.a.24|2009-12-20| 586| 636|
|1.a.25|2009-12-29| 587| 640|
|1.a.26|2010-03-01| 598| 638|
|1.a.27|2010-04-26| 631| 712|
|1.a.28|2010-05-30| 655| 737|
|1.a.29|2010-06-13| 665| 752|
|1.a.30|2010-07-13| 674| 759|
|1.a.31|2010-08-12| 689| 775|
|1.a.32|2010-10-13| 720| 816|
|1.a.33|2010-11-11| 729| 825|
|1.b.34|2010-12-24| 729| 828|
|1.b.35|2011-02-14| 829| 877|
|1.b.36|2011-03-25| 845| 933|
|1.b.37|2011-04-25| 858| 945|
|1.b.38|2011-07-15| 878| 994|
|1.b.39|2011-08-13| 880| 999|
|1.b.40|2011-10-21| 892|1019|
|1.b.41|2012-01-18| 896|1042|
|1.b.42|2012-02-14| 902|1053|
|1.b.43|2012-04-01| 918|1082|

Jar文件大小变化:

Class文件总数变化:

第一个公开版本,1.a.15发布于2009年9月20号,文件大小524kb,包含505个class文件最新正式版本, 1.b.43发布于2012年4月1号,文件大小1082kb(增大了106%),包含了918个class文件

大事件: 1.a.15 第一个公开版本 1.a.25 真正无依赖第三方jar 1.a.31 将Filter作为NutMvc的首选配置方式 1.a.33 提交到Maven中央库 1.b.34 第一个Beta版本 1.b.35 增加el引擎 1.b.36 重写Mvc 1.b.38 重写Dao,并迁移到Github

Nutz, 继续前行中!!

在Ant/Maven中使用ecj编译器(Eclipse内置的Java编译器)

2012-04-30 04:10:55 +0800

为什么要换ecj呢? JDK自带的java不够好吗? 是的, 尤其是debug信息. 那两种兼容吗? 完全兼容, ecj和javac一样是经过认证的哦, 事实上,如果你正在使用Eclipse,那么,你的java源码, 100%是ecj编译的呢(当然,是你自己写的那部分)

Ant换用ecj 1. 在build.xml中加入:

<property name="build.compiler" value="org.eclipse.jdt.core.JDTCompilerAdapter"></property>

下载独立的ecj.jar ECJ 3.7.2
将ecj-3.7.2.jar放入ant的lib文件夹中
如果是eclipse中跑ant,那么,需要设置一下, Run As – Ant Build … – ClassPath ,加入ecj.jar

Maven换用ecj 1. 官网文档: http://maven.apache.org/plugins/maven-compiler-plugin/non-javac-compilers.html 2. 设置为plexus-compiler-eclipse即可

带来的好处: [](http://wendal.net/394.html) 事实证明, 只有ecj编译的class文件的debug信息会原样遵循方法参数的声明顺序, 悲催啊…

Nutz资源扫描的重新实现

2012-04-28 08:44:50 +0800

Nutz.Resource包,是2010年4月创建的,至今2年了.当初的设计,就是为了 “资源扫描” 这个基础话题.

Spring中也有类似的基础设施,但复杂很多,例如classpath与classpath*等定义.

之前的实现,按以下思路完成: 1. 传入一个路径,通过Files.findFile尝试寻找是否有这个文件 –2. 路径是文件系统上的文件夹,将立马可以找到具体的File对象,可以直接扫描文件夹但 –2. 文件存在于jar包,则需要解析出其jar文件的路径,读取jar文件进行扫描 3. 如果还没找到,搜索classpath和WEB-INF/lib,遍历里面的文件夹/jar文件

一个突出的问题是,Files.findFile的返回值是File对象,这意味着,如果该路径存在于多个不同的classpath路径或jar中,只有第一个路径会被返回. 而且,因为是File对象,对于Jar文件中的文件,读取比较麻烦(例如jarinjar打包的可执行jar文件).

解决复杂路径的jar文件读取问题:

    public static ZipInputStream makeZipInputStream(String jarPath)
            throws MalformedURLException, IOException {
        ZipInputStream zis = null;
        try {
            zis = new ZipInputStream(new FileInputStream(jarPath));
        } catch (IOException e) {
            zis = new ZipInputStream(new URL(jarPath).openStream());
        }
        return zis;
    }

之前的实现,使用JarFile jar = new JarFile(jarPath)形式,未能正确识别嵌套jar(jarinjar)的读取.

解决Files.findFile导致的问题,则需要完全重写Scans. – 以前的实现,是无状态的,每次扫描都尝试所有可能的方式 – 新的实现,有状态,记录可以扫描的位置信息,直接查找

新版的实现思路: 1. 初始化Scans类时,记录可以进行扫描的路径 – 当前文件夹 new File(“.”) – 通过查找META-INF/MANIFEST.MF文件(这是每个标准jar文件必有的文件),得到classpath中所有的jar文件路径 – 通过环境变量java.class.path遍历classpath中的路径 2. 当处于Web环境下,额外调用Scans.init(ServletContext) – 得到并遍历WEB-INF/lib文件夹中的jar文件 – 得到WEB-INF/classes文件夹的路径 3. 以上得到的路径,都封装在ResourceLocation对象List中,分别处理具体路径与具体jar文件的扫描任务 4. 基于性能的考虑,会对jar文件进行预先索引 5. 查找将变得非常轻松,因为仅需要将查询条件传递给各个ResourceLocation对象,并汇总他们的结果

可靠性,总体性能,内存占用: 1. 由于预先探知所有可能的资源路径,所以找到资源的可靠性明显增加, 再加上Scans.registerLocation方法允许用户自行登记路径,使扫描结果更可靠. 2. Scans初始化的耗时增加,但scan操作性能明显提高 3. 内存占用稍微增加

功能改进: 1. 支持按文件夹扫描,即使这个文件夹只存在于jar中,且jar文件并未加入目录实体 2. 用户可自行添加额外路径,在maven下的生存能力明显提高

Nginx二级域名自动匹配到子文件夹(通过rewrite)

2012-04-11 08:32:23 +0800

网站目录结构

html --
       index.html
       xxx.html
       tuan --
              index.html
              tuan800.html
       blog --
              index.html
              1.html
              19.html
       news --
              index.html
              how_to_XX.html
              XX_XX_XX.html

分别对应主站(nutz.cn, www.nutz.cn), 团购子站(tuan.nutz.cn),博客子站(blog.nutz.cn),新闻子站(news.nutz.cn)

nginx.conf示例:

events {
    worker_connections  1024;
}
http {
    include       mime.types;
    default_type  application/octet-stream;

    server {
        listen       80;
        server_name  nutz.cn *.nutz.cn;

        set $sub_domain "";
        if ($http_host ~ "(.+).nutz.cn$") {
            set $sub_domain $1;
        }
        if ($http_host = "www.nutz.cn") {
            set $sub_domain "";
        }
        if ($sub_domain != "") {
            rewrite /(.+) /$sub_domain/$1 break;
        }

        location / {
            root   html;
            index  index.html index.htm;
        }
    }
}

善用if/rewrite哦, 更好的方式,是通过lua来做,呵呵

lua-newLISP 包装器

2012-04-10 10:48:51 +0800

更新: 新实现的eval只返回最后的表达式的值,并添加新的eval_file方法

今天第一次写lua模块,就做了一个lua-newLISP包装器,即在lua中执行newLISP脚本

首先遇到的是newLISP的编译: 1. 官方提供的configure智能化程度极低,估计是手写的 2. 生成的Makefile,是Ubuntu下的配置, 在centos下编译无法通过虽然修改一下,还是顺利能pass,但还是觉得不爽故, 动手做了一个cmake for newLISP的脚本.

生成so文件后,默认是newlisp.so,改名为libnewlisp.so,并放入/usr/lib中

由于newLISP的对外API仅2个(其中一个还不能用…),且自带的h文件比较混乱,干脆自己写了一个h文件newlisp.h,就一行:

char * newlispEvalStr(char * cmd); //把传入的cmd当成newlisp脚本执行,并返回char*

然后,当然是主体c文件newLISP.c啦

//载入lua的头文件
#include "lua.h"
#include "lualib.h"
#include "lauxlib.h"

//载入我自己写的newlisp头文件
#include "newLISP.h"

//lua中require语法将调用这个方法  lisp = require "newLISP"
//最终生成的名字,必须全部一致,库的名字叫newLISP,文件叫newLISP.so,luaopen方法也得叫luaopen_newLISP
int luaopen_newLISP(lua_State *L);

static int newLISP_eval(lua_State *L) {
   char * str = lua_tostring(L, 1);     //获取第一个方法参数, lua中数组下标以1开始
   char * result = newlispEvalStr(str); //调用newLISP库执行脚本
   lua_pushstring(L, result); //将返回值压入堆栈
   return 1; //返回值的数量; 因为lua支持同时返回多个值
}

//定义lua中方法与方法名的映射表
static const luaL_reg newLISP_lib[] = {
   {"eval", newLISP_eval},
   {0,0}
};

//模块注册入口方法
int luaopen_newLISP(lua_State *L) {
   luaL_register(L, "newLISP", newLISP_lib);
   return 1;
}

编译:

gcc -O3 -Wall -shared -o newLISP.so -lnewlisp -llua newLISP.c

测试:

$> lua
Lua 5.1.5  Copyright (C) 1994-2012 Lua.org, PUC-Rio
> lisp = require "newLISP"
> print(lisp.eval("(* 1 100)"))
100

> print(lisp.eval("(setq lst '(1 2 3))"))
(1 2 3)

> print(lisp.eval("(define (abc x y) (+ (* x x) (* y y)) )  (abc 3 4)"))
(lambda (x y) (+ (* x x) (* y y)))
25

>

可以看到, 这个方法有2个很明显的问题: 1. 总是多一个换行 2. 会把执行过程中的所有output都作为返回值 .. 汗…

恩, 起码能用上了

代码所在项目 lua-newLISP

Nutz是一个轮子吗?

2012-04-06 10:59:30 +0800

不要重复发明轮子(Don’t Reinvent the Wheel.) – 在开源社区经常都能看到的论调.

问: Nutz是SSH的轮子吗? 答: 飞机轮子与单车轮子,是同一种轮子吗? 问: Nutz的Ioc,Aop,Dao,MVC,在SSH都有,这难道不是重复发明轮子吗? 答: 你确定这是发明轮子吗? Nutz发明了Ioc?Nutz发明了Aop? … … … …

“不要重复发明轮子”,其实是有后半句的,“学会制造轮子,改进轮子”.

你可以批评他人的轮子做得不好,做得有多烂,但不可否定制造轮子的权利及付出的努力.

如果中国的JavaWeb工程师,都能做一个Spring轮子,或者Hibernate轮子,或者Struts轮子,那么,Java也能强国了. 可惜, 由于SSH/SSH2已经成为国内的JavaWeb的事实标准,以至于很大一部分人只会使用SSH, 而Ioc容器这种基本的概念都弄不清楚. 有多少号称”精通SSH”的工程师研读过其源码呢?

的确,国内的程序员太忙了,天天加班,以至于”怎么可能有空参与开源项目?!“.

用简单的方式,实现NutDao的懒加载(延迟加载, Lazy Load)

2012-04-05 10:45:56 +0800

一直以来, NutDao的懒加载问题,都无数次被提起,我也曾经在另外一篇博客中提及其可行性: NutDao实现Lazy加载的可行性

为了回应广大Nutzer的呼声,我花了点时间完成了一个LazyNutDao,如果你需要这个功能,那么只需要把NutDao简单换成LazyNutDao

整个实现,算上空行及注释,大概200行,并修改了另外3个类(就是把部分属性改成protected)

POJO的属性,必须带setter/getter,否则无法进行懒加载注入
setter/getter应当是无逻辑的,不应加入业务逻辑.

需要注意的问题:

无Session控制,自行处理事务问题 – 对象在事务模板包裹下取出,但在事务模板外调用getter以获取属性值,那么,这部分的调用是在事务之外的
多线程问题,LazyMethodInterceptor并非线程安全的,因为其中的代码并未锁定当前对象

实现思路: 1. POJO的实例化,是由NutEntity完成的,由于懒加载是通过AOP实现的,所以需要接管其实例化过程 2. NutEntity是由AnnotationEntityMaker创建,有NutDao持有,所以,通过覆写setDataSource方法,接管EntityHolder实例 3. LazyNutEntity继承于NutEntity,通过生成Aop拦截链,生成Aoped类,以便拦截@One/@Many字段的setter/getter 4. 懒加载状态管理: 当setter被调用,那么懒加载机制结束使命,回退为普通机制.

整个实现,最难抉择的是”懒加载状态管理”,如果引入Hibernate形式的Session机制,必然导致大幅膨胀.而且,Session机制也是Hibernate中非常容易导致错误的机制之一. 最后简化为简单的2步式控制:

public void filter(InterceptorChain chain) throws Throwable {
  if (status == LazyStatus.CAN_FETCH) {
    if (chain.getCallingMethod() != setter) {
      dao.fetchLinks(chain.getCallingObj(), fieldName);// 这里会触发setter被调用
      status = LazyStatus.FETCHED;
    } else
      status = LazyStatus.NO_NEED; // 如果setter被调用,那么也就不再需要懒加载了
  }
  chain.doChain();
}

200行的代价,实现NutDao的懒加载,应该算不上膨胀吧? 呵呵

Nutz 1.b.43 发行后记

2012-04-01 10:43:22 +0800

折腾了半天,终于把1.b.43发布出去了.

简单介绍修正的Bug及新功能,毕竟”发行注记”比较少涉及这些.

Bug修正: 1. #177 NutFilter关闭时,报NPE,原因是销毁NutFilter时,没有设置ThreadLocal的属性,导致获取IOC容器失败 2. #177 PropertiesProxy只认最后一个配置文件,原因是加载新配置文件时,把旧数据clear了 3. #170 高并发的情况下,当数据库连接池的连接耗尽,NutDao抛出NPE, 原因是处理连接池异常的代码,没有考虑到获取连接也会失败 4. #155 入口方法如果包含Date参数,当页面不传值,会抛出NPE,原因是String2Datetime类没有把”“当初null来处理 5. #172 nutz + Oracle JDBC 10.1.0.2.0 分页会出错,原因是这驱动有BUG!! 6. #75 NutDao动态实体解析报错,原因是默认会以为动态实体也有主键,但实际上用户执行的是update,并不包含主键. 7. Json.fromJson(Set.class, “[1,2,3]“)会报错,原因是没对Set进行特别处理,直接当成List返回了

需求: 1. #187 支持JarInJar,即eclipse打包输出Runnable Jar的第二项. 2. #130 自定义SQL也支持Pager分页 3. #158 Dao支持Set存入数据库,字段类型为varchar 4. #120 JSON循环引用的序列化与反序列化, 以及EL支持Json需求 5. MVC中,如果入口方法的参数没有@Param注解,且不被适配器所识别,那么,按@Param(“参数名”)进行处理 6. 添加内置的fetchBoolean回调函数 7. 新增@SessionBy注解,允许自定义Session的获取方式 8. 新增SimpleDataSource,内置的DataSource实现

注意,我这里描述的是BUG导致的问题及原因,而非BUG的标题

值得注意的是,由于对resource包的修改,扫描资源及Class的速度有所下降,但更准确更可靠,特别是对Class的扫描,对扫描到的文件,不再通过文件名等方式推断类名,而是改为直接读取类文件,从中解析出其真实类名.

newLISP的ShellGame配套lsp源文件

2012-03-27 10:08:44 +0800

newLISP官方提供的ShellGame系列视频,并未提供lsp源文件,我看完了整个系列,顺便把源文件补了一部分,地址: https://github.com/wendal/learn-newLISP/tree/master/ShellGame

总共有23个视频,当前我完成了17个配套的lsp文件,剩下6个视频,没看懂,所以lsp文件还没写出来 – 难道是比较高阶的?

附上第一个视频的lsp文件

;;视频原地址: http://www.neglook.com/
;;lsp文件由wendal创建 http://wendal.net

;; 用默认的context方法,创建数值生成器 -- 类似于自增

(setq generator:acc 0)  ; 创建一个名叫generator的上下文,并添加一个符号acc

(define (generator:generator) (inc generator:acc)) ;缺省的context方法(即与context同名的方法),其中的inc是方法,等同于++

(generator)   ;;分号是单行注释的开始,而非语句的结束符

(generator) 
(generator)
(generator)   ;;连续调用几次后,现在的值应该是acc应当等于4

;;费波那西数列（Fibonacci Sequence）

(define (fibo:fibo) 
    (if (not fibo:mem) 
        (setq fibo:mem '(0 1))) 
    (last (push (+ (fibo:mem -2) (fibo:mem -1)) fibo:mem -1)))

(fibo)
(fibo)
(fibo)
(fibo)
(fibo)

(println fibo:mem) ;;打印fibo上下文(context)中mem变量的值

(exit) ;; 执行完毕,环境关闭

同时,我也发现一个bug,就是中文注释后的一行代码,会被无视…汗 ——- 已经提交bug report

Python的while 1跟while True到底有什么区别?

2012-03-26 02:41:59 +0800

定义两个方法,分别使用while循环

def w() :
  while 1 :
    pass

def w2() :
  while True:
    pass

单从功能上说,两种无任何区别,那么,来看看字节码上的区别:

import dis  #载入反编译模块,Python内置的

dis.dis(w) #对应的是while 1,下面是输出
  2           0 SETUP_LOOP               3 (to 6)

  3     >>    3 JUMP_ABSOLUTE            3
        >>    6 LOAD_CONST               0 (None)
              9 RETURN_VALUE

dis.dis(w2) #对应的是while True,下面是输出
  2           0 SETUP_LOOP              10 (to 13)
        >>    3 LOAD_GLOBAL              0 (True)
              6 POP_JUMP_IF_FALSE       12

  3           9 JUMP_ABSOLUTE            3
        >>   12 POP_BLOCK
        >>   13 LOAD_CONST               0 (None)
             16 RETURN_VALUE

很明显, while 1的字节码只有while True的一半. 为什么呢? 因为Python2.x中True不是关键字,只是一个全局变量而已

更详细,更专业的分析,请看 http://stackoverflow.com/questions/3815359/while-1-vs-for-whiletrue-why-is-there-a-difference

Java匿名内部类的传值

2012-03-24 09:37:42 +0800

在Nutz中,存在大量需要使用匿名内部类的情况,很多童鞋都对传值很困惑,所以我这里说明一下

传入:

//匿名内部类,只能访问final的本地变量及方法参数
public void addUser(final String name, String passwd, final String userType) {
    User user = null;
    if ("admin".equal(userType))
        user = new AdminUser(name, passwd); //仅作演示.
    else
        user = new User(name, passwd);
    final User _user = user; //因为user变量不能设置为final,所以需要新加一个变量来中转
    Trans.run(new Atom(){
        public void run() {
            dao.insert(_user);
            if (log.isDebugEnable())
                log.debugf("Add user id=%d, name=%s , type=%s", _user.getId(), name, userType);
        }
    });
}

传出(获取方法返回值等等):

方法1 – 对象数组法 通过一个final的Object对象数组,存放需要的值

public long countUser(final String userType) {
    final Object[] objs = new Object[1];
    Trans.run(new Atom(){
        public void run() {
            objs[0] = dao.count(User.class, Cnd.where('userType', '=', userType));
        }
    });
    return ((Number)objs[0]).longValue();
}

方法2 – ThreadLocal法 通过一个ThreadLocal来存放结果,这个ThreadLocal可以是静态的,供全app使用的

private static final ThreadLocal re = new ThreadLocal(); //自行补上泛型Object
public long countUser(final String userType) {
    Trans.run(new Atom(){
        public void run() {
            re.set(dao.count(User.class, Cnd.where('userType', '=', userType)));
        }
    });
    return ((Number)re.get()).longValue(); //严谨一点的话,应该将ThreadLocal置空
}

方法3 – Molecule法 Molecule类是Nutz内置的抽象类类,实现Runnable和Atom接口,添加了两个获取/设置值的方法.

public long countUser(final String userType) {
    Molecule mole = new Molecule() { //需要自行补齐泛型
        public void run() {
            setObj(dao.count(User.class, Cnd.where('userType', '=', userType)));
        }
    };
    Trans.run(mole);
    return ((Number)mole.getObj()).longValue(); 
}

学习Java字节码的一些提示

2012-03-23 08:49:14 +0800

Java Class Format : http://docs.oracle.com/javase/specs/jvms/se7/html/jvms-4.html Class文件格式定义,永远是最权威的

jclasslib : http://www.ej-technologies.com/products/jclasslib/overview.html 可视化查看/修改Class文件的工具,以树形结构显示Class文件,并列出具体方法的字节码数据

asm : http://asm.ow2.org/ 性能最强悍的读写class格式的类库,因为大部分写法都接近于直接写字节码其中的ASMifierClassVisitor类,能打印出构造一个完整class文件所需要的全部Java代码,非常方便

Java字节码,跟汇编差不多,喜欢深入Java语法的童鞋不妨学学. 看清实际生成的字节码,你能更清晰的知道,哪些语法仅仅是编译器语法糖果.

实用主义的Lisp方言 -- newLisp

2012-03-21 08:32:20 +0800

先引用newLisp的官方定义: newLISP is a LISP-like scripting language for doing things you typically do with scripting languages: programming for the internet, system administration, text processing, gluing other programs together, etc. newLISP is a scripting LISP for people who are fascinated by LISP’s beauty and power of expression, but who need it stripped down to easy-to-learn essentials. newLISP is LISP reborn as a scripting language: pragmatic and casual, simple to learn without requiring you to know advanced computer science concepts.

自称是Lisp的重生,对自己的期望非常高.

我是在天国之翼的解释下接触newLisp,这人高人独自翻译了newLisp的代码模式

之前看了实用Lisp编程,对Lisp了解了不少,但发现Lisp世界的很大特点就是一上来就吹嘘括号和宏,在无尽的不理解,不明白,我的热情很快退去…

而newLisp,起码,我跑通了一个http服务器!! 我跑通了mysql的demo!! 安装文件非常小巧,安装过程只需几秒,启动极快 – 主程序仅280kb!! 没有一味推荐Emacs(事实上我很讨厌这玩意),所以我用notepad++进行编辑,感觉也不错嘛

现在,我把两个小demo列一下: 1. 小小的静态文件http服务器,无需写代码,一条命令就能启动,最起码做个能用的http服务

newlisp -L log.txt -http -w E:/htmls
#-L 日志,可省略
#-w 工作目录,可省略

2. 访问mysql 能访问数据库,不激动吗?! 首先,你需要下载libmysql(windows),或者安装mysql客户端(一般都包含libmysql) 然后,到newLisp的安装文件夹里面的modules文件夹,找到mysql.lsp,打开编辑: 找以下语句(跳过开头的注释,就看到了),对应你所在的操作系统,确定libmysql已经放好

(set 'files '(
    "/usr/local/lib/libmysqlclient.so.20.0" ; OpenBSD 4.9
    "/usr/lib/libmysqlclient.so" ; Linux, UNIX
    "/usr/lib/mysql/libmysqlclient.so" ; Linux Fedora
    "/usr/local/mysql/lib/libmysqlclient.so" ; Linux, UNIX
    "/usr/local/mysql/lib/libmysqlclient.dylib" ; MacOS X
    "/usr/lib/libmysqlclient.dylib" ; MacOS X
    "E:\\newlisp\\modules\\libmysql.dll" ; 这是我自己加的,windows用户需要到mysql网站下载32位的libmysql,并填上绝对路径
))

在结尾往前找,第一个方法, (define (test-mysql) , 设置mysql用户名密码

(define (test-mysql)
  (MySQL:init)
  (unless (MySQL:connect 0 "root" "root" "test") ;第一个参数是host,如果为0,则代表localhost,第二三个分别是用户名和密码,第四个的测试数据库名
    (println "Could not connect to MySQL")
    (exit))
))

好了,可以执行了

#首先,进入命令行,敲入newlisp,进入newLisp的交换模式
newLISP v.10.4.0 on Win32 IPv4/6 UTF-8, execute 'newlisp -h' for more info.

>
>   (module "mysql.lsp")                 ; 载入mysql模块,如果一切顺利,会把test-mysql方法打印了一通,原因是test-mysql为最后一个方法,默认会将最后一个表达式的值做法返回值
>   (test-mysql)                         ; 执行test-mysql,如果之前的步骤都正确,那么,就开始打印创建表,查询,删除等操作
>   (exit)                               ; (exit)的含义是退出newlisp,另外说一句,";"是注释的开始

如果上述2个demo都顺利pass,那么,你以后可以大胆地说: lisp很简单嘛,我都跑通2个demo了!!

如何阅读Nutz的源码

2012-03-19 10:50:37 +0800

一直以来都有很多人问,我一直以来就有一个简单直接的回答: “看你喜欢看的模块”

今天,我决定用长一点的篇幅及内容来解释一下

Nutz的基础设施 – Lang/Castor/Json/Log/Plugin 所有模块都是无约束地使用这个几个package所提供的方法 –Lang,提供的是帮助方法,各种各样的,其名字来源于对java.lang包的补充. 注意,其中的Mirror类封装了大量的反射,但请不要再以JDK1.2的思维去想象反射的性能!! –Castor,负责类型转换, 例如String–>List –Json,一个基本完整(不解析科学计数),Json字符串与Java对象的互转实现 –Log,日志接口,Nutz的代码,在运行时并不强制依赖具体的日志实现,这个package就是做了封装 –Plugin,插件模块,最初的设计是为了一套简单的插件机制,现在仅Log模块在使用,意义已经不大建议重点关注的类/接口: Mirror Castors Json Lang Files Streams Log Log4jLogAdapter SimplePluginManager MultiLineProperties

反向注入/依赖注入 – Ioc 由于Spring的横行,许多童鞋连Ioc的基本原理都已经忘掉了 IocLoader负责加载配置信息(如js,注解) Ioc(NutIoc)按配置信息生成具体对象(bean) IocContext按配置信息管理bean的生命周期(create/fetch/depose)

建议重点关注的类/接口: Ioc Ioc2 NutIoc IocLoader AnnotationIocLoader JsonLoader MapLoader

Nutz的ORM – Dao ORM的基本概念,就是POJO持久化. 请留意,这个package与Ioc无任何直接联系.NutIoc并不会特殊照顾NutDao,两者可以说是互不相识的. EntityMaker(AnnotationEntityMaker)将Pojo所对应的类转换为Entity(配置信息) Dao(NutDao)按Entity所提供的信息,将操作(insert/update/fetch等),转换为DaoStatement(抽象的Dao语句) DaoExecutor(NutDaoExecutor)将DaoStatement转换为JDBC语句 DaoRunner(NutDaoRunner)负责执行具体的JDBC语句,并管理连接获取/释放/事务控制建议重点关注的类/接口: 上面提到了各个类,并加上Sqls类

Http服务 – MVC 主线: Loading(NutLoading)加载配置信息,UrlMapping(UrlMappingImpl)保存路径映射信息,ActionChain(NutActionChain)按链式处理具体请求建议重点关注的类/接口: NutFilter ActionHandler ActionContext DefaultViewMaker Mvcs ComboIocProvider org.nutz.mvc.impl.processor下的处理器实现类

切面编程 – Aop 这部分的代码,除具体的asm代码外,还是比较好懂的. org.nutz.aop.asm包里面的代码,由于操作的是Java字节码,必须苦涩难懂. Aop的具体模型,请参阅手册. 建议重点关注的类/接口: AbstractClassAgent InterceptorChain LoggingMethodInterceptor

表达式 – EL 这玩意我自己也没仔细看完,主要是jukai和zozoh实现的,我就不多嘴了.

资源扫描 – resource 找jar里面的文件,通过package获取里面的全部类,都靠这个package的实现建议重点关注的类/接口: Scans WebResourceScan LocalResourceScan

其他一些零碎的package: conf – jukai设计,被zozoh否决,现在仅el包还有引用,只有一个类,与EL一起看看吧 filepool – 文件池,放临时文件的,NutDao操作Clob/Blob数据,MVC的upload会用到 http – 简单的http客户端,功能简单够用(够我们自己用…) img – 图像操作 mock – 最初的计划是完成一个Mock框架,后来缩减为mock servlet的,用来模拟servlet容器 org.nutz.repo.org.objectweb.asm – 被我精简过的asm 3.3,全是字节码操作,枯燥乏味. service – NutDao的小封装,看完Dao不妨看这个 trans – NutDao的事物封装,跟service一样,看完Dao再看看呗

读源码的方法: 大大前提,把nutz的源码全下载下来,按手册的说明,把test跑通. 1. 堆栈例如Ioc,你肯定想知道一个bean是如何被创建的. 那么,在你的类的构造方法中,加入一句: new Throwable().printStackTrace(); 跟着堆栈一层层了解

debug 这个更狠一些,顺着代码的执行,想深入的地方就进入,不感兴趣的地方就next,形成一个流程的概念.
看testcase 由于testcase是使用场景抽象出来的代码,所以很有参考价值.

附上几个Eclipse快捷键: ctrl+shift+T 查找某个类 ctrl+L 跳到具体的行数 alt+shift+b 打开源码视图上方的导航条,方便跳转到某个方法

看Nutz代码时,我非常非常建议你记录下任何错误,并报告给我们.即使是错别字,我们也很开心得收到你的指正哦

登录入口的一个小小的细节,HttpSession.setAttribute的调用顺序

2012-03-14 09:23:40 +0800

今天与zozoh的交谈中,又把这个问题提了一下. 就是登录代码中,Session处于一个不可靠的状态.

这里用NutzMVC的代码来演示,但并不代表是nutz的问题,而是J2EE都面对的问题(PS: 如果你使用了SpringSecurity等安全框架,则可能它已经帮你出来了这个问题)

//登录入口方法
public View login(String userName, String passwd, HttpSession session) {
    session.setAttribute("me", user); //当代码运行到这里,会话中已经存在me这个attr
    session.setAttribute("rule", rule);
    return new JspView("/index.jsp");
}

//登录后才能访问的入口方法
@Filters(@By(type = CheckSession.class, args = {"me", "/"})) //已经HttpSession中已经包含me这个attr,所以,这个过滤器会判定为已经登录
public Object xxx(HttpSession session) {
    Rule myRule = session.get("rule"); //由于已经被@Filters标注,所以方法会认为会话是已经完整初始化的
    // .... ... .. 
}

也就是说, HttpSession在登录入口方法完成前,处于一个不可靠的状态 – 对于检测是否登录的代码来说,这个会话是已经登录的,但事实上这个会话并未完成逻辑上的初始化. 当恶意进行类似的访问(多线程),那么其他入口方法要么报NPE,要么执行不可预测的逻辑.如果入口方法需要设置多个attr,那么HttpSession将处于多个不同的半初始化状态.

要避免这个问题,是将登录的标记,放在入口方法的最后.

public View login(String userName, String passwd, HttpSession session) {
    session.setAttribute("rule", rule);
    session.setAttribute("me", user); //由于jsp中不包含逻辑,所以在这里设置登录的识别信息,完成会话初始化.
    return new JspView("/index.jsp");
}

小小细节,轻者NPE,重者,谁知道呢,呵呵

图,是一种表态

2012-03-14 09:06:57 +0800

获得方法形参名称列表 -- 哦也,搞定!!

2012-03-10 10:46:33 +0800

JAVA获取类的方法的参数名 – 老话题,新方法!!

折腾了一天,终于搞定了.测试了nutz所有的类,均读取正常!! 完美读取任何class的变量名信息! 呵呵,当前,前提是编译时含debug信息.

无任何依赖,不需要asm,不要其他任何字节码工具,纯标准JDK API实现. 核心代码,仅一个方法,130行,哦也!!

终于完成这个一直想做到的功能 – 在Java中,获取方法的形参(参数)的名字.由于这个类只做需要做的事,所以,我非常确信它比asm的vistor更快,更可靠.

public void list(int page , int pageSize) { //这个类的作用,就是拿到page和pageSize这两个名字,是的,是名字.
   //...
}

实现关键点:: 1. 跳过一切不需要的数据结构,如版本号,接口信息,字段信息 2. 只解析常量池中UTF8_String,因为只用到这个,其他都是多余的常量 3. 实现方法到descriptor的转换函数,因为字节码中的方法签名,是descriptor格式的

代码中含义泛型,直接贴这里的话,页面显示比较麻烦,就上个截图吧.

代码已经提交到nutz,并添加了一个gist,欢迎使用,如果有任何解析失败的类,非常欢迎发送给我进行检测.

总结一下值得注意的写法: 1. DataInputStream.skip跟DataInputStream.skipBytes不是一回事,当较大的数值传入skip方法,这个方法实际跳过的字节数,往往小于预期.虽然skipBytes也并不保证完整跳过,但至今没发现非完整跳过的情况

DataInputStream.readUnsignedShort()的返回值是int,而readShort的返回值是short,以前一直以为short是无符号的呢!! 好吧,还有readUnsignedByte方法
常量池中的CONSTANT_Long和CONSTANT_Double是8byte数据,其之后的一个常量池位置,是不可使用的,必须跳过. 贴一下JVM标准的中的描述:

All 8-byte constants take up two entries in the constant_pool table of the class ﬁle. If a CONSTANT_Long_info or CONSTANT_Double_info structure is the item in the constant_pool table at index n, then the next usable item in the pool is located at index n +2. The constant_pool index n +1 must be valid but is considered unusable. 有个小注释:** In retrospect, making 8-byte constants take two constant pool entries was a poor choice.** 好吧,愚蠢的选择,但这是历史遗留问题了…

这个类,兼容到JDK7. Class Format : http://docs.oracle.com/javase/specs/jvms/se7/html/jvms-4.html

提醒: 这个类无法获取接口的形参,因为接口的class文件并不保存变量名

NutzMongoSession -- 轻便的分布式Session实现

2012-03-06 03:20:40 +0800

作为Ngqa项目的其中一个功能, NutzMongoSession已经开发完成,并迁入zTask项目中,与NutzMongo的代码整合.

1. 用法 基本配置(web.xml),接管全部请求,并替换其获取会话的req.getSession方法:

    <filter>
        <filter-name>mongoSession</filter-name>
        <filter-class>org.nutz.mongo.session.MongoSessionFilter</filter-class>
    </filter>
    <filter-mapping>
        <filter-name>mongoSession</filter-name>
        <url-pattern>/*</url-pattern>
        <dispatcher>REQUEST</dispatcher>
        <dispatcher>FORWARD</dispatcher>
        <dispatcher>INCLUDE</dispatcher>
    </filter-mapping>

在项目启动的代码中,加入下面的语句:

new MongoSessionManager(dao).register(servletContext, null);
//其中,dao是MongoDao的实例

2. 与标准HttpSession的差异 可存放的对象类型: 普通数据类型,MongoDao所管理的Pojo,一切可以顺利json序列化/反序列化的对象由于是分布式的Session,必须考虑对象的状态托管问题,上代码:

User user = new User();
user.setName("wendal");
session.setAttribute("me", user);
user.setName("ABC"); //这个方法调用,改变了对象的属性,但没有再次调用session.setAttribute
//....

//另外一个方法里面
String myName = ((User)session.getAttribute("me")).getName();
//这里所得到的值,将是"wendal"而非"ABC"

//------------------------------------------------------------------------------------

//而,如果User是一个MongoDao所管理的bean的话,那么,它的
session.setAttribute("me", user);
user.setName("ABC"); //这个方法调用,改变了对象的属性,但没有再次调用session.setAttribute
dao.save(user); 把user更新到mongo

//另外一个方法里面
String myName = ((User)session.getAttribute("me")).getName();
//这里所得到的值,将是"ABC"

3. 获取全部Session 一直以来,我都以为无法通过标准的ServletAPI简单获取当前应用的全部Session,直至我完成了NutzMongoSession,才发现HttpSession接口有一个已经废弃的方法可以做到好吧,我承认,我误导了很多很多童鞋….

req.getSession().getSessionContext().getIds();
//这样就能拿到全部Session的Id,然后通过Id,获取
req.getSession().getSessionContext().getSession(id);
//来获取具体的Session

为了与标准的HttpSession最大兼容,所以,NutzMongoSession也实现了这个方法.

4. 不足之处 清理过期Session的算法,还需要改进,因为在服务器端,循环执行new Date()还是有一定成本的

当前, NutMongoSession已经应用在Ngqa和zTask,效果还不错. 有了NutMongoSession, 应用做水平扩展就会很方便了,呵呵

Win8消费者预览版无法拨通VPN的解决方法

2012-03-03 02:56:47 +0800

用上Win8已经2天了,其中就纠结的莫过于VPN拨号失败…

失败的原因是, VPN拨号是,会自动把计算机名做为域,并附加到验证信息中!! 非常非常纠结的一个行为,而且无法自行输入(^&$&#%&$^%&)

几经探索,终于找到一个方法,就是设置VPN的选项,让其先拨ADSL:

拨号时,就会出现对话框了.. 鸡冻啊!!:

SSH隧道+Polipo+Pac文件--打造翻G功F夫W墙的共用平台

2012-02-26 10:15:59 +0800

自认翻X墙高手,却与同事交流的时候败下阵来,我最初还口口声声说几条命令就能搞定,绝对米问题. 结果,俺发现,这玩意还是有点技术含量的… 不过,经过我不断提炼,最后是十几条命令搞定(关键语句仅3条,即启动3个进程),哦也!!

需求基本上是这样: 客户端只需要配置一下代理服务器,就能做到需要翻墙就翻墙,不需要就走普通渠道.

最初,我的想法 1. 直接ssh隧道 – 只有部分程序支持sockt5代理 2. squid+ssh隧道 – squid压根不支持sockt5的后端代理,我靠 3. squid+Polipo+ssh隧道 – 有点靠谱了,我差点就狠心学一下squid恶心的配置文件 4. nginx+Polipo+ssh隧道 – 代理https有点问题,我一直没解决

在本地一台Linux服务器,创建用proxy,创建sshkey并上传到国外的vps:

#添加用户 adduser proxy #切换到proxy用户 su proxy #创建ssh密钥,一路回车 ssh-keygen #将刚刚生成的key,上传到国外vps,以便进行无密码登录 ssh-copy-id -i ~/.ssh/id_rsa.pub root@nutz.cn
创建SSH隧道:

ssh -D 127.0.0.1:7070 -N -c blowfish -C -4 -2 root@nutz.cn & #解释:

-D 127.0.0.1:7070 监听本地7070端口,转发到远程服务器

-N 不启动shell

-c blowfish 采用blowfish加密,更快更安全

-C 压缩数据

-4 强制ipv4

-2 强制使用SSH2协议
编译并启动Polipo

#如果有git客户端 git clone git://git.wifi.pps.jussieu.fr/polipo –depth=0 #如果木有,则下载压缩包 wget -O polipo.zip –no-check-certificate https://github.com/jech/polipo/zipball/master unzip polipo.zip

cd polipo #或者是unzip出来的文件夹

#编译 make

#启动Polipo ./polipo socksParentProxy=localhost:7070 daemonise=true proxyAddress=192.168.9.100 proxyPort=8080 #这里的7070,就是SSH隧道所监听的地址
下载并对外提供pac文件

wget -O proxy.pac http://autoproxy2pac-charlie.appspot.com/proxy/192.168.9.100/8080?download #这里的ip及端口,需要对应Polipo的设置哦

#用Python来启动一个简单的http服务器,用于对外提供pac python -m SimpleHTTPServer 8000

这样,就大功告成了,只需要在IE中设置一下自动代理脚本的URL,就能自动判断是否走代理了:

http://192.168.2.100:8000/proxy.pac

扩展设置:

#防ssh短线,在服务器端的/etc/ssh/sshd_config
ClientAliveInterval 60
ClientAliveCountMax 10000000

还需要解决的问题: 1. Polipo崩溃后自动重启 – 一个监护进程 2. SSH隧道短线自动重连 – 同上 3. 流量控制 – 加个nginx?squid来控制? 4. 限制视频,下载 – 同上 5. 用户过滤 – 同上, 我想到了伟大的nginx-lua模块

鸣鸣与本地樱花

2012-02-26 03:46:35 +0800

广州市花都区梯面镇,一小片的樱花树

鸣鸣与樱花合影

小樱花特写2

小樱花特写1

相机: 富士, 非单反, 纯傻瓜机未PS,但用Windows自带的画图工具缩小的尺寸.

Nutz-Socialauth 1.b.3 -- 支持国内社会化登录(OpenId)

2012-02-23 10:08:55 +0800

作为Ngqa的子项目之一,开发了2周,终于能拿得出手了

这个项目算是socialauth的一个插件项目,加上本项目的代码,将支持以下的社会化登录(打星号的是本项目添加的登录方式,率先支持github和BrowserID哦):

google
yahoo
twitter
facebook
hotmail(msn)
*QQ连接(qq)
*新浪微博(sina)
*开心网(kaixin001)
*github
*豆瓣(douban)
*百度(baidu)
*支付宝(alipay)
*人人网(renren)
Foursquare(foursquare)
Yammer(yammer)
*腾讯微博(qqweibo)
*搜狐(sohu)
*淘宝(taobao)
LinkedIn(linkedin)
MySpace(myspace)
AOL(aol)
*BrowserID

有2个尚未验证的,由于提供商本身的原因,尚未解决 –> *网易(net163) – 神经病机制,竟然要求自行返回原网站输入Code –> *盛大(sdo) – 成功过,然后又挂了,QQ群直接拒绝我的加入请求,无解中…

虽然部分提供商有官方/非官方的SDK,但质量非常参差不齐,而且很多都依赖一大堆额外的jar, 故本项目没有使用这些SDK.

大部分网站采用OAuth1/OAuth2登录,部分网站在请求其OpenAPI时需要额外提供签名参数.值得指出的是盛大连接,自行实现了一套不靠谱的规范,成功率低,行为可预测性低.

就登录而已,这次开发,也了解到国内各家提供商对社会化登录/OpenID的态度. 态度最好的,莫过于新浪,完整且可靠的文档,其次是QQ连接. 部分网站,如支付宝/盛大,提供是代码,压根没文档!!

OAuth1与OAuth2的区别: OAuth1 是3次握手, 先检查网站的密钥的可靠性,然后转到用户登录界面,用户登录后再校验用户的返回 OAuth2 是2次握手, 网站引导用户到登录界面,用户登录后再校验用户的返回

国内有多家OAuth2提供商,部分提供商要求提供备案号,保密协议等等神奇的事,当然,在天朝,这都很正常.

下载地址: https://github.com/howe/ngqa/downloads

如果你有发现哪家网站提供了OAuth1/2登录的话,不妨提醒一下,很可能提供相应的实现哦

海淘 -- 地球绕一圈,价格反而便宜了

2012-02-22 04:41:03 +0800

2011年11月,第一次接触到海淘,现在已经有好几单

最初用的是百通,走了2单, 速度一般般,后来百通爆仓,外加当时风雷单价更低,所以至今最大一单走了风雷

价格: 海淘第一单,是OLAY的洁面刷,美国亚马逊$20,国内报价280, 汗吧… XBox360这种国内禁售品,更是绕了地球一圈… 赶上圣诞购物月, $199实在难以抗拒,呵呵,还返$10, 一个月之后再送一张$50-$10

运费: 百通26/磅,但不保价,很坑爹了… 距QQ群的反馈,貌似越来越不给力,单子越来越慢风雷28/磅,保$100,之前25/磅,这个月刚刚提价… 速度还不错

关税: 至今没被税过,外加风雷对部分货物是包税的

当前觉得风雷还是很靠谱的,虽然现在贵2元,还是比较值

附上几个网站: http://www.mgpyh.com/ 信息及时,立场比较中立 http://camelcamelcamel.com 价格跟踪,登记一下目标价,到位就有邮件通知,很方便 http://www.smzdm.com/ http://www.mgzpy.com/

Ngqa -- 不单单是一个QA系统

2012-02-19 01:34:02 +0800

项目地址: https://github.com/howe/ngqa

使用了 Nutz, Nutz-mongo, Nutz-web, Nutz-socialauth …

这项目的最初目的是为Nutz搭建一个完整好玩的QA系统,现在的作用远大于此:

Nutz-socialauth, 是本项目的其中一个亮点 – 支持30种以上的社会化登录(OpenId), 号称国内第一, 率先github这个专业程序员必备网站
完整可用的Demo – Nutz长期被投诉的重点,没一个完整可运行的,持续更新并提供支持的demo. 这个项目就突破这个问题,将包含足够丰富的注释及使用范例
作为一个QA系统,将有效积累Nutz的FAQ库
激活Nutz社区 – 作为一个公开的项目,在开发的过程中,Nutzer们参与进来,动手把项目运行起来

项目设计, 采用OpenAPI的思想, 网站页面,只是其中一个表现方式,开发完成后,将配备SDK,方便客户端扩展

其中一个核心就是SmartView,根据访问地址的后缀来判断需要执行的视图,而非固定的配置为一种视图,示例代码:

    public void render(HttpServletRequest req, HttpServletResponse resp,
            Object obj) throws Throwable {
        String uri = req.getRequestURI();
        if (uri.endsWith(".json"))
            new AjaxView().render(req, resp, obj);
        else if (uri.endsWith(".rss"))
            new RssView().render(req, resp, obj);
        else
            new JspView(viewValue).render(req, resp, obj); //这里默认跑jsp
    }

同时,这个项目也使用了即将发布的Nutz-Mongo, 是nutz与nosql数据库的首个结合,很多非常酷的功能哦

JActor最简单试用

2012-02-12 11:59:41 +0800

发现网上连一篇简单的入门都没有,我晕啊… 折腾了一下,终于变菜鸟了,把官方例子注释一下给大家了解一下

共需要3个类

import org.agilewiki.jactor.bind.SynchronousRequest;
public class Hi extends SynchronousRequest<string> {}
// 我觉得就是一个消息对象, 传递给Greeter类里面的synchronousProcessRequest方法,可以携带任意信息啦

//忽略import
public class Greeter extends Component {

    public void bindery() throws Exception {

        //这里绑定Hi对象的处理逻辑
        thisActor.bind(Hi.class.getName(), new SynchronousMethodBinding<Hi, String>() {
            @Override
            //一个处理方法,执行实际操作
            public String synchronousProcessRequest(Internals internals, Hi request) throws Exception {
                //这个request,就是外部传入的Hi实例
                return "Hello world!"; //还有无返回值的形式
            }
        });

    }
}

//忽略全部import
public class Main {

    public static void main(String[] args) {
        JAMailboxFactory mailboxFactory = JAMailboxFactory.newMailboxFactory(1);
        try {
            Mailbox mailbox = mailboxFactory.createAsyncMailbox();
            JCActor a = new JCActor(mailbox);
            (new Include(Greeter.class)).call(a); //登记一个调用
            JAFuture future = new JAFuture();
            String greeting = (new Hi()).send(future, a); // 不通过mailbox直接调用actor
            System.out.println(greeting);
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            mailboxFactory.close(); //必须关闭哦, 以确保全部信息都已经安全完成
        }
    }
}

官方教程地址: JActor Synchronous-Programming

纯Java处理CMYK格式(32位色深)的JPEG文件!!

2012-02-10 08:31:19 +0800

无限折腾之后,终于找到一个能用的纯Java的解决方法: 1. 获取jpeg格式的ImageReader 2. 通过ImageIO.createImageInputStream生成ImageInputStream 3. ImageReader和ImageInputStream协作,产生Raster 4. 使用createJPEG4通过色彩空间变化,生成BufferedImage 5. 重要: 把BufferedImage保存为临时的jpg文件,然后重新解析为BufferedImage

这样,最后得到的BufferedImage,将是一个普通的24位色深的RGB的jpg文件所对应的BufferedImage

注意, 第4步所产生的BufferedImage,进行某些操作时会报错,因为色彩空间是ColorSpace.CS_sRGB,所以,先保存到临时jpg文件,然后再生成标准的BufferedImage是非常重要的.

具体实现已经集成到Nutz的Images类

感谢: Sun java http://bugs.sun.com/bugdatabase/view_bug.do?bug_id=4799903 dsmart-30buy http://dsmart-30buy.iteye.com/blog/1226969

鸣鸣满一个太阳年了

2012-02-02 10:11:36 +0800

一年了, 很充实

上一张鸣鸣的小照片, 2个月的时候

鸣鸣2个月的小照片

初探Mongodb的Java驱动

2012-01-31 09:26:08 +0800

1. 数据格式传递 上个自己画的图 Mongodb-Java驱动基本流程

驱动里面操作的,是DBObject(用户提供的和已经转为Command格式的DBObject),OutMessage(可以转为byte[]写入Socket),Response,WriteResult(用户真正拿到的返回值)

层层封装,绕得我头都晕

2. 日志与Debug信息 日志采用JDK Logging,有1个比较关键的环境变量配置DB.TRACE,设置为true时,log的日志level会改变 … 我汗啊…. 原本以为另外一个配置DEBUG.DB也控制了什么东西,后来才发现,这配置完全没人调用,应该是历史遗留下来的

还有一些比较诡异的环境变量设置 MONGO-TRACKLEAKS – SimplePool里面的设置,同样作用于连接池 DEBUG.MONGO DEBUG.DBPOINTER – 已经废弃的类,直接无视吧 com.mongodb.cleanerIntervalMS – 定期轮询DB实例,执行 db.cleanCursors(true);

3. 切勿使用的类 com.mongodb.util.TestCase和com.mongodb.util.TestNGListener属于坑爹类,依赖TestNG,却不放在test文件夹中,MyAsserts也好不到哪里去 com.mongodb.util和com.mongodb.io包里面的类也不要用,很多类连驱动本身也没有使用!!

4. 对象序列化/反序列化的规则 比较有趣的是内置的Json序列化/反序列化类,里面解释了一些类型映射方面的规则(序列化的代码在JSon类,反序列的代码在JSONCallback): ObjectId — {$oid : “具体的值”} java.util.Date — {$date : “yyyy-MM-dd’T’HH:mm:ss.SSS’Z’“} 而且是UTC的,即不保存时区数据!! DBRefBase — {$ref : “集合名”, $id : 具体id的值} Pattern — {$regex:“正则表达式原型”, $options : “表达式的flag”} BSONTimestamp — {$ts: 具体时间, $inc:具体毫秒数} UUID — {$uuid : “uuid标准的toString()”} CodeWScope — {$code: 具体的值, $scope : 具体的值} Code — {$code: 具体的值} MinKey — {$minKey : 1} 没错,是固定为1 MaxKey — {$maxKey : 1} 同样是1 基本数据类型,封装类型,String,数组,List,Map当然都是支持的了,其他全部都是不可序列化的

而,真正进行DBObject转换为byte[]的类,是org.bson.BasicBSONEncoder,摘录一段关键代码:

        if ( name.equals( "_transientFields" ) )    //不会被序列化的东西,终于有藏身之所
            return;

        if ( DEBUG ) System.out.println( "\t put thing : " + name ); //竟然是syso,我晕

        if ( name.equals( "$where") && val instanceof String ){   //特别吧? 呵呵
            _put( CODE , name );
            _putValueString( val.toString() );
            return;
        }

        val = BSON.applyEncodingHooks( val );

        if ( val == null )
            putNull(name);
        else if ( val instanceof Date )
            putDate( name , (Date)val );
        else if ( val instanceof Number )
            putNumber(name, (Number)val );
        else if ( val instanceof Character )
            putString(name, val.toString() );
        else if ( val instanceof String )
            putString(name, val.toString() );
        else if ( val instanceof ObjectId )
            putObjectId(name, (ObjectId)val );
        else if ( val instanceof BSONObject )
            putObject(name, (BSONObject)val );
        else if ( val instanceof Boolean )
            putBoolean(name, (Boolean)val );
        else if ( val instanceof Pattern )
            putPattern(name, (Pattern)val );
        else if ( val instanceof Map )
            putMap( name , (Map)val );
        else if ( val instanceof Iterable)
            putIterable( name , (Iterable)val );
        else if ( val instanceof byte[] )
            putBinary( name , (byte[])val );
        else if ( val instanceof Binary )
            putBinary( name , (Binary)val );
        else if ( val instanceof UUID )
            putUUID( name , (UUID)val );
        else if ( val.getClass().isArray() )
            putArray( name , val );

        else if (val instanceof Symbol) {   //这个比较特别,在Json序列化中是不存在的,实际上就是对String简单封装一层
            putSymbol(name, (Symbol) val);
        }
        else if (val instanceof BSONTimestamp) {
            putTimestamp( name , (BSONTimestamp)val );
        }
        else if (val instanceof CodeWScope) {
            putCodeWScope( name , (CodeWScope)val );
        }
        else if (val instanceof Code) {
            putCode( name , (Code)val );
        }
        else if (val instanceof DBRefBase) {
            BSONObject temp = new BasicBSONObject();
            temp.put("$ref", ((DBRefBase)val).getRef());
            temp.put("$id", ((DBRefBase)val).getId());
            putObject( name, temp );
        }
        else if ( val instanceof MinKey )
            putMinKey( name );
        else if ( val instanceof MaxKey )
            putMaxKey( name );
        else if ( putSpecial( name , val ) ){
            // no-op
        }
        else {
            // 全都不是? 那就只能抛错了哦
            throw new IllegalArgumentException( "can't serialize " + val.getClass() ); 
        }

没有特别针对Timestamp进行优化,只会按其父类java.util.Date进行处理咯,且BSONTimestamp是仅限内部使用的

5. 连接池的实现 SimplePool,一个对象池, 同时也是DBPortPool的基础 – 即Mongodb的内建数据库连接池,使用synchronized进行实现

6. 内置的Java对象 – DBObject映射支持 没看驱动源码之前,一直以为没这方面的支持,实际上还是有一个的,那就是ReflectionDBObject, 用法简介:

public class TestReflectionDBObject {

    public static void main(String[] args) throws Throwable {
        Mongo mongo = new Mongo();
        DB db = mongo.getDB("wendal_test");
        Person p = new Person();
        p.setId(UUID.randomUUID());
        p.setName("wendal");
        DBCollection ps = db.getCollection("person");
        ps.insert(p);

        ps.setObjectClass(Person.class); //接受DBObject的子类
        Person p_db = (Person) ps.findOne();
        Assert.assertEquals("wendal", p_db.getName());
        System.out.println(Json.toJson(p_db));

        mongo.close();
    }

    public static class Person extends ReflectionDBObject { //必须继承,呵呵
        private UUID id; 
        private String name; //省略getter/setter
    }
}

恩,这次就分享这么多吧.

2011年回顾

2012-01-29 01:32:36 +0800

2011年,换了一家公司 – 号称第5家公司 2011年,接受了一份神奇的offer,神奇到我以为是去传销 2011年,最大的事情,当然是鸣鸣的出生,小家伙马上就要满一个太阳年了 2011年,第一次接触到海外网购,才知道绕半个地球,价格反而便宜好多 2011年,接触了好多新的编程语言,严重扩宽了我对编程的理解 2011年,接触NoSQL,刷新我对数据库的理解 2011年,我实现了RK2918的System可写及公开了其源码地址,引起不小的反响

新的一年,keep going!!

Mongodb学习小记

2012-01-26 10:54:17 +0800

实现自增(跟oralce的序列是一个概念):

public static Integer getAutoIncreaseID(String idName) {
    BasicDBObject query = new BasicDBObject("name", idName);
    BasicDBObject update = new BasicDBObject("$inc", new BasicDBObject("id", 1));
    return (Integer) XX.getDB()
            .getCollection("inc_ids")
            .findAndModify(query, null, null, false, update, true, true)
            .get("id");
}

把元素添加到数组,仅当数组中没有这个值

BasicDBObject query = new BasicDBObject("_id", new ObjectId("XXXXXXXXXXXXXXX"));
BasicDBObject update = new BasicDBObject("$addToSet", new BasicDBObject("tags", tag));
db.getCollection().update(query, update);

OpenId的登录信息,放入Mongodb中存放,使用JopenId

package org.nutz.viv.module;

@IocBean
@InjectName
@At("/user")
public class UserModule {

    static final long _5min = 300000L;
    static final String ATTR_MAC = "openid_mac";
    static final String ATTR_ALIAS = "openid_alias";

    private String enpoint = "Google";

    private OpenIdManager manager = new OpenIdManager();

    @At("/login")
    @Ok(">>:${obj}")
    public String login(HttpSession session) {
    manager.setReturnTo(Mvcs.getReq().getRequestURL().toString() + "/callback");
    manager.setRealm("http://"+Mvcs.getReq().getHeader("Host") + "/");
    manager.setTimeOut(300 * 1000);
    Endpoint endpoint = manager.lookupEndpoint(enpoint);
        Association association = manager.lookupAssociation(endpoint);
        session.setAttribute(ATTR_MAC, association.getRawMacKey());
        session.setAttribute(ATTR_ALIAS, endpoint.getAlias());
        return manager.getAuthenticationUrl(endpoint, association); //返回的是一个Google登录页面的地址
    }

    @At("/login/callback")
    public String returnPoint(HttpServletRequest request) {
    //checkNonce(request.getParameter("openid.response_nonce"));
        // get authentication:
        byte[] mac_key = (byte[]) request.getSession().getAttribute(ATTR_MAC);
        String alias = (String) request.getSession().getAttribute(ATTR_ALIAS);
        Authentication authentication = manager.getAuthentication(request, mac_key, alias);
        authentication.getEmail();
        BasicDBObject query = new BasicDBObject();
        query.append("email", authentication.getEmail());
        query.append("openid", "Google");
        BasicDBObject update = new BasicDBObject();
        update.append("set", new BasicDBObject("lastLoginDate", new Date()));
        DBObject dbObject = userDao.getCollection().findAndModify(query, null, null, false, update, true, true); //最后一个参数,表示如果没有相应的记录,则插入一条新的记录
        UserBean user = (UserBean) MapperUtil.fromDBObject(UserBean.class, dbObject);
        request.getSession().setAttribute("me", user);
        return "Login success!";
    }
}

findAndModify是个好东西,呵呵

最后,mark一下Mongodb手册的下载地址: http://dl.mongodb.org/dl/docs/

Viv -- 基于Nutz和BuguMongo的,使用Mongodb作为持久层的Issue管理系统

2012-01-21 03:44:09 +0800

项目地址: https://github.com/wendal/viv

项目的核心思想,是基于Issue的Tag而非Issue的Status, 由zozoh提出来,我只是扩展并按照自己的项目设计了一套,跟github的issue系统类似.

终于赶在春节前,把主要功能点完成了(页面还没做,看看谁愿意帮忙弄一个,前后台通信用ajax/json) 用户登录,新增issue,上传附件,添加comments … …

BuguMongo 项目主页 http://code.google.com/p/bugumongo/ 国产的小框架,自称”BuguMongo已在多个正式商业项目中使用，并取得了理想的效果。”.我的使用感受是, 总体不错,但还很不成熟. 1. 代码中的瑕疵还是比较明显的,我个人比较在意的是出错时不打印堆栈,严重错误时也不抛出异常… 2. 文档还不够齐备,JavaDoc缺失严重

这代表着,作者自己用得非常爽,但社区的人会碰很多很多的钉子… 我对某些错误真是无语+无语作为国内少有的mongodb框架,很希望它能持续发展下去.虽说Nutz的社区还不成熟,但发现BuguMongo的社区差不多等于0,基本上死寂 … 跟当年nutz刚发布的时候差不多. 看来Nutz社区与BuguMongo的社区做一些交流还是很有必要的,呵呵

回想自己参与开源事业这好几年,发现很多开源项目都需要突破一些坎:

1. 勇敢发布,并产生第一个使用者 >> 很多人想,这不是很容易吗? 看上去是的,但只需要到googlecode/github逛逛,你就能发现,很多项目连一个版本都没发布过,就消亡了

2. 收到第一个有用的Bug/Issue报告 >> 有用户使用才能产生bug/issue报告,才能发现一些你没有考虑到的情况. 真正发起一个项目并得到第一个bug/issue报告,对很多开源项目来说,那是消亡之前都等不到的

3. 开立社区(论坛,QQ群,等一切交流工具,并维持一定的人气) >> 维持一个论坛比一个QQ群累,但效果会比QQ群好,在我看来,论坛属于知识积累的一部分,持久化的, 而QQ是过程式,临时交流的结果.可惜nutz的论坛至今发展不起来,QQ群倒是非常热闹

4. 找到第一个共同开发者 >> 我已经深深感觉到找一个共同开发者对一个开源项目有多重要. 思想的碰撞,具体实现的差异,协助开发,等等,都非常有利于项目的延续.我自己也发起过,参与过不少的开源项目,很多很多,慢慢就变成个人项目,随之慢慢死去

各位,春节了哦,快回家吃饭吧@@@!!

Nutz 1.b.41 发行后记

2012-01-20 04:41:18 +0800

经过3个月的长跑, nutz 1.b.41终于发布了.这里所说的,与release note并不冲突.

我个人要提一下Mvc的一个新功能, Mvcs.getReq()等方法:

    /*获取当前HttpServletRequest对象*/
    public static final HttpServletRequest getReq() {
        return REQ.get();
    }

    /*获取当前HttpServletResponse对象*/
    public static final HttpServletResponse getResp() {
        return RESP.get();
    }

    public static final String getName() {
        return NAME.get();
    }

    /*获取当前Action上下文*/
    public static final ActionContext getActionContext() {
        return ACTION_CONTEXT.get();
    }

    /*获取ServletContext*/
    public static ServletContext getServletContext() {
        return servletContext;
    }

    public static IocContext getIocContext() {
        return IOC_CONTEXT.get();
    }

以上新增的API,既是对用户需求的响应,也代表一种妥协. 用户可以在任意代码中直接获取当前Req和Resp,而不再需要自行写Filter.但是,从代码的美观程度说,是一大让步,我自己看着都感觉有点不爽. 这个修改,顺带了另外一个功能,就是声明多个NutFilter并使用不同的配置. 之前的实现,最后一个Filter的设置,会覆盖之前所有配置.

值得一提的,还有酝酿中的Nutz基金会,看看2月底之前,能否完成创建.

Nutz的发布,少不了打包,签名,上传,release等繁琐的操作, 貌似我每次都忘记咋签名,所以呢,写了个小脚本

export VER="nutz-1.b.41"
gpg --armor --detach-sign $VER"-javadoc.jar"
gpg --armor --detach-sign $VER".jar"
gpg --armor --detach-sign $VER"-sources.jar"
gpg --armor --detach-sign $VER".pom"

还有一个小事情,就是svn,为了尝试1.7.2版的svn,在Ubuntu上编译了新版,却无法使用,十分纠结!! 然而,本地安装乌龟,然后checkout,竟然飞快!!难以置信啊,2分钟完成!! 新版的svn,的确已经改进为单个.svn文件夹,清爽了很多,但我想说一句: 晚了,svn,你改进的速度太慢了!!

香港两天,离开天朝的2天!!

2012-01-15 09:53:44 +0800

上周,请了2天假,到香港逗留了2天,离开天朝的感觉还是不错的

好久好久没在香港住了,起码5年.这次跟老婆女儿一起住一间小酒店,非常郁闷… 没住过这么小的房间,比我自己办公的小书房还小!!

这趟香港之行,收获还是不少的离开主干道,进入市井中游荡 – 跟我去过的大小城市一样,转个弯,过条巷子,就是另外一个天地 – 8块钱的车仔面,鸣鸣吃得不亦乐乎 – 6块钱的糖葱饼,很有意思的街边无证小摊档 – 一群悠闲自在的中巴(红色公共小巴)司机,抽着烟,聚在一起大声交谈 – 市井中的菜市场,跟大陆的菜市场没啥两样,除了地板比较干净之外

我依然很欣赏香港的交通,地铁,班次不算太密集,但非常高效 – 2条线路并行2~3个站,供用户换成,分别对应两个方向的列车 – 乘客下车后,直接走到对面就是你需要转的列车,班次一一对应,基本上做到无人滞留 – 使用站前变轨,起点和终点是同一个地方,只有一条铁道

香港并非不夜城,9点开始,很多店铺就开始关门了,超过11点,主干道的店铺就没几家还在营业了.小巷子倒不是,某些店铺(如车仔面)却开始营业了,不时有人光顾. 12点之后就不知道了,呵呵,俺睡觉去了

我发现一个很有趣的东西,就是平时所说的”牛皮癣”式的小广告,在香港也非常非常常见,而且是入夜之后!!雨后春笋一样冒出来,难道是警察都下班了,没人管?? 很多还是比较Sex的呢,最好玩的是,我单独下楼买东西的时候,转过一个弯,看到几个哥们在很努力地贴海报,心想,真勤奋啊!! 于是凑过去一看,我X,“援交日记”的舞台剧(好象是),有个哥们还愣一下(我穿着黑衣黑裤黑鞋,还挎个黑包) … 看了我几眼,然后我就走开了… 等我买完回来,发现那一幅墙满满地贴满了,效率真高啊!!

去香港,最烦的就是过关,人多的时候等N久,所以呢,没办法,拿钱消灾呗,买了”广九直通车”,车程2个小时,过关5分钟搞定,155元/趟

香港,还是很不错的,呵呵

NutDao配置多数据源

2012-01-06 10:20:11 +0800

首先,我必须声明,这是一个非常简单的方法,很多小菜没做出来,是因为把nutz想得太复杂

数据源(或者是数据库连接池),在Nutz.Ioc看来,是一个普通的Bean,没任何特别之处. 再强调一点,除了$aop命名的bean用于配置Aop之外,其他所有的bean都是一视同仁的,没有任何特别关照!!

先看看标准的单数据源配置方法:

var ioc = {
    dataSource : {
                type : "org.apache.commons.dbcp.BasicDataSource",
                events : {
                        depose : 'close'
                },
                fields : {
                        driverClassName : 'org.h2.Driver',
                        url : 'jdbc:h2:quick3;AUTO_RECONNECT=TRUE;CACHE_SIZE=65536',
                        username : 'sa',
                        password : ''
                }
        },
        /*定义NutDao*/
        dao : {
            type : "org.nutz.dao.impl.NutDao",
            fields : {
                dataSource : {refer : 'dataSource'}
            }
        }
}

然后,扩展成多个数据源:

var ioc = {
/*定义第一个数据源*/
    dataSource : {
                type : "org.apache.commons.dbcp.BasicDataSource",
                events : {
                        depose : 'close'
                },
                fields : {
                        driverClassName : 'org.h2.Driver',
                        url : 'jdbc:h2:quick_a;AUTO_RECONNECT=TRUE;CACHE_SIZE=65536',
                        username : 'sa',
                        password : ''
                }
        },
        /*定义NutDao*/
        dao : {
            type : "org.nutz.dao.impl.NutDao",
            fields : {
                dataSource : {refer : 'dataSource'}
            }
        },
/*定义第二个数据源*/
    dataSource2 : {
                type : "org.apache.commons.dbcp.BasicDataSource",
                events : {
                        depose : 'close'
                },
                fields : {
                        driverClassName : 'org.h2.Driver',
                        url : 'jdbc:h2:quick_b;AUTO_RECONNECT=TRUE;CACHE_SIZE=65536',
                        username : 'sa',
                        password : ''
                }
        },
        /*定义第二个NutDao*/
        dao2 : {
            type : "org.nutz.dao.impl.NutDao",
            fields : {
                dataSource : {refer : 'dataSource2'} /*这里引用第二个数据源*/
            }
        }
}

明白了吗? 所谓多数据源的配置,其实就是几份单数据源的配置文件放在一起. 一个NutDao实例,对于一个数据源. 由于ioc里面的bean是不能重名的,所以,你需要做的,仅仅是为不同的数据源设定不同的名字,仅此而已.

关于多数据源的事务管理问题,请看另外一篇博客: “Nutz事务模板值得注意的细节“

Java/Python/Lua/Lisp的胡思乱想

2012-01-05 12:52:55 +0800

本已入睡,但脑海中不停翻滚几个编程语言的好坏,于是爬起来写博了

Java – 我接触时间最长,自认最拿手的

Java的语法非常精辟,但相对于当前流行的动态语言又显得非常糟糕. Java发展了这么多年,一直保持非常好的兼容性和持续改进,以前是Sun这个善意的独裁者,现在是邪恶的Oracle. 有很长一段时间,我一直认为跨平台是Java最大的优势,直至最近,我的想法改变为: Java跨平台承诺,是各种第三方类库繁荣发展的根本源泉;苛刻的静态类型检查,令人厌恶的声明式异常机制,恰恰成就了Eclipse之类的强大IDE,因为在Java中,方法的调用是可预知的,可控的,可推导的;多年发展的JVM,在我看来,依旧是顶级的虚拟机实现;神奇的Java语言,其GC机制是精益求精,大家都在骂gc,但大家都在使用. 当年我爱上Java,是因为这种语言能表达任何我想实现的东西,为此我把多少想法动手敲了下来. 我是这样描述的: 如果一件事手工完成需要1个小时,而编写一个Java程序来完成,编码需要59分钟,运行1分钟,那我必然选后者. 现在基本上是,东西拿到手,立马出Java实现的思路,然后考虑用Java来做是否合适

Python – 与操作系统交互可以很美妙

我喜欢Python,但它不够好 Python语法很优美,写出来比Java好看.但,文档太烂,类库太乱!! 虚拟机(python解析器)太慢!! 没有一款足够好用的IDE,因为在我看来IDE是提高生产效率的关键因素之一. Python总体设计还是不错的,就是有些细节非常反人类,例如import和变量作用域问题,无数次踩坑!! Python访问操作系统提供的东西实在方便,比Java节省80%以上的代码,但还是那句,文档太烂,不到抛错的时候,就根本没想到某某方法竟然能抛出异常!! 真不明白为何Python不改进一下虚拟机的性能呢?!! 现在连js都有V8引擎了!!

Lua – 简约,而不简单

这种语言简直就是1天学完语法,1天看完API,开工干活的级别. – 呵呵,有点夸张了整个语言,就1w行左右,源码仅那么几百k,实在让我惊叹. 这种语言还是很不错的,“只做一件事,做好一件事”,就是做最好的嵌入式语言. 突然很期待有一本Lua源码剖析,呵呵,看看这语言是如何实现出来的

Lisp – this is another world

没错,那是另外一个世界.这个语言给我最直接的觉悟是,我所编写的任意代码,其实就是对语言的扩展,例如nutz,其实就是JDK的一个超集. Lisp的精髓,就存在于宏,变量,函数 3种基本元素中真正被执行的Lisp代码,只有变量和函数,而最精妙的宏,是用于改写源码的. 包含宏的代码–>展开宏–>变量+函数宏,所接受的input就是源码本身,输出结果同样是源码. 实际上就是2种源码,一种是你定义的包含宏的Lisp源码,一种是只含有变量和函数的Lisp源码. 有意思的是,宏实际上能够在被执行前才展开,运行时也能动态创建/修改宏/添加宏,这样就创建出无限的可能性 – 这是一个很美妙的过程,绕过这个弯,就有很奇妙的想法,呵呵

恩,一点了,该睡觉了…

新年了,开始写论文了~_~

2012-01-04 12:45:48 +0800

拖了一年了,老婆也发话了… 看来是时候认认真真把论文搞定了

文档啥的,一直都不是强项,宁愿写100行代码也想不出10行文档的我,要写出一份几十页的论文,真是情何以堪啊…

文档格式

说明一下,我这里说的不是文档的排版,而是文档的存储格式

最初的想法,当然是传统的Work文档,直观易用,但,这玩意真不适合程序员使用,尤其是没有版本管理,转换成其他格式也非常不便昨晚学了一下传说中的Latex,这玩意强大得很,简直不是人用的…. 一眼看上去,都不知道最终文档长啥样

所以呢,我决定尝试一把,用zDoc或者Markdown来写.现在主要是倾向于zDoc(即nutzdoc),理由很简单,自己参与的项目,如果有bug也立马修正. 但保险起见,实现zDoc–>MarkDown转换器也立马提上日程,这个需求最初是nutz迁移到github时提出的,后来发现github的wiki的不如google code做得好,这个需求也就沉寂下去了

文档管理

既然文档是zdoc格式,那么,版本管理和持续集成也就不成问题咯 Git – 版本控制,话说我已经爱上这玩意,svn已经N久没有使用过 Hudson – 不知道什么原因,我一直喜欢用这个进行持续集成,我也用过其他的啊,咋就还钟情于hudson呢

进度管理

我想,写个论文,跟一个小小的项目应该也差不多了吧? Google calendar – 作为资深G粉,简单而实用的Google日历当然是首选.Google日历的主要用途就是记录进度,毕竟我现在能预知的,仅有一个时间点是钉死了的,不可能延期或修改的,那就是论文的截稿时间~_~

好吧,写开题报告去~_~

Python: 为对象动态添加函数,且函数定义来自一个str

2011-12-03 08:24:42 +0800

在Python中,通常情况下,你只能为对象添加一个已经写好的方法

需求:传入一个str类型的变量,其值是一个完整的合法的Python函数定义,然后为一个对象添加这个函数:

method_str = u'''
def say(self, name)
    print 'My name is', name
'''
class MyClass :

    def __init__(self) :
        pass

    def extends(self, method_name, method_str) :
        #完成这个方法...

obj = MyClass();
obj.extends('say', method_str)
obj.say('wendal') #打印出My name is wendal

想了不少路子,在Python的QQ群里面也得到不少灵感,最后顺利实现:

    def extends(sefl, method_name, method_str) :
        #_method = None
        exec method_str + '''\n_method = %s''' % method_name
        self.__dict__[method_name] = new.instancemethod(_method, self, None)

简单解释一下: method_str在exec前,改变为:

method_str = u'''
def say(self, name)
    print 'My name is', name
_method = abc

然后, exec执行后,_method变量就赋值为say函数接下来,就是Python的自省机制了,通过new模块,生成特定对象(本例中是self)的实例方法最后,为特定对象添加say这个函数

恩,这例子,就足以体现出Python在这方面的扩展性 1. method_str是一个字符串,可以动态创建,例如用户输出,模板生成 2. 方法的名字可以通过字符串分割等方法获取到

昨晚完成这个实现之后,足足兴奋了一个小时,哈哈 – 2行代码就搞定!!

编译RK2918源码 -- 简单说明

2011-11-18 01:23:23 +0800

自从公布RK29的源码地址,各种模块都成为可能

我也说说如何编译吧, 环境 Ubuntu 10.10 server x86版

第一步当然是下载源码并解压啦, 以andy pad的源码为例

cd ~/ mkdir android cd ~/android wget https://bitbucket.org/paulobrien/android_kernel_andypad/get/4c6b4f4c48d1.zip unzip 4c6b4f4c48d1.zip mv paulobrien-android_kernel_andypad-4c6b4f4c48d1/ rk29
安装依赖包

sudo apt-get install lzop sharutils libncurses5-dev vim
下载交叉编译器(我个人认为是错误翻译,应该叫跨平台编译器) arm 4.4.0

cd ~/android wget http://dl.google.com/android/ndk/android-ndk-r4b-linux-x86.zip unzip android-ndk-r4b-linux-x86.zip mkdir toolchain cp -r android-ndk-r4b/build/prebuilt/linux-x86/* toolchain/
拷贝编译设置

cd ~/android cd rk29 cp arch/arm/configs/rk29_ddr3sdk_defconfig .config #提醒: configs文件夹下面有多个配置文件,具体差异不清楚

#尝试编译一下内核 make kernel #如无意外,你应该看到几个关于配置的提示,要求你进行选择,直接回车选默认值即可,然后编译完成
完整编译一次

cd ~/android/rk29 #我本地解压出来的源码包,其中的drivers/usb/storage/debug.h会出错,所以需要自行下载一个 cd drivers/usb/storage rm debug.h wget https://bitbucket.org/paulobrien/android_kernel_andypad/raw/4c6b4f4c48d1/drivers/usb/storage/debug.h

cd ~/android/rk29 make #一起顺利的话,恭喜你,成功了!!
编译具体的模块,以cifs.ko为例

#打开配置选项界面 make menuconfig

#File system –> Network File system (按空格,让其启用) –> CIFS support (按空格,直至变成M,即模块) 按Esc无数次,然后提示是否保存,选保存

#编译cifs模块 make M=fs/cifs

#应该会打印出 cifs.ko字样,查看一下 find -name “cifs.ko” #你就应该看到编译好的cifs.ko模块

#提醒一句, CIFS模块,还需要slow-work.ko和nls_utf8.ko,都可以用类似的方法进行编译得到

反馈1 : 编译slow-work.ko,需要修改slow-work.c哦, 请查看 http://forum.xda-developers.com/showthread.php?t=1113191

如果你遇到什么编译问题,欢迎留言交流哦

Git的几个实用小技巧

2011-11-14 10:51:50 +0800

不止一次听到抱怨说, Git库好大啊,把整个历史都拉下来,慢死了我情何以堪呢?!! 你可以单单取最后几个,甚至最后一个版本的啊?

#仅获取最新版和一个历史版本,即最后2个版本
git clone git@github.com:nutzam/nutz --depth=1

#看看下载了多少数据:
Cloning into nutz...
remote: Counting objects: 2928, done.
remote: Compressing objects: 100% (1956/1956), done.
remote: Total 2928 (delta 1212), reused 2179 (delta 831)
Receiving objects: 100% (2928/2928), 3.20 MiB | 1.06 MiB/s, done.
Resolving deltas: 100% (1212/1212), done.

#仅3.2mb哦, 小很多了吧?

上面的git clone,仅获取了最后2个版本,我是如何知道的呢?

cd nutz
git rev-list master

#只有2个显示哦:
eeb43e7984e7376f09896a201f82ec9fb5936e21
e905483933c0f16c1c0820c8b1834dbcb5e0c06a

#你也许也已经发现,最新版是最先显示的,rev比较多的时候有点不方便,那么:
git rev-list master --max-count=10
#上面的命令,一眼你就明白了

还是不信?好吧,看具体的log信息:

git log --pretty=format:'%h : %s' --topo-order --graph

#打印:
* eeb43e7 : fix issue #107
* e905483 : add log when load iocObject in ComboIocLoader

#如果你做了一些tag,只希望获取某两个tag直接的log
git log --pretty=format:'%h : %s' --topo-order --graph Tag1..Tag2

默认情况下, git执行N次操作后,才会压缩空间,我一般心情好的时间就敲一下:

#这个命令耗时是比较长的哦
git gc --aggressive

#快速指令
git gc

好吧,我承认,很多内容都是从”Git Community Book 中文版“学来的 – 你会很神奇地发现,我竟然是翻译协作者之一,呵呵

一波三折的一个月,鸣鸣的腹泻终于好了,我也恢复元气了

2011-11-13 10:04:57 +0800

终于有心情,有闲情来写blog了

鸣鸣的腹泻,终于告一段落,我自己也渐渐恢复元气 .. 几个安乐觉,几瓶白兰氏鸡精…. 最重要的,当然是鸣鸣玩耍的嬉笑声

这一次腹泻,可以算是鸣鸣出生以来的第一次生病, 揪心啊….

起初,只是轻微的腹泻,水样, 鸣鸣也不哭,也不闹渐渐地,腹泻的次数不断增加,最高峰时,1~2小时一次,鸣鸣的精神状态也开始不佳恩,鸣鸣还是大哭了, 因为不断腹泻导致小屁股红肿,每次腹泻都让她很疼 – 呜呜….

首先是去了两次的区人民医院,第二次差点跟医生吵起来 – 叫我怎么说呢,事情就是发生了由于我坚决反对吊针,那医生几乎发狂了,竟然向后推了一下鸣鸣的头,最后,打了一支屁股针,开了点冲剂第二天,直奔省妇幼保健院,二话没说,验大便 – 肠炎+腺病毒感染, 接着一句: 还好,不严重 … 没去打针,没去吊针,只开了一次中药肚脐贴,一瓶氧化锌,3颗庆大霉素(医生说不入血,没事). 贴好肚脐,喂了一次庆大霉素,帮她涂氧化锌到小屁股,然后就睡觉了. 中午补涂氧化锌的时候,竟然还亲了一下妈妈,露出点点笑容 – hold不住啊… 精神状态明显好转啊!! 当天, 腹泻次数明显减少了, 也不哭闹了 – 我能不激动吗?!! 之后几天,复诊了两次,最后一次显示无发炎 – 俺是不是应该捐的钱给医院呢??

Mark一下省妇幼的用药: 1. 庆大霉素3颗,实际吃了1.5颗,因为每次仅吃半颗 2. 3次肚脐贴,不知道什么成分 3. 钙/B12冲剂 4. 纽曼斯 – 一种复合益生菌,在医院之外买的,挪威进口, 大概10元/颗,一瓶30颗,每天1~2次 – 你觉得贵吗?病好了,啥都值! 5. 自己买了一些丁桂儿脐贴, 感觉不错

去区人民医院药费>>检查费去省妇幼保健院检查费>>药费

我很不爽区人民医院的那位医生,其一是推鸣鸣的头,其二是不停强调之前哪个患儿怎么怎么样了 – 吓唬我?觉得我的心不够乱?你到底想咋样呢? 省妇幼,也有不足的地方,检查费还真不少,值得一提的是过敏原检查,没见过鸣鸣哭得这么厉害(前一晚打屁股针的阴影?),那叫一个揪心啊,而且负责检查的护士态度很不好

恩,这次总算过去了,经过一个星期的调养,每天减少到1~3次,安心多了

还是比较纠结为什么会生病呢?可能的原因: 1. 妈妈喝奶粉过多? 因为病之前一周,翻倍地喝 2. 妈妈吃蛋白?? 难道是过敏所致? 3. 喂猪肝?? 难道也过敏? 4. 吹空调?? 说不清了…

这次,我还是没能清醒面对,以至于一直没想起来”丁桂儿脐贴”这类狗皮膏药 – 急起来就乱啊,不够蛋定啊

RK2918 内核源码 -- 想不到吧?!

2011-11-03 09:06:50 +0800

想不到, 我竟然找到了, 这都要感谢一位外国友人的提示!!

还是那句, 对国人保密,对外国人公开 – 不能太”云南白药”啊!!

下载地址: http://www.odys.de/downloads/software/odys_xpress_GPLSourceCode.zip

包含: busybox源码 e2fs源码 kernel源码 – 当然,这才是最关键的

根据其日期,猜测是SDK 1.x的作品, 不过,一般来说,h文件都不会大改的,呵呵!!

捐点钱给自己喜欢的开源软件

2011-10-18 09:17:54 +0800

声明: 本文并非为Nutz募捐

昨晚,点了几次鼠标,填了信用卡资料,一笔微不足道的捐款送达Python基金会

回想那些捐款过的开源/免费软件,我的款项也许还不够作者买瓶红酒或者吃一顿KFC, 但我的确捐了,以表达我的感激之情,这难道不就够了吗?

感觉国内的开源/免费软件生存环境还是太差: 1. 第一次发布, 99.99%被骂山寨,没创意…. 2. 免费的,就要求开源,开源的就骂质量差 3. 只知道索取,不会有所贡献 – 拿到源码就跑,有bug也不报告,更别说捐款了 …

当然,大家的理由都很多,很充分,很现实: 1. 没钱 2. 技术不够 3. 没时间 …

捐10块钱,报个bug,发邮件咨询一下作者,帮助一下新手,写blog介绍一下经验,有这么难吗?

曾经(其实现在也想)为nutz建一个基金会,但在中国,这是不现实,不可行的. 你无法建立一个合法合理的民间基金会, 注册资金,审批,都是无法通过的,原因大家都懂.

恩,牢骚完,继续走我的路,每个月挑点喜欢的软件,或是购买,或是捐款,呵呵

Nut.Test -- 使用Nutz一样能方便地进行单元测试

2011-10-16 10:22:36 +0800

首先,感谢Jay提出一个需求.

这个功能很有可能出现在1.b.40中

当前Nut.Test代码,主要解决以下几个问题: 1. 测试方法使用NutzDao操作数据库,希望在测试方法执行完成后进行回滚 2. Ioc支持,方便获取与实际生产环境类似的Ioc注入功能,方便进行功能测试

这个测试Runner, 很好地平衡了侵入性与灵活性, 让用户以很低的成本与耦合度测试Nutz代码

所以,我新建org.nutz.test包, 核心类NutzJUnit4ClassRunner,这个类本身非常简单

public class NutzJUnit4ClassRunner extends TestClassRunner {
    public NutzJUnit4ClassRunner(final Class klass) throws InitializationError {
        super(klass, new NutTestClassMethodsRunner(klass));
    }
}

核心代码位于NutTestClassMethodsRunner

public class NutTestClassMethodsRunner extends TestClassMethodsRunner {

    //其他辅助方法,属性

    protected void invokeTestMethod(final Method method, final RunNotifier notifier) {
        //处理事务回滚问题,判断当前方法是否需要自动回滚
        ... ...
        //检查Ioc支持,主要是判断当前类及父类是否标注了@IocBy
    ... ...

    //具体执行
        //如果不需要自动回滚,那么,直接调用父类的方法,按原生步骤执行

        //事务自动回滚的实现,就具体的执行过程,以事务模板包裹,并确保抛出异常
        try {
            Trans.exec(new Atom(){
                public void run() {
                    NutTestClassMethodsRunner.super.invokeTestMethod(method, notifier);
                    throw JustRollback.me();//这样,无论原方法是否跑异常,事务模板都能收到异常,并回滚
                }
            });
        } catch (JustRollback e) {}
    }

    //如果包含Ioc支持,并且当前类是一个IocBean的话,就可以从Ioc中获取对象
    protected Object createTest() throws Exception {
        if (NutTestContext.me().ioc != null && klass.getAnnotation(IocBean.class) != null)
            return NutTestContext.me().ioc.get(klass);
        return super.createTest();
    }
}

整个实现,共用到4个注解 @NutTest @IocBy @IocBean @Inject 这里的@IocBy的具体行为,与Mvc中的@IocBy有轻微不同,因为没有web上下文 @Aop,声明式Aop均可生效,效果与MVC中的效果一致

使用示例

@RunWith(value=NutzJUnit4ClassRunner.class)
@IocBy(type=ComboIocProvider.class,args={"*org.nutz.ioc.loader.json.JsonLoader","ioc/",
      "*org.nutz.ioc.loader.annotation.AnnotationIocLoader","net.wendal"})
@IocBean
public class AuthServiceTest {

    @Inject
    private AuthDao authDao;

    public void setAuthDao(AuthDao authDao) {this.authDao = authDao;}

    @Test
    public void test_login() {
        User user = authDao.fetch("admin","wendal.net")
        assertNotNull(user);
   }
}

局限性: 1. 不应该用于测试Action层 2. 自动回滚,必须注意隐式事务提交和多线程事务问题

Enjoy it!!

在Linux下编译Qt Libs -- 能不能快点呢?!

2011-10-01 08:37:57 +0800

出于好玩,下载了Qt libs for linux, 发现是个源码包,好吧编译呗

敲入:

./configure -qt-sql-sqlite
gmake
gmake install

原本以为半个小时就万事,结果花了2个多小时!! 我吐血啊…

难道就不能快点吗? demo examples docs 能不能编译啊!!

好吧,谷哥告诉我,能这样:

./configure -qt-sql-sqlite -opensource -fast -no-qt3support -nomake demos -nomake docs -nomake examples -optimized-qmake -nomake tools
gmake -j4
gmake install

呵呵,半个小时搞定!!!

初试Jetty使用Mongodb作为Session管理器

2011-09-26 11:03:32 +0800

闲话少说,直接上代码:

package net.wendal.jetty.mongodb;

import org.eclipse.jetty.nosql.mongodb.MongoSessionIdManager;
import org.eclipse.jetty.nosql.mongodb.MongoSessionManager;
import org.eclipse.jetty.server.Server;
import org.eclipse.jetty.server.SessionManager;
import org.eclipse.jetty.server.session.SessionHandler;
import org.eclipse.jetty.webapp.WebAppContext;

public abstract class TestMongodb4Jetty {

    public static void main(String[] args) throws Throwable {
        Server server = new Server(9090);
        WebAppContext webAppContext = new WebAppContext();
        webAppContext.setWar("E:\\NutzQuickStart.war"); //经典的nutz入门例子
        MongoSessionManager msm = new MongoSessionManager();
        SessionHandler sessionHandler = new SessionHandler();
        sessionHandler.setSessionManager(msm);
        webAppContext.setSessionHandler(sessionHandler);
        MongoSessionIdManager idMgr = new MongoSessionIdManager(server);
        idMgr.setWorkerName("wendal-mongodb-worker");
        idMgr.setScavengeDelay(60);
        msm.setSessionIdManager(idMgr);
        server.setHandler(webAppContext);
        server.start();
    }
}

启动mongod,启动jetty,访问登录页面,登录,看到后台的log

2011-09-26 23:12:37,470 MongoSessionManager:save:org.eclipse.jetty.nosql.NoSqlSession:wendal-mongodb-worker426chatn2460pobw6a4a6m14@1179468258
2011-09-26 23:12:37,473 MongoSessionManager:save:db.sessions.update({ "id" : "wendal-mongodb-worker426chatn2460pobw6a4a6m14" , "valid" : true},{ "$inc" : { "context.::*.__metadata__.version" : 1} , "$set" : { "accessed" : 1317049954912 , "context.::*.org%2Enutz%2Equickstart%2Eauth%2Ebean%2EUser" : <Binary Data>}},true)

可以看到,默认情况下,使用的是标准的Java序列化,效率当然是不太高的了,呵呵

打开mongodb控制台,敲入下面的命令,也能看到登录后的session信息

use HttpSessions
db.sessions.find()

So esay!! 不过,也用掉了我2个小时,呵呵!!

不走寻常路--NutzCP初版

2011-09-18 02:41:17 +0800

想了一个晚上,用了一个早上完成编码 – 效率还是很高的嘛

项目地址: https://github.com/nutzam/nutzcp

很久之前,我也写过另外一个简单的连接池实现,这次我认真地实现了另一个实现,也就是现在这个

这个连接池,基于一些假设: 1. 数据库可接纳的总连接数是固定的 2. 使用者是自律的,总是显式调用commit()/rollback(),然后调用close()

不走寻常路: 1. 固定的连接池大小 2. 超过固定连接数后,不允许再创建新连接,除非旧连接被返还

为何要固定的连接池大小呢?! 以MySQL为例,server端可接纳的连接数是固件的,写在配置文件里面的,就是说,实际上server-client之间的可用连接数总数是稳定的,固定的,所以,维持一个固定大小的连接池比维持一个可变大小的连接池要简洁,更快,其实也更实用

**为什么不允许overflow(连接池里面已经没有空余连接,那就创建不受管理的连接)呢? ** 因为不应该由数据库告诉程序: 我是MySQL数据库服务器,我已经没有可用的新连接啦!! 客户端本身就能知道是否已经无法创建新连接,这样直接抛出异常,比服务器告知要快速得多

现在这个实现还是使用synchronized,但效率还是很不错的,使用这个实现,通过Nutz项目的TestAll完全没鸭梨!! 呵呵,心情好的时候再改为JDK5的lock吧

Be fun !!

Nutz事务模板值得注意的细节

2011-09-17 10:31:36 +0800

Nutz.Dao事务模板的官方文档: http://code.google.com/p/nutz/wiki/dao_transaction

需要注意的几个细节,文档还没提及: 1. 数据库连接池的AutoCommit属性 对于我见到的大部分连接池和数据库驱动,默认情况下AutoCommit=true,应该是为了性能这就导致如果用户不自行设置的话,Trans的大部分操作都是不可回滚的.故,如果使用Trans,那么务必设置AutoCommit

2. 多个数据源的事务 大部分情况下,用户都不是使用XA驱动,故,多数据源的事务提交,在最后的提交阶段出错的话,已经执行commit操作的数据源,是不可能回滚的

3. 子线程的事务 考虑下面的代码:

Trans.exec(new Atom(){
   public void run() {
       dao.insert(pet);
       new MySuperPowerThread().start();
       dao.count(Pet.class);
   }
});

那么MySuperPowerThread的代码并不是在事务模板中执行的,因为这里的事务不会被子线程继承

4. 返回值问题(更新了) 使用Molecule

Molecule<object> mc = new Molecule<object>() {
    public void run() {
        dao.insert(pet);
        setObj(dao.count(Pet.class));
    }
};
Trans.exec(mc);
System.out.println(mc.getObj());

让你的Android彻底裸奔吧!! -- 瘫痪Android的安全机制

2011-09-11 08:51:23 +0800

本文并非教你写病毒来破解Android系统,所提及的操作,均要求用户主动参与

本文主要针对是平板.Andoird手机由于涉及你的帐号/资金的安全,非常不建议你使用下面的方法!!

先感谢一下硬件小二,rk28小组的协助

第一步,/system可写

Rk2918现在可使用我不久前发明的方法,将/system映射在/data/sysrw

Rk2818的话,自然是使用aufs这种xda发明的方法,但使用rk2918的方法会快些

第二步,获取root权限

因为是完全击垮,故需要使用完全自由的su程序,改造自Superuser的su源码– 无限制无管理功能的su

这里提供的su,去掉了GUI确认等繁琐操作,任何程序都可以无提示获取root权限

自行添加的话,请确保所在分区支持suid,并设置su的权限为6777

第三步,移除apk的签名验证机制

在此之前,尝试美化系统界面的童鞋都知道,系统apk千万千万不要签名,否则肯定用不了

对此我就不信邪,偏偏要破解掉这个限制,实现任意签名的apk,都能安装,完全跳过签名验证机制!!

方法如下:

下载apktool,并安装好JRE或JDK,把apktool解压到D:\apktool
在机器上拷贝/system/framework/services.jar到硬盘的D:\apktool\services.apk
进入命令行,进入D:\apktool,执行 apktool.bat d services.apk ,稍等片刻,就能能看到新建的services文件夹
用UE或notepad++打开D:\apktool\services\smali\com\android\server\PackageManagerService.smali
查找private verifySignaturesLP,这就是校验签名的方法
在verifySignaturesLP方法体中,找到:goto_0,在后面加一行 const/4 v0, 0x1 ,含义是赋值为true,以Java来表达,就是return true,这是verifySignaturesLP方法的最终return语句之前的一句,故任何调用本方法的语句,都能拿到true,即签名验证永远为真. 注意,这里的0x1中的x是小写字母X,貌似很多人直接拷贝的话,会变成全角的X.如果你没有找到goto_0,那就找return v0之类的语句.一般都只有一个return语句!!
保存,重新打包: apktool.bat b services services.jar ,然后拷贝回机器,重启就可以了

完成以上步骤,你的Android设备就彻底裸奔了

System可写 – 为任意改系统文件创造条件
无限制的su – 任何程序都能悄无声息地获取root权限,加上上一条的System可写,即任何程序都能修改/system
不再有签名验证 – 任何apk程序都可以声明自己是系统程序,甚至可以动态生成apk程序进行安装(随便签名就行!!)

从此,你的Android设备完全不设防了!!

实现Rk2918的System分区可写

2011-09-09 11:33:27 +0800

这是2011-09-08,也就是前天顿悟出来的方法

核心原理:在data分区下建一个文件夹/data/sysrw存放system原本的数据,启动时,软连接/data/sysrw为system分区

解释: 1. data分区,最终挂载为/data文件夹,默认情况下,这是ext3格式的分区,但禁用了suid 2. system分区,为不可写的cramfs格式,默认挂载在/system文件夹

步骤: 1. 在原版系统可以正常启动的前提下,将/system下的全部文件,拷贝到/data/sysrw 2. 传输su文件到/data/sysrw/下,使用我最近编译的简单版su,可跳过GUI确认 3. 修改boot.img,移除system文件夹(否则无法建立通往/system的软链接),对init.rc文件做以下修改: ..A. 不再挂载system分区 – 注释掉 mount cramfs mtd@system /system – 也就是前面加#号 ..B. 不再建立system文件夹 – 注释掉 mkdir /system ..C. 修改data分区的挂载方式,使其支持suid – 挂载语句改为 mount ext3 mtd@userdata /data ..D. 修改data分区的权限 – chmod 0770 /data 改为 chmod 0777 /data ..E. 修改su文件的权限,在D步骤所修改文件后面添加 chmod 6755 /system/bin/su – 因为data分区启用了suid,故这个程序可以调用setgid(0)和setuid(0)了 ..F. 为了提供更大自由度,修改根分区的权限 – 注释掉 mount rootfs rootfs / ro remount ..G. 建立通往/system的软链接 — 找到 mkdir /data ,在后面新起一行 symlink /data/sysrw /system

经验教训 1. symlink 语法,与ln一样,前面是真实地址,后面是虚拟地址 2. 如果分区不支持suid,那么setuid/setgid将无法使用

关于su 我为此建立一个项目: https://github.com/wendal/android_su 默认情况下,su是不允许其他用户使用的,而Superuser.apk附带的su又是与界面关联的. 我这个su,只要你执行,就给你root权限,非常爽!!

本文提及方法,理论上适用与一切Rk29系列的平板

针对台电P71和T760的修改工具已经完成: http://dl.dbank.com/c0xcsjwxsm 其他系统的可参考着修改

再次感谢rk28小组的解包工具,你们成功解开了boot.img并顺利打包,为本方法的出现提供了可能性

最新更新,单单刷boot.img实现全部功能,下载地址: http://dl.dbank.com/c0vd0zds0v

Nutz.Json的新注解@JsonField用法详解

2011-09-07 09:06:39 +0800

长期以来Nutz的Json包,仅有一个注解@toJson,用于指定当前对象的通过什么方法进行Pojo–>String的转换

1.b.38版新增了@JsonField,在即将发布的1.b.40版将这个注解再次增强正如其名,@JsonField是针对Json处理中字段级别的控制

首先是字段命名,看代码

@JsonField("z-index")
private String zIndex;

对应的Json将会是:

{
    'z-index' : '10px'
}

可以看到,无需再强求 json的key的名字与类属性名一致了

然后是”忽略”,看代码

@JsonField(ignore=true)
private String password;

很清楚,就是不序列化这个字段

最后,是刚刚加入的by(生成器),这次用一个完整的例子:

public class User {

    @JsonField(by="toString")
    private ObjectId objectId;

    @JsonField("username")
    private String name;

    @JsonField(by="net.wendal.helper.Md5#create")
    private String password;

    @JsonField(ignore=true)
    private String ip;
}

public final class Md5 {

    public static final String create(Object obj) {
        return XXXXX;
    }

}

上面演示了by的两种写法,规则非常简单: 如果不包含#号,则代表调用自身的无参数方法,例子中的by=“toString” 将调用objectId.toString() 如果包含#号,则代表调用指定类的指定静态方法,这个方法必须以Object作为参数,但可以返回任意类型的参数

@toJson加上@JsonField应该足够满足很大一部分的需要了

另外,这种by的语法,我正在积极考虑应用到Nutz.Dao的@Prev注解中,解决长期以来注解生成机制的缺失

NutDao实现Lazy加载的可行性

2011-09-06 11:33:16 +0800

不知道多少人问过@Many @One等注释能否实现懒加载或者自动加载

从代码上说,NutDao实现的是不加载,你需要的时候自行调用 – 其实也就是有点不方便,外加效率较低

我这里讨论的是NutDao做到真正懒加载的可能性与实现方式焦点集中在NutDao.query方法,因为大部分DB–>Pojo都是走这个方法的,fetch方法其实就是封装了一下query方法

由于实现的是懒加载,不可避免的使用Aop,以拦截@Many/@One的getter 使用Aop会导致一个问题,就是query方法返回的对象的类改变了,变成用户请求的类的一个定制化的子类的对象,这本身就导致一些问题: 1. 使用query出来的对象进行update/delete时,由于其并非用户期望的类(实际上是其子类),导致getEntity需要改造,因为@Table等注解是不被继承的,@Column也是,这样,写在@Many/@One字段上的信息会被隐藏掉 2. 用户代码可能会需要修改,当然,都是那些不好的写法,例如Class对象进行equal比较

Aop实现的关键点: 1. 获取Dao对象,并存为其一个属性的值 2. 记录当前getter是否已经获取过,或者setter已经被执行过 3. 跳过Hibernate式的事务问题,平等对待getter调用时的事务问题

可能的改造方法: 1. Aop整个NutDao,对于query以外的方法,进行对象解包/类解包,以移除query方法带出Aoped类的影响 2. 改造/继承AnnotationEntityMaker,让其生成对象时,使用Aop改造过的类

恩,应该OK了

广工,3年来,你改变了什么?

2011-08-27 09:57:46 +0800

广东工业大学,我本科的母校,毕业3年了

今天,我再次回去,看看它的变化

看着以前上课的课室,实验楼,一条条熟悉的过道 – 记忆中画面不停飘过

校园内,树木高了,绿化多了,然而,栏杆,铁门,围墙也多了 – 以安全/治安的名义,能干很多事

晚饭过后,去看看校外江边的公园,想不到啊,3年就能荒废成这样子,以至于我不敢为其拍照!!

还是晚饭后,还是晚上7点,还是这个地理坐标,完全不一样的景象

杂草丛生,灯看上去已经很久很久没亮过,路,如果那还是路的话,80%的面积被草覆盖了那曾经的草坪,是多么美,今天我只看到了杂草,小灌木,以至于我不敢踏足 – 曾几何时,我躺着看着星空那座小桥,木板桥,已经破烂不堪,露出30%以上的水泥底座 – 多少次与挚友,情侣路过这座小桥那条小河,已经不是小河,最多能说得上是条垃圾填埋沟 – 曾经,它流淌着小小溪流

以至于那座山,我不敢上前来,我甚至无法确认那条路还存在

敢问,还有广工的在读生,还有多少人知道这片江边公园的美景,甚至还有多少人知道其曾经存在过?

恩,那个曾经的江边公园,也只能留在记忆中了

广工,3年来,你改变了什么?

NutzMole -- Nutz的代码生成器

2011-08-21 11:39:55 +0800

惯例,先上下载地址: NutzMole 1.1 for rapid

这个项目的原始地址,原本是nutzlab的一个实验项目: http://code.google.com/p/nutzlab/source/browse/#svn%2Ftrunk%2FzMole

历史: 最初的代码,是在2010年11月提交的,之后一直处于冻结状态 – 为什么? 因为我的Html页面做不出来,前端我可不在行. 当时,模板基本上就已经定下来,代码结构也基本确定直到几天前,我重启这个项目,并作了少量修正后,发布了NutzMole 1.0版,可独立运行,说白了,就是把旧代码清理一下,打包成一个独立运行包

1.0发布后,意见/建议/批评纷纷袭来,很大的原因是这个版本并未严格测试,模板本身使用的一些代码在Nutz 1.b.39已经无法使用

很快的, 1.1版发布了,更新了模板,并采用了rapid的代码生成器平台

对比一下最初的NutzMole和rapid代码生成器平台: NutzMole使用多个配置文件,rapid仅一个配置文件 NutzMole使用传统的接口/实现类来配置,rapid提供的文件模板–>文件的机制

NutzMole以专用工具的思想设计, rapid是按平台的理念设计,我对其代码生成器的印象是: 1. 单一配置文件,对用户非常友好 2. 平等的文件模板机制 –> 路径本身也可以使用表达式,全部模板都是使用相同的context

NutzMole 1.1的使用指南: 修改generator.xml以符合你的数据库配置,如果lib文件夹未包含你需要的数据库驱动,请自行添加,然后执行rapid-gen.bat

非常简单的使用方法,另外我正考虑做一个简单的GUI供用户填写信息

另外,值得注意的是,我在nutzmole的模板中使用了lombok,一个非常非常好用的工具包,最大的用处就是免去写Getter/Setter 下载地址: http://projectlombok.org/ 我已经多次思考是否把lombok加入模板中,最近决定:这东西实在太好,非常值得推广!!强推吧!!

把VPS翻新了一下

2011-08-20 11:34:53 +0800

话说在vpsess的这个vps,用了一年了,感觉一直不错,昨天到期,干脆要了一个新的VPS,把数据迁移过去

旧的VPS,是20G空间,用了10G,其实我也不清楚到底为何用了10G,删来删去,还是这么多

步骤:

拷贝.ssh文件夹 – scp就不需要密码了
新vps装lnmp,旧vps导出数据库,打包/opt和nginx的配置
新vps导入数据库sql,覆盖nginx设置
拷贝hudson历史数据,拷贝博客的文件
还有就是一些杂七杂八的数据,也迁移过去

哦也,重启lnmp服务,启动tomcat,验证一下,搞定!!

接着,当然是安装python和git,不过vps上的ubuntu是10.04,找不到现成的python3.2和git,二话不说,直接下源码编译咯

就这样折腾了一个晚上,最后让vpsee帮忙切换到旧ip,完成,收工!!

数据库连接长时间空闲后,爆连接已经关闭的解决方法

2011-08-13 09:31:59 +0800

本文仅讨论使用连接池的情况:

在很多场合都碰到有人提问: 第二天第一次访问应用,总是报连接已经关闭(Connection Close)

其实,数据库连接池大都已经考虑了这个问题,进行设置一下即可:

Apache DBCP:

dataSource.setValidationQuery('select 1');

C3po:

dataSource.setTestConnectionOnCheckout(true);
dataSource.setPreferredTestQuery('select 1')

Proxool:

dataSource.setTestBeforeUse(true);
dataSource.setHouseKeepingTestSql('select 1')

Bonecp: 找不到对应的属性,不过可以配置连接的最大空闲时间

其实原来也就这么简单,返回连接给用户之前,先执行一条简单无害快速的SQL

鸣鸣第一次出境, Mark一下

2011-08-07 07:44:14 +0800

嘻嘻, 鸣鸣第一次去香港了,行程如下: 第一天广州–>深圳,游深圳夜景深圳–>香港–>深圳,通过深圳湾口岸,坐B2到元朗,买1天地铁通票,到湾仔会展中心,进”第19界婴幼儿用品展览会”购物,游香港街景,然后到太子坐车会深圳湾过关深圳–>广州,深圳红树林,深圳街景,回广州

这次购买了不少的用品,但最打动我但有无法购买的是”轮状病毒疫苗” 我咨询到的轮状病毒疫苗仅限6~24周的婴儿使用,呜呜,我女儿已经半岁了,能预防/减轻5岁以下儿童的轮状病毒腹泻,非常非常有用

另外一个,就是2700港元的”子宫颈癌疫苗”,香港刚刚推出的,适用于45岁以下的女性,分3次肌肉注射,6个月内完成 – 积极考虑中,呵呵

Nutz的Scans类,你用过没?

2011-08-04 08:40:25 +0800

你是否想得到某个package下的全部类呢? 你是否想得到某个文件夹下全部的配置文件?

你还在自己写这种的实现? 你还在拼命地问谷哥?

好吧,不吹水了,正式介绍Scans类: org.nutz.resource.Scans

首先,必须先强调一点,在J2EE环境中,如果你没有使用NutzMVC的话,请在Filter/Servlet中加入这一句:

Scans.me().init(config.getServletContext());

这个语句必须优先于其他任何Nutz相关语句

好,如何得到某个文件夹下全部的配置文件呢?即使打包成jar也无需改代码呢?

//第一个参数是需要扫描的文件夹,第二个是文件名需要匹配正则表达式,可以为null
List<nutresource> list = Scans.me().scan("config/","^.+\\.ini");

得到某个package下全部的类

//第一个参数是需要扫描的文件夹,第二个是文件名需要匹配正则表达式,可以为null
List<class <?>> list = Scans.me().scanPackage("net.wendal.mvc");

注意,你应该已经发现, 返回的是NutResource,而不是File之类的对象,why? 其实,这正是我当时做resource包的初衷 – File对象无法表达jar里面的文件,而InputStream又不包含文件名之类的信息

NutResource类最重要的两个方法:

public String getName();
public InputStream getInputStream()

同时包含两中信息,满足大部分需求

Scans类的局限性: 1. 不允许进行根路径扫描 – 就是说,你不能直接把文件放在classpath根下,必须放在文件夹中 2. 现在已经测试在Tomcat/Jetty/WebLogic下正常,在Maven环境下不正常(至今搞不懂Maven的ClassLoader在某些情形下竟然返回null)

鸣鸣半岁了,今天第一次吃辅食!!

2011-08-01 10:00:58 +0800

经过6个月的纯母乳喂养,鸣鸣今天迈入新的阶段–添加辅食

鸣鸣一天天成长,每天都很踏实 – 我很反对用”眨眼就过去了…“,因为那代表着空虚和不作为

鸣鸣现在的体重是出生时的3倍–15斤,长高了17厘米双眼同步正常,已经能够自己坐着玩玩具 – 认真玩玩具的时候,平衡力明显减弱

值得一提的是鸣鸣最喜欢的玩具–塑料玩具桶,呵呵,前身是我们刚买不久的垃圾桶!! 由于鸣鸣的不懈努力,以其鲜艳的颜色,终于纳入玩具行列

周围的人,无一例外地反对我如此”迟”地添加辅食: 1. XX出世没几天就吃米糊啦?! 2. 都4/5/6月了,还不吃米糊/辅食?! 3. 儿童保健医生:4个月开始要喂辅食啦

恩,我坚持自己的观点,顶住鸭梨,终于让鸣鸣顺顺利利地吃了6个月的纯母乳

国内很多人都认为,应该4个月开始喂辅食,但又有多少人知道, WHO的推荐做法是6个月的纯母乳喂养

据我的观察,鸣鸣是在满5月后才开始关注其他食物,开始留意我们吃饭的动作

周围很多觉得,我咋就这么不传统呢?!! 但又有多少人去批评那些所谓的传统呢?!! 1. 坐月子 – 90%都是扯淡,大部分人只是遵循所谓传统而盲目地坐月子 2. 辅食 – 很多家长都急于喂辅食,其实就是想自己省事 3. 学步车 – 还有多少家长在购买害人的圈式学步车?! 4. BB语 – 导致宝宝需要学习一种没用的语言(例如:吃饭饭)

我又想起那句广告语: “别让您的孩子输在起跑线上” – 呸!! 恩,又是所谓的胎教,早教,奥数!! 一味的追求”早” – 早教,各种各样的兴趣班,提前去幼儿园,提前上小学

好了,牢骚完了

Autoproxy Forever!!

2011-07-24 08:54:14 +0800

看到不少帖子又在找兼容 Firefox 5 Firefox 6 Firefox 7 Firefox 8的Autoproxy,我鸭梨很大啊,因为官方的动作还是很慢!!

我现在用Firefox 8.0a1 , Autoproxy也很正常

好吧,放出我自己的版本,兼容至Firefox9!!: http://dl.dbank.com/c0cluqlrqw

Nutz 1.b.38发布了,将来怎么走呢?

2011-07-17 07:17:19 +0800

经过马拉松式的开发,在1.b.37发布之后的3个月,1.b.38终于正式发布

在我看来,这是个里程碑式的版本,截至到1.b.38,Nutz的每一部分都至少重构了一次

Ioc很久以前就重构过,大概是1.a.27,zozoh操刀 Aop,1.a.29进行重构,我操刀 Json,1.b.38历经两次重构,先是jukai,后面是我 Dao,1.b.38,被zozoh翻天覆地地重构完成

我觉得Nutz自身已经成熟了,多次重构,用户实践 – 在不停的fix bug中完善

然而,Nutz还需要些什么呢?或者说,用户还需要些什么呢? 1. 代码生成器 – 很多很多用户要求这个,但是,真的能提供生产效率吗?? 2. IDE – 我一直在思考其必要性,Nutz复杂到需要IDE协助吗?? 3. 支持NoSQL – 貌似没啥意义 4. 还有一些零碎的功能增强,一时半刻没想起来

我觉得Nutz还有一些设计欠佳的地方: 1. Ioc的bean定义,由于最初的设计支持一种抽象的Bean,这种bean只声明字段 – 这种遗留的设计导致Ioc本身及IocLoader不必要的复杂性,然而我至今没发现需要用到的场景 2. Ioc的单例 – NutIoc中的单例的概念,我依旧觉得很怪,呵呵 3. Dao的Pojo实例的生成机制 – 新版的Dao中,这部分的代码依然有些零碎,我曾经尝试改进,没有成功, 这导致编写缓存/懒加载等需要参与对象生成的插件比较困难 4. Json反序列化的定制性 – 1.b.38引入的JsonField注解,恩,应该得到一些改善 5. Castor的扩展机制 – 这东西到底有没有人用过呢??

恩, Nutz,继续努力!!

喜欢Nutz?? Fork它!!

JGit初试牛刀

2011-07-16 09:53:35 +0800

最近爱上了Git,当然不能忽略jGit啦

好吧废话少说,直接上代码先:

package net.wendal.jgit;

import java.io.File;
import java.io.FileWriter;

import org.eclipse.jgit.api.Git;
import org.eclipse.jgit.revwalk.RevCommit;

public class JGit {

    public static void main(String[] args) throws Throwable {
        File root = new File("gitme");
        if(!root.exists())
            root.mkdir();
        File gitF = new File("gitme/.git");
        if(!gitF.exists()) {//如果已经初始化过,那肯定有.git文件夹
                        //初始化git库,相当于命令行的 git init
            Git.init().setDirectory(root).call();
        }
        Git git = Git.open(root); //打开git库

                //好吧,随便写一个文件进去先
        File newFile = new File("gitme/"+System.currentTimeMillis()+".java");
        FileWriter fw = new FileWriter(newFile);
        fw.write(System.currentTimeMillis() + " ABC");
        fw.flush();
        fw.close();

                //添加文件咯,相当于 git add .
        git.add().addFilepattern(".+").call();

                //然后当然是提交啦,相当于 git commit
        git.commit().setCommitter("wendal", "wendal1985@gmail.com").setMessage("Try jgit!").call();

        //接下来,我们看看log信息
        for(RevCommit revCommit : git.log().call()){
            System.out.println(revCommit);
            System.out.println(revCommit.getFullMessage());
            System.out.println(revCommit.getCommitterIdent().getName() + " " + revCommit.getCommitterIdent().getEmailAddress());
        }
    }

}

输出的内容:

commit 5fb38fa714f42f5be72cea9221f9264a5944a14e 1310829994 ----sp
Try jgit!
wendal wendal1985@gmail.com

如果你重复运行,会看到好几条哦,呵呵

就现在看来,JGit的API设计得还不错,链式操作,而且比较直观

JGit项目地址: http://www.eclipse.org/jgit

Rk2918固件新打包格式分析

2011-06-26 11:25:37 +0800

本文针对台电T760的2.x固件,原道N10,酷比1.0.5等RK2918方案的新固件打包格式

文件总体结构: 文件内容描述块 0x00 ~ 0x65 Loader程序 0x66 ~ 0x66+Loader的长度 update.img 0x66+Loader的长度+1 ~ 文件结束前32个字节 MD5 文件的最后32个字节为文件其余部分的MD5码–ASCII形式

文件内容描述块: 文件头 0x00~0x04 共5个字节,固定为RKFWf 固件版本号 0x05~0x09 共5个字节, 例如 00 03 00 02 00 代表 0.2.03, 00 09 00 02 08 代表 8.2.09 芯片型号 0x15 一个字节, 50代表RK29,40代表RKCROWN,30代表RKNANO,20代表RK28,10代表RK27 loader信息 0x19~0x20 共8个字节,前4个字节是偏移量,后4个字节是长度.例如66 00 00 00代表0x66,5A 55 02 00代表0x02555A update.img信息0x22~0x29 共8个字节,与loader信息含义一致

附图片: RK2918_IMG_Format.jpg

我已经实现的版本: https://github.com/wendal/teclast_tools 源码下载: http://www.everbox.com/f/kl3FWPQ7W6yvCyVKWmsLCWcf2o

搭建Git服务器,真的很简单

2011-06-21 09:07:36 +0800

重要提醒, 本教材适用于gitolite v2,与当前最新版v3不兼容!! 需要在checkout gitolite后,切换到v2版!!

最近都在玩Git, Nutz也已经迁移到Github上

原文地址: http://sitaramc.github.com/gitolite/doc/1-INSTALL.html

其实真的只需要几句

#现在开始是root做的

#安装Git
apt-get install git
#拷贝你自己的公钥
cp ~/.ssh/id_rsa.pub /tmp/wendal.pub
git clone git://github.com/sitaramc/gitolite
cd gitolite
##################################
#重要!! 切换到v2版!!
git checkout g2
##################################
src/gl-system-install

#添加git用户,并切换到git用户
adduser git
su - git

#现在开始要变成git用户了
gl-setup /tmp/wendal.pub

大功告成!! 搭建完成!!

下面说说简单的管理

#同样需要用git进行管理,任何一台机器,能访问服务器(sshd是必须的啦)就行,并持有wendal.pub对应的私钥
#首先git clone出管理项目
git clone git@wendal.net:gitolite-admin
cd gitolite-admin
ls -l

你会看到两个文件夹conf 和keydir keydir 是存放用户的公钥的, 用户名.pub , 可以建子文件夹 conf下只有一个文件,gitolite.conf,默认内容如下:

repo    gitolite-admin
        RW+     =   wendal

repo    testing
        RW+     =   @all

一目了然的吧,你可能问: 如何添加新的库啊? 简单往这个文件添加一个库的配置,就会自动帮你建好,例如添加:

repo    GGG
        RW+     =   wendal,zozoh

就会帮你生成一个名为GGG的库

当然,以上配置,还要push到服务器才行.

下面是简单的git指南在我看来就几个命令:

#克隆一个库,相当于svn的check out
git clone git@wendal.net:gitolite-admin

#设置本地信息,非常重要!!
git config --global user.name "wendal"
git config --global user.email "admin@wendal.net"
git config core.quotepath false

#更新本地的库,相当于svn的update
git pull

#上传本地的修改到远程的库,其中origin是默认远程库,也就是你clone的库, master是分支名
git push origin master

#提交修改到本地仓库
git add XXX/XXX  vabc/afda/Abc.java
git commit -a #将包含全部修改过的文件,但新增的会忽略

就这样,呵呵,最后,附上一些链接: http://gitref.org/ 英文,Git指南 http://gitbook.liuhui998.com/ 中文,呵呵,我参与过校对工作

在几种编程语言中探索(Java/Python/Lua/C)

2011-06-10 12:15:42 +0800

猛然发现自己已经快一个月没写blog,太懒惰了!!

5月,先是脚受伤,接着过敏…

Java – 为Nutz重写的Json解析器,最初的实现(zozoh)我看不懂,第二版(juqkai)改造得不够彻底,代码比较乱. 这次修改之后,解析将比之前严格,对于非法转义字符,不匹配的[}均直接抛出异常. 这将导致已经使用nutz的项目,其json文件可能会被报错. 然而,这并未100%的执行Json规范,主要是数字处理和map的key

Python – 最近用得比较多,但至今未打动我. 很多情况下,Python依旧是Shell的替代品,呵呵. 不知道是不是习惯于一种思维: 编程语言=语法+API , 也许还没领会到Python的精髓与思维模式. 与Java相比, 多了些语法糖果,如in和缩进式的逻辑语句

Lua – 呵呵,最近貌似很流行呢!! 最近玩的愤怒的小鸟,也是用Lua写的成果: RK29xx固件解包打包工具_v1.1测试版当前唯一正确解包/打包RK2918方案固件的工具,完美解开台电T760的2.x固件,酷比1.x固件 Lua真的是一门神奇的语言, 很少的语法,极度精简的API!! 很值得学习的一门语言

C – 处理字符串,真是痛苦啊…

刚刚把Nutz的代码迁移到Github了,准备写个简单教程,说说经验,呵呵

鸣鸣满100天了!! 申领了身份证等重要证件,嘻嘻

2011-05-13 02:38:54 +0800

嘻嘻,一百天了

花了一个上午,办: 身份证 40个工作日可取?! 港澳通行证 15天护照 15天

恩,还挺顺利的

工作耽误了一些,明后两天加班,呵呵

附回执,嘻嘻,关键信息都已经涂黑: MM_SF-300x225.jpg

不跟你玩,玩不起!!

2011-05-10 03:37:08 +0800

认认真真地把robot.txt写好了,国内的百度,Soso,搜狗,一概屏蔽!!

不跟你们玩了!!

宝宝快100天了,记录一下经验

2011-05-04 07:12:41 +0800

嘻嘻,鸣鸣诞生快100天,每天都如此充实.

好,记录一下: 13斤,63厘米

一些经验: 1. 母乳喂养 除非有生理/心理疾病,母乳都是足够的. 首先,母乳是按需生产,宝宝喝得多,就产得多其次,认为母乳不足,添加奶粉,是非常错误的,BB少吮吸,奶自然就少最后,母乳如何才多? 1.怀孕期要按摩 2.喂奶前喝牛奶,吃鸡蛋,喂奶期间可以适当喝点水

2. 补钙 千万被直接让BB吃钙片/液体钙!! 如果宝宝晚上突然哭,不肯睡,可能就是缺钙. 那么,妈妈就应该补钙了!! 我老婆每天补充400~500mg的钙,嘻嘻

3. 晚上喂奶 晚上尽量不要喂奶!! 临睡觉,让宝宝多喝点如果宝宝晚上醒了,先判断是否为纸尿裤湿了,不要急着喂奶. 宝宝是需要调教的,除了第一个月,晚上基本上可以不用喂奶的如何调教? 临睡那一餐,多喂点,宝宝醒来的时候,慢一点喂,逐渐逐渐的,间隔时间就长起来了… 最后过渡到晚上不喂,或晚上只喂一点点我现在做的是,晚上不需要喂,或者只需要喂一两口(其实宝宝还是睡着的,眼睛都没睁开过), 整个晚上都不醒. 睡得好,宝宝才能长得快,而非吃得好哦

4. 纸尿裤 现在的速度是每天10片,呵呵随着晚上无需喂宝宝, 宝宝也很配合,晚上不拉便便, 这样整晚都不太需要换纸尿裤, 这样子宝宝自己也能睡个好觉

5. 疫苗 一概收费疫苗,对国产疫苗完全不信任另外,每次打针,提前一天告诉宝宝要打针,到疾控中心后,让宝宝看其他孩子打针,告诉她打针会疼,但不会很疼. 宝宝其实很懂事的,提前告诉她,是尊重她; 让她了解打针会疼,千万不要骗她;让她看其他孩子打针,让其知道会发生什么事. 很多人觉得小孩子什么都不懂,就不尊重他们,哄骗他们,疾控中心哭声一片,呵呵, 我的鸣鸣,打完针,1分钟之后又睡着了,嘻嘻

6. 脐带血 等了3个月(60个工作日), 脐带血的检验结果终于出来, 合格,嘻嘻,不错不错.

7. 游泳 每2/3天游泳一次,呵呵, 100来块的装备,每次半方水(还挺多的) 宝宝很喜欢,每次都游得很快乐每次游完,穿好衣服,马上就去吃奶,嘻嘻,开心得很呢. 鸣鸣有时候还哼上几句才吃,嘻嘻,好像要表达愉悦心情一样室温25度以上(必要时就用暖风机) 水温25~37度

好,欢迎交流哦,嘻嘻

评价一下Everbox和微盘

2011-04-30 08:38:53 +0800

两者的官方: Everbox http://everbox.com 微盘 http://vdisk.me

容量: Everbox 上限15G,单一文件大小仅受限于空间大小微盘上限10G,单一文件大小未知(API也没说,页面也没提及…)

运行平台: 两者的前端都是nginx,我喜欢!! 而且盛大的版本比较新,嘻嘻微盘肯定是php应用,跑在SAE上,估计是特权应用,因为SAE默认每个应用只允许存放10G数据 Everbox猜不出来, session_id的名字也隐藏了,不知道什么语言写的

两者API的优缺点: 1. Everbox,请求一个文件的信息,响应体没有文件的指纹!!单单给edit time,受不了!! 微盘好歹也给个MD5啊!! 2. 微盘有公开的API;Everbox暂时没有(官方答复是很快就会公开,呵呵) 3. Everbox的上传机制比微盘好,起码能分段能续传;微盘对于大文件的上传还没给出API,乏力啊 4. 微盘有个dolog机制, Everbox有ver标志,估计都能做些东西,但ver标志的含义至今没搞明白,纠结!!!

最后发发牢骚: 1. 微盘用HmacSHA256,天啊,啥玩意?! 貌似是OpenID的用到的,整了我一个晚上才搞明白,期间还动用了我微乎其微的php知识!! 2. Everbox API快点出啊!! /list /query都不知道应该咋用!!

总结: 学到了不少文件同步的知识,呵呵两者的Java SDK项目: Everbox4j http://code.google.com/p/everbox4j/ VDisk4j http://code.google.com/p/vdisk4j/

暂时都是用Everbox,先入为主吧,嘻嘻,大部分代码也在Everbox4j项目中

Nutz中你未必知道的用法

2011-04-28 10:30:11 +0800

========================================================================

Ioc篇

1. 使用properties文件

var ioc = {
    config : {
        type : "org.nutz.ioc.impl.PropertiesProxy", /*1.b.37内置的一个代理类*/
        fields : {
            paths : ["conf/jdbc.properties"] /*可以写多个文件或文件夹*/
        }
    },
// Data source
    dataSource : {
        type :"org.apache.commons.dbcp.BasicDataSource",
        events : {
            depose :"close"
        },
        fields : {
            driverClassName : {
                java :"$config.get('driver')"
            },
            url : {
                java :"$config.get('url')"
            },
            username : {
                java :"$config.get('username')"
            },
            password : {
                java :"$config.get('password')"
            }
        }
}

结合Ioc的Java调用与PropertiesProxy,无需修改Ioc内部逻辑这个方法依赖于1.b.37新内置的PropertiesProxy,旧版本的用户可以直接拷贝其代码来使用. PropertiesProxy其实就是一个对Properties类的简单封装,以便于在Ioc中使用.

2. 使用JNDI获取指定资源

var ioc = {
    dao : {
        type :"org.nutz.dao.impl.NutDao",
        args : [ {jndi :"jdbc/dataSource"} ]
    }
}

以上方法,仅需要在容器中配置好数据源,注入到NutDao即可. 其他类型的JNDI资源也同样可以注入.

========================================================================

MVC篇

1. 在@Ok和@Fail中使用EL表达式

@Ok("jsp:${obj == null ? 'index' : 'user.home'}") 
//当返回值为null,相当于
@Ok("jsp:index")
//否则
@Ok("jsp:user.index")

@Ok和@Fail都支持完整的NutEL语法,功能强大而且灵活,不必为跳转到Fail视图而故意抛出异常了

在@Ok和@Fail中获取Request的属性值

@Ok(“jsp:${a.preURL’}“)

待续

声明一下Everbox4j的相关事项

2011-04-28 09:38:56 +0800

1. 你是盛大的前员工/现员工吗? 不是,我只是盛大Everbox的用户,最近也没打算去盛大求职,我有一份满意的工作

2. Everbox4j是盛大官方发布的吗? 不是, everbox4j是非官方的

3. Everbox4j收费吗?有广告吗? 免费,开源,无广告

4. Everbox4j能在公司里使用吗? 可以免费使用,但不得用于任何非法用途

5. Everbox4j基于官方的公开API吗? 官方没有公开的API文档,至今没有公开发布可操作的接口

6. Everbox4j有任何盈利方式吗? 无,没有广告,顶多为我的博客增加点流量,但我的博客一样没有广告

7. Everbox4j能被官方接受吗? 这个很难说,毕竟盛大有自己的研发团队 Everbox4j使用固定的User-Agent, 如有必要, 官方可以随时封掉. Everbox4j的下一版本打算使用一个自己定义的User-agent, 进一步降低官方封杀的难度. 但是,我觉得,有这样一款能在Linux/Mac上跑的客户端,应该是对Everbox的发展有好处的

8. Everbox4j的开发动机是什么? 因为我想在Ubuntu下用Everbox!! 但官方没有提供客户端,就这么简单!!!

9. Everbox4j会是长期项目吗? 有人维护吗? 会,前提是盛大没把它封掉.

10. 官方客户端是否更好? 有什么理由选Everbox4j? 是的,官方的更好,因为同步机制这一块,官方研究得比较深入. Everbox4j能在多平台下使用,这就是最好的理由. 如果你在Linux/Mac下使用Everbox,那么Everbox4j是你当前最好的选择.

11. Everbox4j能过滤文件名,文件大小,上传路径等,为何官方没有呢? 据我观察,官方优先考虑的是同步机制,这部分难度很大啊

Everbox4j 1.0 终于发布啦! Everbox也能在Linux/Mac上用!!

2011-04-27 10:10:03 +0800

############################################################ #这东西刚刚开发完,喜欢探险的童鞋欢迎使用 #系统出现问题,文件被误删,帐号被封,本人一概不负责!! #胆小怕死者,老人小孩孕妇,心脏病,高血压,切勿尝试!! ############################################################

奋斗了几个晚上,终于做出来了!!!

激动,终于可以安心睡个觉了!@!!

下载地址: http://code.google.com/p/everbox4j/downloads/list

已知限制: 1. 如果同时开启上传和下载,只会进行上传 2. 上传模式,只会上传服务器没有的本地文件,不会执行任何删除操作 3. 下载模式,只会下载本地没有的服务器文件,不会进行任何删除操作 4. 只支持盛大帐户

使用前请确认已经安装Java 1.6

如果有任何建议或发现有bug,请留言或发送邮件到 everbox4j@wendal.net

这是一款开源的,免费的,非盈利的Java程序,不得用于任何非法行为!!!

Everbox4j-1.0.jpg

用Jsoup查台电的固件更新情况

2011-04-26 06:13:57 +0800

最近入手台电T720 Wifi,便宜货,不要跟iPad比.

T720用的是 Android 2.1 , 比较旧, 但官方已经说了很久会出2.2的固件,哎… 何年何月啊?!

每次都上台电查,烦,决定用Jsoup写一个检查的,上代码:

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

public class Main {

    public static void main(String[] args) throws Throwable {
        Document doc = Jsoup.connect("http://www.teclast.com/topic.php?channelID=78&topicID;=148").get();
        Elements es = doc.select("font[color$=003399]");
        String type = "T720";//机器型号
        for (Element e : es) {
            if(!e.ownText().startsWith(type))
                continue;
            Element f = e.parent().parent().select("font[color$=0000CC]").first();
            if(f!= null)
                System.out.println(e.ownText() + " " + f.ownText());
        }
    }
}

打印出:

T720 WIFI平板电脑固件下载 2011/04/12
T720 3GE平板电脑固件下载 2011/04/12

最后一次更新依旧是 4月12号,郁闷, 继续等吧,不时运行一下,呜呜

Everbox4j 当前进度(2011-04-26)

2011-04-26 09:23:12 +0800

项目地址: http://code.google.com/p/everbox4j/ 源码地址: http://code.google.com/p/everbox4j/source/browse/

已经完成的功能: 上传指定文件(不限大小) 下载指定文件(支持断点续传) 新建文件夹(服务器端) 删除文件/文件夹(服务器端) 一个简单的管理UI界面,仅界面,功能还没做,呜呜

学到不少东西: 上传的机制 – 分段上传,由服务器决定上传哪几段下载机制 – 先发起一个下载请求,服务器分配一个下载地址

Everbox用到的一些东西: Json Apache HttpClient OAuth SHA1

计划: 完成管理UI的功能,现在只有界面,就一个壳实现上传+下载的同步机制,现在只能处理单向的 – 只上传或只下载

争取劳动节前发布一个版本!!

EverBox Java API的非官方项目启动啦!

2011-04-21 06:21:51 +0800

项目地址: http://code.google.com/p/everbox4j/ 动机: EverBox没有公开的API(无论是Java还是Http API),Linux和Mac用户都无法使用其客户端!!

=最低目标= * 实现对指定文件夹的自动同步*

=期望目标= * 实现官方版大部分功能,如代理设置,同步模式设置,限速,等等 * 更漂亮的UI * 更多实用功能,如可以过滤上传/下载的文件,多帐户多文件夹同步

=需要解决的问题= * 获取服务器端的已存在文件列表(已经实验出来了) * 下载指定的文件 * 上传指定的文件

=期待你的加入= * 探索通信协议 * 设计UI,实现UI

在官方实现推出来前,完成最低目标!! 加油!!

Nginx与中文域名

2011-04-17 06:36:30 +0800

这个问题来自Nginx群

Google了一轮,发现其实很简单

直接写中文域名是无法解析到正确的Server的中文域名其实就是一个英文域名!! 中文域名 —(Punycode编码) –> 英文域名而且,这是在浏览器实现的,你敲入 www.中文.com , 浏览器就转为 www.xn–fiq228c.com 进行访问,仅此而已!!

那Punycode编码是什么呢? 先看看Python如何调用: 尝试编码 www.坚果.com

'坚果'.decode('gbk').encode('punycode')

得到jfs419a,然后合成真正的URL www.xn–jfs419a.com – 这个域名还没启用的.

这个Punycode还是一个标准呢 http://rfc-ref.org/RFC-TEXTS/3492/

当然还得说说中文实现, 在Apache的HttpClient 4.x系列中就有,看源码

最新发现: JDK6中已经有相应的实现 java.net.IDN

另外贴一下在线转换的地址 http://www.cnnic.net.cn/html/Dir/²⁰⁰³⁄₁₀/²⁹⁄₁₁₁₂.htm

所有,把中文域名转一下,按普通英文域名来配置就OK了!!

奉劝一句, 离中文域名越远越好!!!

学习Java时需要掌握的一些技能

2011-04-16 09:45:20 +0800

本文并不涉及语法/具体API,就是一些学习方法

1. 找不到XXX类 学习Java的路上,找不到类简直就是家常便饭,故,快速找到需要的类非常关键 Findjar 输入类名,一般都能找到 Maven repo 如果能猜到大概的项目,通过Maven中央库肯定是最权威的

2. 学习XXX框架 在这个框架满天飞的时代,不懂几个框架都不好意思说是玩Java的但是,以下事情你是否做过呢: A. 从源码编译过 B. 跑过官方测试 C. 瞄过源码

找一个好的社区,一起看源码,是很开心的事哦知其然,也要知其所以然

3. 找Bug的方法 你马上就开始debug了? No! No! 请把debug放到最后,当成无计可施的最后手段 System.out.println()才是真正的利器!! 你马上会反驳,println很耗时间的 – 是的,但帮你理清思路通过println,打印变量的值/应该经过的分支,帮你一步步理清思路使用Debug往往是最快解决问题的,但也是最容易让你无法找到问题的根源良好的Log,是生产环境中必不可少的信息

4. 常备API 原本打算列长长的表格,但最近发现Oschina首页就有API链接 http://www.oschina.net/ 页面下方就是 “常用API文档”,比较齐全

5. 分清楚问题的原因 很多时候,Java程序的问题,更多的是API的问题,而非语法问题但很多情况下,初学者多以为是语法问题

我简单想出几种类型: 语法问题,编译器导致的语法现象(如自动封包/解包,泛型),API问题,具体操作系统的问题

暂时就想到这么多,呵呵,看来是遇到特定场景才容易想到. 最近迷上录视频,嘻嘻,已经为Nutz录了两集,尽快跟进其他内容.

启用新的域名 wendal.net

2011-04-14 11:39:26 +0800

为了XXXXX 为了XXXXX 为了XXXXX

我昨晚在godaddy购买了wendal.net,并指向我的博客,花了72.04元,还不错,呵呵

另外,开始进行sunfarms.net的域名外迁工作,万网已经在审核

呵呵,常出去走走,身体健康哦

Json格式的ngx_http_stub_status_module

2011-04-13 07:07:47 +0800

原版的ngx_http_stub_status_module,查看到的状态信息是一个无格式文本,非常不好解析.

网上有另外一些实现,例如nginx-json-status-module,但实现得极其垃圾,竟然直接调用malloc. 另外为了庆贺一下Nginx 1.0.0版本的发布,我做了一些修改,使其以Json格式返回.

上代码:

/*
 * Copyright (C) Igor Sysoev
 * Modify by Wendal Chen
 */

#include <ngx_config.h>
#include <ngx_core.h>
#include <ngx_http.h>

static char *ngx_http_set_status(ngx_conf_t *cf, ngx_command_t *cmd,
                                 void *conf);

static ngx_command_t  ngx_http_status_commands[] = {

    { ngx_string("stub_status"),
      NGX_HTTP_SRV_CONF|NGX_HTTP_LOC_CONF|NGX_CONF_FLAG,
      ngx_http_set_status,
      0,
      0,
      NULL },

      ngx_null_command
};

static ngx_http_module_t  ngx_http_stub_status_module_ctx = {
    NULL,                                  /* preconfiguration */
    NULL,                                  /* postconfiguration */

    NULL,                                  /* create main configuration */
    NULL,                                  /* init main configuration */

    NULL,                                  /* create server configuration */
    NULL,                                  /* merge server configuration */

    NULL,                                  /* create location configuration */
    NULL                                   /* merge location configuration */
};

ngx_module_t  ngx_http_stub_status_module = {
    NGX_MODULE_V1,
    &ngx;_http_stub_status_module_ctx,      /* module context */
    ngx_http_status_commands,              /* module directives */
    NGX_HTTP_MODULE,                       /* module type */
    NULL,                                  /* init master */
    NULL,                                  /* init module */
    NULL,                                  /* init process */
    NULL,                                  /* init thread */
    NULL,                                  /* exit thread */
    NULL,                                  /* exit process */
    NULL,                                  /* exit master */
    NGX_MODULE_V1_PADDING
};

static ngx_int_t ngx_http_status_handler(ngx_http_request_t *r)
{
    size_t             size;
    ngx_int_t          rc;
    ngx_buf_t         *b;
    ngx_chain_t        out;
    ngx_atomic_int_t   ap, hn, ac, rq, rd, wr;

    if (r->method != NGX_HTTP_GET && r->method != NGX_HTTP_HEAD) {
        return NGX_HTTP_NOT_ALLOWED;
    }

    rc = ngx_http_discard_request_body(r);

    if (rc != NGX_OK) {
        return rc;
    }

    ngx_str_set(&r-;>headers_out.content_type, "text/plain");

    if (r->method == NGX_HTTP_HEAD) {
        r->headers_out.status = NGX_HTTP_OK;

        rc = ngx_http_send_header(r);

        if (rc == NGX_ERROR || rc > NGX_OK || r->header_only) {
            return rc;
        }
    }

    size = sizeof("{accepted:,handled:,active:,requests:,reading:,writing:}") + 7 * NGX_ATOMIC_T_LEN;

    b = ngx_create_temp_buf(r->pool, size);
    if (b == NULL) {
        return NGX_HTTP_INTERNAL_SERVER_ERROR;
    }

    out.buf = b;
    out.next = NULL;

    ap = *ngx_stat_accepted;
    hn = *ngx_stat_handled;
    ac = *ngx_stat_active;
    rq = *ngx_stat_requests;
    rd = *ngx_stat_reading;
    wr = *ngx_stat_writing;

    b->last = ngx_sprintf(b->last, "{accepted:%uA,handled:%uA,active:%uA,requests:%uA,reading:%uA,writing:%uA}", 
                                               ap,         hn,        ac,         rq,           rd,         wr);

    r->headers_out.status = NGX_HTTP_OK;
    r->headers_out.content_length_n = b->last - b->pos;

    b->last_buf = 1;

    rc = ngx_http_send_header(r);

    if (rc == NGX_ERROR || rc > NGX_OK || r->header_only) {
        return rc;
    }

    return ngx_http_output_filter(r, &out;);
}

static char *ngx_http_set_status(ngx_conf_t *cf, ngx_command_t *cmd, void *conf)
{
    ngx_http_core_loc_conf_t  *clcf;

    clcf = ngx_http_conf_get_module_loc_conf(cf, ngx_http_core_module);
    clcf->handler = ngx_http_status_handler;

    return NGX_CONF_OK;
}

使用方法 1. 直接替换原本的文件 2. 修改一下ngx_string(“stub_status”)为ngx_string(“json_stub_status”),配合一下config文件一起作为额外模块进行编译:

ngx_addon_name=ngx_http_json_stub_status_module
HTTP_AUX_FILTER_MODULES="$HTTP_AUX_FILTER_MODULES ngx_http_json_stub_status_module"
NGX_ADDON_SRCS="$NGX_ADDON_SRCS $ngx_addon_dir/ngx_http_json_stub_status_module.c"

下载Zip包

再一次搞定UTF-8的BOM

2011-04-12 06:55:43 +0800

一年前的某天,我觉察到BOM的问题 – 一个Java源文件死活无法编译今天,我狠狠地为 Nutz的Streams类添加了一个方法,用于自动过滤掉BOM头!! 代码如下:

private static final byte[] UTF_BOM = new byte[]{(byte) 0xEF,(byte) 0xBB,(byte) 0xBF};

/**
 * 判断并移除UTF-8的BOM头
*/
public static InputStream utf8filte(InputStream in) {
    try {
        PushbackInputStream pis = new PushbackInputStream(in,3);
        byte[] header = new byte[3];
        pis.read(header,0,3);
        if(header[0] != UTF_BOM[0] || header[1] != UTF_BOM[1] || header[2] != UTF_BOM[2]) {
            pis.unread(header,0,3);
        }
        return pis;
    } catch (IOException e) {
        throw Lang.wrapThrow(e);
    }
}

希望以后能少遇到些

原本是打算改NutzDoc的代码的,因为我写的一些文档包含了BOM头,读取的时候,NutzDoc无视第一行(标题行),直接认为是文本,导致没有标题!!!! 后来,觉得这完全是共性问题,任何读取UTF8格式的代码都会遇到,故决定添加上述方法!!

PS: Nginx 出 1.0.0了,神了!!! 版本号什么的都是浮云啊!!!!!!!!!!!!

Logger对象是否会重复创建呢? (以Log4j为例)

2011-04-05 08:51:34 +0800

不久前有人问及重复调用Logger.getLogger之类的语句,是否会拿到不同的Logger对象呢? 起初我并未在意,但现在觉得是应该探究一下.

故,先是设计这样的代码:

import org.apache.log4j.Logger;
public class LogTest {

    public static void main(String[] args) {
        Logger log = Logger.getLogger(LogTest.class);
        Logger log2 = Logger.getLogger(LogTest.class);
        System.out.println(log == log2);
    }
}

log4j.properties文件的内容:

log4j.rootLogger=DEBUG,Console
log4j.appender.Console=org.apache.log4j.ConsoleAppender
log4j.appender.Console.layout=org.apache.log4j.PatternLayout
log4j.appender.Console.layout.ConversionPattern=log4j: %d [%t] %-5p %c - %m%n

打印的结果是true,即同一个Log对象

恩,为什么呢?? 好,下载源码.

经过简单探寻,找到关键代码,位于org.apache.log4j.Hierarchy类:

  public
  Logger getLogger(String name, LoggerFactory factory) {
    //System.out.println("getInstance("+name+") called.");
    CategoryKey key = new CategoryKey(name);
    // Synchronize to prevent write conflicts. Read conflicts (in
    // getChainedLevel method) are possible only if variable
    // assignments are non-atomic.
    Logger logger;

    synchronized(ht) {
      Object o = ht.get(key);
      if(o == null) {
    logger = factory.makeNewLoggerInstance(name);
    logger.setHierarchy(this);
    ht.put(key, logger);
    updateParents(logger);
    return logger;
      } else if(o instanceof Logger) {
    return (Logger) o;
      } else if (o instanceof ProvisionNode) {
    //System.out.println("("+name+") ht.get(this) returned ProvisionNode");
    logger = factory.makeNewLoggerInstance(name);
    logger.setHierarchy(this);
    ht.put(key, logger);
    updateChildren((ProvisionNode) o, logger);
    updateParents(logger);
    return logger;
      }
      else {
    // It should be impossible to arrive here
    return null;  // but let's keep the compiler happy.
      }
    }
  }

以上代码简单含义为,构建一个查询的key,然后获取特定的Logger对象,如果没有就创建它

问题又来啦,按照上述代码,获取Logger对象的过程,是一个同步过程,因为写着synchronized(ht) 呢!

另外说一句,按照当前的Nutz.Log实现,每次调用getLog都是返回新的Logger封装对象哦,不过这个对象只有一个变量,就是实际的logger,故,内存消耗依旧很小的.

神奇的Slf4J-API版本 - 2.0.99

2011-04-03 12:29:03 +0800

今天,一位群友”我思”,在组合使用slf4j和logback时报一下错误:

Exception in thread "main" java.lang.NoSuchMethodError: org.slf4j.helpers.MessageFormatter.arrayFormat(Ljava/lang/String;[Ljava/lang/Object;)Lorg/slf4j/helpers/FormattingTuple;

最后发现是slf4j的版本不对, 他使用的是slf4j-api-2.0.99.jar

但是,但是,官方正式版只有1.6.1,而且至今我都没发现有2.0.x系列的计划呢!! 我的神啊,哪里来的版本? 经提醒,这个jar就在 1.6.1版的发行包中!! slf4j-1.6.1.zip\slf4j-1.6.1\integration\lib

神奇啊,为啥呢?? 找不到其源码jar,好吧,上JD-GUI,看看报错的类MessageFormatter.arrayFormat 2.0.99版的方法声明:

public static final String arrayFormat(String messagePattern, Object[] argArray)

1.6.1版的方法声明:

public static final FormattingTuple arrayFormat(String messagePattern, Object[] argArray)

看到区别了吧,返回值的类型不同了!!! 同样的,还有一个1.6.99版的API,内容与2.0.99版一致

继续追查, 看Slf4j源码仓库的一个提交: https://github.com/ceki/slf4j/commit/581b20f8aaa140ce722669a2cf1d8582a963ff4e 里面的comments是: - fixed bug 154

It is expected that all SLF4J releases in the 1.6.x and 2.0.x series will be mutually compatible. Note that the 2.0.x series is expected to require JDK 1.5 or later.

兼容旧版本?? 明显就是不兼容嘛!!! 但 bug 154 到底是什么内容呢?

几经查找,终于找到其issue系统的地址,是个bugzilla呢 – 天啊,官网一个网站,下载一个网站,源码管理一个网站,issue管理又是再一个网站?!!

http://bugzilla.slf4j.org/show_bug.cgi?id=154 但内容感觉与 2.0.x无关呢.

发布一个Httpsqs的Python客户端

2011-04-01 09:04:15 +0800

Httpsqs是张宴的一款开源队列服务器,项目首页 http://code.google.com/p/httpsqs/

这款软件有几种客户端, Java/Perl/C,却没有Python的客户端.

故,本人奉上一个实现,欢迎指正!!

直接去下载 httpsqs-python-client-v1.zip

代码:

#Verion 1.0
#Author wendal(wendal1985@gmail.com)
#If you find a bug, pls mail me

import sys,httplib

ERROR = 'HTTPSQS_ERROR'

GET_END = 'HTTPSQS_GET_END'

PUT_OK = 'HTTPSQS_PUT_OK'
PUT_ERROR = 'HTTPSQS_PUT_ERROR'
PUT_END = 'HTTPSQS_PUT_END'

RESET_OK = 'HTTPSQS_RESET_OK'
RESET_ERROR = 'HTTPSQS_RESET_ERROR'

MAXQUEUE_OK = 'HTTPSQS_MAXQUEUE_OK'
MAXQUEUE_CANCEL = 'HTTPSQS_MAXQUEUE_CANCEL'

SYNCTIME_OK = 'HTTPSQS_SYNCTIME_OK'
SYNCTIME_CANCEL = 'HTTPSQS_SYNCTIME_CANCEL'

class Httpsqs(object):
    def __init__(self,host,port=1218):
        self.host = host
        self.port = port

    def get(self,poolName):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=get&name;=" + poolName)
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            conn.close()
            return data
        return ''

    def put(self,poolName,data):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("POST", "/?opt=put&name;="+poolName,data)
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

    def status(self,poolName):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=status&name;="+poolName)
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

    def status_json(self,poolName):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=status_json&name;="+poolName)
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

    def reset(self,poolName):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=reset&name;="+poolName)
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

    def maxlen(self,poolName,num):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=maxqueue&name;="+poolName+"&num;="+str(num))
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

    def synctime(self,poolName,num):
        conn = httplib.HTTPConnection(self.host,self.port)
        conn.request("GET", "/?opt=synctime&name;="+poolName+"&num;="+str(num))
        r = conn.getresponse()
        if r.status == httplib.OK :
            data = r.read()
            return data
        return ''

def isOK(data):
    if data is '' :
        return False
    if data is ERROR :
        return False
    if data is GET_END :
        return False
    if data is PUT_ERROR :
        return False
    if data is RESET_ERROR :
        return False
    if data is MAXQUEUE_CANCEL :
        return False
    if data is SYNCTIME_CANCEL :
        return False
    return True

测试代码就不贴,需要的话就下载zip包吧.

因为Httpsqs本身就是基于Http协议的,故各种客户端实现都只是封装一下,本python客户端也不例外.

TMD美赞臣,竟敢打电话过来推销奶粉!!

2011-03-30 07:19:03 +0800

怒了! 彻底怒了!!

电话: 020-62610328 竟然推销美赞臣奶粉,竟然说母乳质量差!!! TMD你这是啥垃圾奶粉?!!!

我靠!! 找死啊?!!!!!!!! TMD想害我女儿!!! 还有没有人性啊??!!!

美赞臣,肯定说这是临时工,这不是我们公司的!! 靠,电话里只推销”美赞臣”,难道还有人特意害你啊!!

再敢打来就直接开骂!!!!!!

好,先去查一下WHO的投诉邮件地址!!!!

HTTPSQS源码初探

2011-03-28 09:34:39 +0800

官网: http://code.google.com/p/httpsqs/ 一句话介绍: HTTPSQS is a Simple Queue Service based on HTTP GET/POST protocol HTTPSQS（HTTP Simple Queue Service）是一款基于 HTTP GET/POST 协议的轻量级开源简单消息队列服务

其实以前就安装过这款队列实现,也简单测试过,但今天第一次看源码,呵呵

源码就一个C文件 httpsqs.c , 外加一个MakeFile文件

代码大概800行,原本以为是个很复杂的东西,最后才发现,真的如其中文介绍一样: 使用 Tokyo Cabinet 的 B+Tree Key/Value 数据库来做数据的持久化存储

我的理解就是一个Key/Value服务器的Http界面

原本打算写点代码分析的,但源码上的注解太详细,算了,不写了,把方法列一下:

/* 全局设置 */
TCBDB *httpsqs_db_tcbdb; /* 数据表 */
int httpsqs_settings_syncinterval; /* 同步更新内容到磁盘的间隔时间 */
char *httpsqs_settings_pidfile; /* PID文件 */

/* 创建多层目录的函数 */
void create_multilayer_dir( char *muldir ) ;
/* URL解码 */
char *urldecode(char *input_str) ;
/* 显示帮助信息 */
static void show_help(void);

/* 读取队列写入点的值 */
static int httpsqs_read_putpos(const char* httpsqs_input_name);
/* 读取队列读取点的值 */
static int httpsqs_read_getpos(const char* httpsqs_input_name);
/* 读取用于设置的最大队列数 */
static int httpsqs_read_maxqueue(const char* httpsqs_input_name);
/* 设置最大的队列数量，返回值为设置的队列数量。如果返回值为0，则表示设置取消（取消原因为：设置的最大的队列数量小于”当前队列写入位置点“和”当前队列读取位置点“，或者”当前队列写入位置点“小于”当前队列的读取位置点） */
static int httpsqs_maxqueue(const char* httpsqs_input_name, int httpsqs_input_num);
/* 重置队列，0表示重置成功 */
static int httpsqs_reset(const char* httpsqs_input_name);
/* 查看单条队列内容 */
char *httpsqs_view(const char* httpsqs_input_name, int pos);
/* 修改定时更新内存内容到磁盘的间隔时间，返回间隔时间（秒） */
static int httpsqs_synctime(int httpsqs_input_num);
/* 获取本次“入队列”操作的队列写入点 */
static int httpsqs_now_putpos(const char* httpsqs_input_name);
/* 获取本次“出队列”操作的队列读取点，返回值为0时队列全部读取完成 */
static int httpsqs_now_getpos(const char* httpsqs_input_name);
/* 处理模块 */
void httpsqs_handler(struct evhttp_request *req, void *arg);
/* 信号处理,关闭信号,保存内存数据 */
static void kill_signal(const int sig);
/* 定时信号处理，定时将内存中的内容写入磁盘 */
static void sync_signal(const int sig);

/* 入口方法 */
int main(int argc, char **argv);

功能就和一个Memcached服务器差不多. 恩,考虑做个Nginx的模块,哈哈.

[求助]CHM文件的格式,我疑惑了!!!

2011-03-28 12:39:57 +0800

这几天想做一个CHM文件的Java读写库,困困研读这种非公开的文件格式. 参考了一篇外国人写的文档 Microsoft’s HTML Help (.chm) format

按照其规律一步步构建POJO, 结果被一个ENCINT类型难住了,实在搞不懂如何解析,呜呜:

原文: Encoded Integers

An ENCINT is a variable-length integer. The high bit of each byte indicates “continued to the next byte”. Bytes are stored most significant to least significant. So, for example, $EA $15 is (((0xEA&0x7F)< <7)|0x15) = 0x3515.

严重崩溃中, 求帮助啊!!

总结一下最近Nginx模块开发走过的弯路

2011-03-22 08:42:00 +0800

整了快一个月了,是时候总结一下:

教训: 1. 在虚拟机下编译Nginx 算是犯的第一个错误, 环境如下: Window + 虚拟机中的Ubuntu, nginx等文件放在windows的一个文件夹中, Ubuntu使用vbox的数据空间进行访问.

一开始并未察觉,因为觉得编译个东西, 几分钟,很正常吧.
后来,做出一部分功能,开始测试. 用ab压, 总是几百req/s ,非常不爽,不应该是这种性能!!
无意中,改为单worker进程, 竟然效果更好, 而且ab占用的cpu比nginx还高!!
开始怀疑虚拟机的性能,决定用wubi安装一个
安装好,例行编译,靠!! 咋一会就搞定了?! 用ab压,晕死,直接上10k req/s了,而且依旧ab的cpu比nginx高!!
在Lua中习惯性写分号,习惯性忘记写end
开头,基本上每行都不自觉地敲上分号
每每写if语句,总是忘记写then和end
好久之后才发现连接字符串,其实用..就可以了,之前一直用string.format
以Java的想法写C
一开始看到echo/lua模块每几行就判断一下是否为NULL/NGX_ERROR,觉得很多余,分配内存都要check一下,结果,杯具开始了
指针满天飞,至今还没适应过来

其他一些零碎的问题: 1. lua-nginx-module 0.1.6rc2有个bug,折腾了2天,最后知道是bug 2. 用google-pretools工具分析性能,结果发现根本还不需要到这一步,因为ab的cpu比nginx还高!!

经验: 最大的经验就是如果无需对请求体进行复杂处理(例如upload),以下组合可以说无敌了: nginx + lua-nginx-module + drizzle-nginx-module + rds-json-nginx-module

使用标准nginx处理静态文件,不是一般的快和强大 drizzle + rds-json负责访问mysql数据, 速度非常快使用lua处理逻辑,灵活而且非常快

一般的增删改查,都可以用上面的组合完成,无需Java/PHP的参与

暂时想到这么多, 另外,我在翻译lua-nginx-module的手册.虽说lua-nginx-module是国人写的,但一直没有找到中文手册,其英文文档虽然能看懂,但查找非常不便. 嘻嘻,值得期待哦

想不到还有这种SSH客户端- FireSSH

2011-03-22 06:56:44 +0800

在oschina中无意中看到的, 在Firefox里面使用ssh!!

简单使用: 1. 访问FireSSH主页 2. 安装,并重启Firefox 3. 在菜单中选择FireSSH,启动,输入ip/帐户/密码,登陆!!

马上就是 SSH的经典黑屏了,哈哈

只有想不到,没有做不到啊…

回想以前,曾尝试在手机上安装一个ssh客户端, 就为了随时随地访问客户的服务器排除问题,哈哈

[已经确认]想不到真的遇到Lua-nginx-module的bug

2011-03-17 03:32:15 +0800

难以置信啊, agentzh大牛已经确认是个bug,对应的版本: Lua-nginx-module 0.16rc2 + Nginx 0.8.54

期待修复,哈哈

原本一直以为是自己代码的原因,因为实在很诡异,附上我的原文:

我得到的最小集合就是:
1. nginx.conf
location /test {
    root html;
    content_by_lua_file "conf/test.lua";
}
server/http等配置按默认的, event module用的是 epoll

2. test.lua文件仅2行:
ngx.location.capture('/1.html')

ngx.exec("/1.html")

我尝试过,无论这两句话是否请求同一个文件,结果都一样.

3. 1.html文件里面仅有几个字母,我已经试过不同的文件大小,结果一样

我遇到的情况是这样的:
1. 通过wget/curl/Firefox来访问 localhost/test 都能正常显示1.html中的内容
2. 使用ab访问 localhost/1.html是正常的,能够pass
3. 使用ab进行测试,总是timeout , 我使用的语句是 ab -v 5 localhost/test 
Benchmarking localhost (be patient)...INFO: POST header ==
---
GET /down2 HTTP/1.0
Host: localhost
User-Agent: ApacheBench/2.3
Accept: */*

---
LOG: header received:
HTTP/1.1 200 OK
Server: nginx/0.8.54
Date: Tue, 15 Mar 2011 07:22:30 GMT
Content-Type: text/plain
Content-Length: 4

Last-Modified: Fri, 11 Mar 2011 09:32:28 GMT
Connection: close
Accept-Ranges: bytes

ABC

LOG: Response code = 200
apr_poll: The timeout specified has expired (70007)

其中的ABC就是1.html的内容, 非常抱歉我之前写错了.

对于0A0D的描述,仅仅是我的猜测,请无视之.

单独写 ngx.exec("/1.html") 也是能够通过ab测试的.

环境:
Ubuntu 10.10
Luajit-5.1-dev
Nginx 0.8.54
Lua-nginx-module 0.16rc2

Thanks,
Wendal Chen

agentzh的回应是:

I've reproduced it on my side. This is indeed a bug. When ngx.exec()
is used after ngx.location.capture() or ngx.location.capture_multi(),
nginx 0.8.11+ will not close the client connection due to leaked
request reference counter (r->main->count). A hacky work-around is to
disable nginx http keepalive and rely on the browser (and other http
clients) to actively close the connection. And that's why wget, curl,
firefox, and other well-written http clients worked for you.

Nginx 0.7.68 (and older) is confirmed to work in this context just
because older nginx does not use reference counting.

I'll attempt fix in the next few days. Thank you for reporting this
and sorry about this issue :)

Cheers,
-agentzh

大概的意思是: 0.8.11+才会有这个问题,0.7.68以下的版本,因为没有使用相关特性而没有问题. 解决方法: 关闭nginx的keeplive 且客户端主动关闭连接.

我得出几个结论: 1. taobao不是用这种版本组合,或者不用这种写法 2. ab不会主动释放连接, 与wget/curl的行为不一致!! 这个比较问题大 3. 淘宝里面如果没有这种写法,那我要检讨一下是否应该这样写

恩,继续努力,奋斗在 nginx+lua+C指针的苦海中

累趴下了,就为了办出生证!!

2011-03-14 07:26:17 +0800

原本打算一个早上就能搞好 … 原本以为简单填一下表就搞定 … 原本以为就一个地方搞定全部东西 …

我承认,错了, 结果是用了一天. 除了中午吃饭的半个小时,都在奔波…

宝宝42天了, 要体检,补听力筛查 .. 还得去洗澡,游泳…. 老婆产后42天了, 需要复查, 验血,验尿,B超….

跑上跑下,今天不知道走了多少层楼, 不知道签了多少次名,不知道刷了多少次卡…

不过,总算是把出生证给拿到了!! ^_^

哈哈,宝宝, 中国承认你这个人了, 你成为法律上的人了!!

最近速成Lua了,简单记一下

2011-03-10 07:56:26 +0800

最近速成Lua,写篇文章mark一下, 参考了 Lua-Quick-Start-Guide-CN

Lua执行器, 官方当前最新5.1.4, 但我觉得LuaJIT 2.0 beta6 更好

我的考虑是这样的: 1. 为了性能,把固定的处理逻辑用C写 2. 为了灵活,与配置紧密相关的用Lua写

8种类型: 数字(double), 字符串, 布尔值(true/false) 函数(function) 表(相当于HashMap+List,唯一的数据结构) 用户数据(userdata,C定义的,Lua对其只读,不能直接通过Lua语句修改) – 对我基本无用处协程(thread) – 其实就是Lua模拟的多线程,与Java的真线程差远了,基本无视之 nil(空,啥都不是,一般就是标志物)

语法: 1. 变量无类型 2. 无需;之类的语句终结符,最好一行一条语句, 语言本身对缩进不感冒. 3. 函数可以返回多个值 (Java中我也想啊!) 4. if语句, 除了false和nil外, 一律视为true (真的比较单纯的约定) 5. 没有数组,只有table, 相当于HashMap+List 6. 支持闭包,但我用不上,无视之 7. 有假的多线程,直接无视

好,上代码:

--这是注释
--定义一个本地变量
local myx = 1
--变量没类型,随便赋值
myx = "Wendal's LUA"
--定义一个方法
function abc()
    -- 返回多个值,爽,最后一个是表
    return 1,"2",{yyy=1.2,ab="z"}
end
--多个变量一起赋值
x,y,z = abc()
--z变量保存的是table类型,故:
--索引值以1开始
myx = z.yyy
myx = z[2]
--if语句, then和end都是必须的,因为返回值不是nil和false,故abc()相当于true
if abc() then
    --内置方法,不是语法的一部分
    print("cccccc")
elseif
    print("aaaaa")
end

剩下的就是基础API了,没必要记,用用就知道了

突然感觉到编程语言就是语法+API —> 有点废话

另外提醒一下, Lua没有对象,不过可以通过table类型来模拟.

[误报]难道我遇到lua-nginx-module的一个bug?

2011-03-09 10:30:07 +0800

已经确定是我自己的原因实在不是很肯定,如果加入特定的–with-cc-opt参数就报错.

环境: Ubuntu 10.04.2 LTS Server

先安装好依赖的包: apt-get install liblua5.1-0-dev g++ 然后下载google-perftools:

wget http://google-perftools.googlecode.com/files/google-perftools-1.6.tar.gz
tar xvf google-perftools-1.6.tar.gz
cd google-perftools-1.6
./configure
make
make install

然后到nginx编译: 下载ngx_devel_kit 0.2.17 下载lua-nginx-module 0.1.6rc2

执行以下编译参数:

./configure --add-module=simpl-ngx_devel_kit --add-module=lua-nginx-module

可以成功配置,make也很顺利

然后试试:

./configure --add-module=simpl-ngx_devel_kit --add-module=lua-nginx-module --with-cc-opt=-lprofile #这里写错了,应该是profiler

报错,难道加上–with-cc-opt就报错? 试试mysql的lib

./configure --add-module=simpl-ngx_devel_kit --add-module=lua-nginx-module --with-cc-opt=-lmysql

通过.

神奇啊… 难道真的是bug? 如果直接在auto/cc/gcc将: NGX_GCC_OPT=“-O” 改为 NGX_GCC_OPT=“-O2 -lprofile” 是能够pass的. –> 写错了!! 应该是-lprofiler

好吧,困了,睡觉,明天报个issue.

哈哈,本文是误报, 不算是个bug.

兼容FireFox 4的AutoProxy

2011-03-09 07:50:52 +0800

######################################### ##官方已经发布兼容FF4 版本!! 马上去下载安装吧!! #########################################

前几天, FF4 RC1 放出, 作为FF粉丝怎么可以不升级?

安装后,启动,检查附件组件兼容性, 什么?!! Autoproxy不兼容?!! 这可不行,这是必备的!!!

到处查找更新版,官方发布的0.4b1也不支持FF4 RC1 !!!

好吧,根据其issue 174,其实已经修改,只是还没有发布,只好直接跑到Autoproxy的官网下载源码进行编译(为此下载了Git For Windows,Perl,MS-DOS Zip)

经过简单试用,恩,一切正常!!

好东西不能独享,放出我自己的编译的版本给大家救急

如有更新,我也会及时跟进(前提是官方还未放出) 下载: —> autoproxy-0.4.0+.2011030823.xpi Google Docs 下载 , 本地下载

—> FF4 RC1 中文版(已经可以在官网公下载) ~~Google Docs 下载~~

**提醒: 安装后右下角无”福”字,需要进入附加组件管理器进行配置. **

常出去走走,有益身心

附上访问Google Docs简单方法: 修改Host文件 C:\WINDOWS\system32\drivers\etc\hosts 添加:

209.85.225.101 docs.google.com
74.125.127.100 writely.google.com
72.14.203.100 spreadsheets.google.com

一个简单XML工具类,支持简单的路径求值

2011-03-06 07:57:55 +0800

估计是个轮子,因为一说起XML,自然想到的是JDom/dom4j等老牌/强大的工具.

但我的需求如此简单: “支持简单的路径求值” ,就加一个N多垃圾的jar包,算了,一气之下,写了这个工具类.

原本这个工具类包含一个接口,一个实现类,一个工厂类,一个测试类

完成初版后,发现,为啥还分这么多东西,不就一个简单需求嘛!! 很不符合我的风格. 而且,我还特意建了一个工程叫NutzXML ….

不行,这种需要扩展,不考虑效率的东西, 咋调用一下都这么麻烦? 改!!

最后,整个XmlMap类,加上注释,150行, 这里展示的是无注释的版本:

package org.nutz.xml;

import java.io.InputStream;
import java.util.ArrayList;
import java.util.List;

import javax.xml.parsers.DocumentBuilder;
import javax.xml.parsers.DocumentBuilderFactory;
import javax.xml.parsers.ParserConfigurationException;

import org.w3c.dom.Document;
import org.w3c.dom.Element;
import org.w3c.dom.NodeList;

public class XmlMap{

    private Element element;

    public XmlMap(Element element) {
        this.element = element;
    }

    public List getList(String name) { //这里去掉了泛型,请自行加上
        NodeList nList = element.getElementsByTagName(name);
        List list = new ArrayList(nList.getLength());//这里去掉了泛型,请自行加上
        for (int i = 0; i < nList.getLength(); i++) {
            list.add(new XmlMap((Element)nList.item(i)));
        }
        return list;
    }

    /**
     * 获取一个属性的值
     */
    protected String get(String name) {
        if (element.hasAttribute(name))
            return element.getAttribute(name);
        else if ("value".equals(name))
            return element.getTextContent();
        return null;
    }

    static DocumentBuilder db;

    static {
        try {
            db = DocumentBuilderFactory.newInstance().newDocumentBuilder();
        } catch (ParserConfigurationException e) {
            throw new RuntimeException(e);
        }
    }

    /**
     * 从输入流读取XML文件,构建XmlMap对象
     * @param is 包含Xml文件的输入流
     * @return XmlMap对象
     */
    public static final XmlMap read(InputStream is) {
        try {
            Document doc = db.parse(is);
            doc.normalizeDocument();
            return new XmlMap((Element) doc.getDocumentElement());
        } catch (Exception e) {
            throw new RuntimeException(e);
        }
    }

    public static final Object parse(XmlMap map,String path) {
        if (path.indexOf('.') > 0)
            return parse(get2(map, path.substring(0,path.indexOf('.'))), path.substring(path.indexOf('.')+1));
        //到这里的话,应该只剩下 abc#attr 或者abc[12]#attr 或者 abc[12] 或者abc
        if (path.indexOf('#') > -1) //需要获取具体的属性值
            if (path.indexOf('#') > 0)
                return get2(map, path.substring(0,path.indexOf('#'))).get(path.substring(path.indexOf('#')+1));
            else
                return map.get(path.substring(1));
        else
            //如果指定了索引则返回XmlMap,否则返回List
            return path.indexOf('[') > 0 ? get3(map, path) : map.getList(path);
    }

    private static final XmlMap get2(XmlMap map, String path) {
        return path.indexOf('[') > 0 ? get3(map, path) : map.getList(path).get(0);
    }

    private static final XmlMap get3(XmlMap map, String path) {
        return map.getList(path.substring(0,path.lastIndexOf('['))).get(Integer.parseInt(path.substring(path.lastIndexOf('[')+1,path.length()-1)));
    }
}

点击查看完整版 – 在Nutz Lab项目中

使用示例:

 XmlMap map = XmlMap.read(new FileInputStream("demo.xml"));获取XmlMap对象
 map.get("authBy");                       //返回值为xxxUserSeriver
 XmlMap.parse(map, "#authBy");            //返回值为xxxUserSeriver
 XmlMap.parse(map, "other#value");        //other没有value属性,则返回其文本值abc
 XmlMap.parse(map, "url[3]#pattern");     //获取第4个(索引值为3)url标签的pattern属性
 XmlMap.parse(map, "levelA.levelB.levelC[1].levelD#key");//返回值为XX2X
 XmlMap.parse(map, "levelA.levelB");      //返回值为一个包含全部levelB节点的List
 XmlMap.parse(map, "levelA.levelB[1]");   //返回值为第2个levelB节点的XmlMap
 XmlMap.parse(map, "levelA.levelB#myKey");//返回值为nutz

其实,我是打算做一个基于URL的权限控制, 考虑叫NutzSecurity 设想中,YY中

一起来,为Nutz编写插件!

2011-03-05 09:33:29 +0800

随着Nutz代码的不断改进,为Nutz编写插件已经越来越容易.

早期我们编写的插件,很多都是为了兼容/集成XX框架而写的. 例如SpringIocLoader

其实我们可以做更多更强大的插件,今天以当前扩展功能最好的MVC为例: 1. 视图插件 2. 适配器插件 3. 处理器插件 4. UrlMapping插件

逐一讲解: 1. 视图插件 要求: 实现View接口和ViewMarker接口能做什么? – 实现你的视图,例如用Freemaker/Velocity的模板文件替代jsp – Nutz本身的视图不符合你的口味? 改造一个视图吧!!

2. 适配器插件 要求: 实现HttpAdaptor接口能做什么? – 你的请求的格式未被nutz识别? 例如WebService请求 – 请求是加密的? 需要解码才能读取 – 一个请求包含几种数据格式? 这年头啥需求都有,你懂的

3. 处理器插件 – 新版的MVC使用动作链模型,你可以介入请求处理的任何阶段 要求: 实现Processor接口能做什么? – 权限处理,过滤URL或者具体的方法调用 – 数据校验 ** 4. UrlMapping插件** 要求: 实现UrlMapping 能做什么? – REST控? 这个适合你!! 你会找到不少志同道合的童鞋

简单介绍完, 看看有无时间写篇 “Nutz插件编写指南” 哈哈, 期待吧

人生第一次离职,Mark一下

2011-02-25 09:18:59 +0800

终于办完离职手续,离开了工作了3年的公司.

太困了,虽然很多话想写,下次吧,先自己Mark一下,留个纪念.

JDiff 使用与改进

2011-02-24 03:45:02 +0800

不久前为Nutz的构建服务添加JDiff报告. 报告查看地址: http://build.sunfarms.net/nutz/lastest/jdiff/ 以后都可以知道不同的nutz版本API有何不同了.

JDiff报告,就是描述不同版本的代码之间的API差异, 如某某public类被删除了,某某接口改变了

感兴趣的可以先访问官网,以了解基本使用.

但,原本的JDiff有一个很大的问题,对中文支持不好.故,我改进了一下,放出一个版本(原版已经很久没用更新了) 添加了一个配置,用于设置源码的编码encoding. 另外,我移除了对xerces.jar的依赖.

现在可以在old或者new节点添加encoding=“UTF-8”之类的设置. 实例配置,请查看Nutz项目的build2.xml文件,地址: http://code.google.com/p/nutz/source/browse/trunk/build/build2.xml

我已经上传到Google Doc,需要的童鞋就下载吧. 地址: jdiff-1.1.1-Modify-by-Wendal.zip

附上对原版的修改:

移除对xerces.jar的依赖, 将XML2API中的代码:

String parserName = System.getProperty(“org.xml.sax.driver”); if (parserName == null) { parser = org.xml.sax.helpers.XMLReaderFactory.createXMLReader(“org.apache.xerces.parsers.SAXParser”); } else { parser = org.xml.sax.helpers.XMLReaderFactory.createXMLReader(); }

改为:

parser = org.xml.sax.helpers.XMLReaderFactory.createXMLReader();

中文支持,为ProjectInfo类添加属性encoding,然后修改JDiff的generateJavadoc方法:

//在jd.perform();前面添加 if(proj.getEncoding() != null) { jd.setEncoding(proj.getEncoding()); jd.setDocencoding(proj.getEncoding()); jd.setCharset(proj.getEncoding()); }

生成XML的时候也设置一下,generateXML方法:

//添加一样的内容
if(proj.getEncoding() != null) {
            jd.setEncoding(proj.getEncoding());
            jd.setDocencoding(proj.getEncoding());
            jd.setCharset(proj.getEncoding());
}

完成对JBE的修正,终于可以用了.

2011-02-22 04:08:20 +0800

先放出下载地址: jbe-0.1b-Fixed-By-WendalChen.zip

原版下载地址: JBE - Java Bytecode Editor

原版存在的问题: 对方法进行修改后,点击Save Method, 如果存在 invokeinterface 的行, 将无法保存!! 后台报错.

以下是我在压缩包中写的描述: This JBE had been modify by Wendal Chen , base on JBE 0.1b

Fix: when save method whit “invokeinterface” , app fail.

File change:

JAsmParser.java line 169~170:
int arg1 = getMethodConstRef(instrElems, cpg, labels);
int arg2 = Utility.methodSignatureArgumentTypes(getDescrFromFullMethod(instrElems[1])).length;

//---------------------------------------------------------------
ConstantInterfaceMethodrefInfo.java Override getVerbose() :

public String getVerbose() throws InvalidByteCodeException {
    ConstantNameAndTypeInfo nameAndType = getNameAndTypeInfo();

    return classFile.getConstantPoolEntryName(classIndex) + "/" +
           classFile.getConstantPoolEntryName(nameAndType.getNameIndex())
           +classFile.getConstantPoolEntryName(nameAndType.getDescriptorIndex());
}

I check my class file, it work. I hope it work for you too.

通过修改其中两个类来修复这个问题.

一个极其简陋的Datasource连接池实现

2011-02-21 01:18:41 +0800

写了一段时间了,一直没提交到Nutz,哈哈. 明显没有技术含量,提上去明显找抽!

用来跑Nutz的测试,能够全部pass.

直接上代码:

package org.nutz.dao.impl;

import java.io.PrintWriter;
import java.lang.reflect.InvocationHandler;
import java.lang.reflect.Method;
import java.lang.reflect.Proxy;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.util.Iterator;
import java.util.Queue;
import java.util.concurrent.ConcurrentLinkedQueue;

import javax.sql.DataSource;

import org.nutz.lang.Lang;

@SuppressWarnings("unchecked")
public class SimpleDataSource implements DataSource {

    private String username;
    private String password;
    private String url;

    /*保存已经建立的连接*/
    private ConcurrentLinkedQueue connQueue = new ConcurrentLinkedQueue();

    public SimpleDataSource(String url, String driverClass, String username, String password)
            throws ClassNotFoundException {
        if (driverClass != null)
            Class.forName(driverClass);
        this.url = url;
        this.username = username;
        this.password = password;
    }

    public Connection getConnection() throws SQLException {
        Connection conn = (Connection) connQueue.poll();
        if (conn != null)
            return conn;
        conn = DriverManager.getConnection(url, username, password);
        return (Connection) Proxy.newProxyInstance( SimpleDataSource.class.getClassLoader(),
                                                    new Class[]{Connection.class},
                                                    new ConnectionInvocationHandler(conn, connQueue));
    }

    public void close() throws Throwable {
        Iterator it = connQueue.iterator();
        while (it.hasNext()) {
            Connection conn = (Connection) it.next();
            synchronized (conn) {
                try {
                    conn.close();
                }
                catch (Throwable e) {}
            }
        }
    }

    protected void finalize() throws Throwable {
        close();
    }

    static class ConnectionInvocationHandler implements InvocationHandler {

        private Connection conn;

        private Queue<connection> connQueue;

        public ConnectionInvocationHandler(Connection conn, Queue</connection><connection> connQueue) {
            this.conn = conn;
            this.connQueue = connQueue;
        }

        public Object invoke(Object proxy, Method method, Object[] args) throws Throwable {
            if (args == null
                && "close".equals(method.getName())
                && connQueue.size() < 20
                && connQueue.offer((Connection) proxy))
                return null;
            try {
                return method.invoke(conn, args);
            }
            catch (Throwable e) {
                throw Lang.unwrapThrow(e);
            }
        }
    }

    // -------------------------------------------------------------------------
    // 其他无需实现的方法
    // -------------------------------------------------------------------------
    public Connection getConnection(String username, String password) {
        throw Lang.noImplement();
    }

    public PrintWriter getLogWriter() throws SQLException {
        throw Lang.noImplement();
    }

    public int getLoginTimeout() throws SQLException {
        throw Lang.noImplement();
    }

    public void setLogWriter(PrintWriter out) throws SQLException {
        throw Lang.noImplement();
    }

    public void setLoginTimeout(int seconds) throws SQLException {
        throw Lang.noImplement();
    }

    public boolean isWrapperFor(Class iface) throws SQLException {
        throw Lang.noImplement();
    }

    public Object unwrap(Class iface) throws SQLException {
        throw Lang.noImplement();
    }
}

用来跑Nutz的TestCase, 在我的机器耗时5.2秒,与DBCP相当(5.3秒). 缺点: 1. 高并发时,可能建立过多的连接 2. 高并发时,部分连接可能没有被回收 3. 限制死了最多保存20个连接(当然,这个很好改) 4. XXX都没法配置

调用方法:

直接创建:

DataSource dataSource = new SimpleDataSource(“jdbc:h2:mem:~“,“org.h2.Driver”,“sa”,“sa”); //代码…..

//最后记得关闭一下,或者等GC的时候自行关闭. ((SimpleDataSource)dataSource).close();

NutIoc的json方式

dataSource : {
    type :"org.nutz.dao.impl.SimpleDataSource",
    events : {
        depose :"close"
    },
    args : ["jdbc:h2:mem:~","org.h2.Driver","sa","sa"]
}

哈哈,没啥技术含量,来拍我吧!!

Nutz 一些无法完成的功能

2011-02-16 08:58:49 +0800

这篇文章针对的是1.b.35

Nutz.Ioc与Spring.ioc相比,无法实现工厂类生成具体类的实例

public class A {}

public class B { public static A makeA(){return new A();} }
Nutz.Aop与Spring.Aop相比,无法拦截构造方法,静态方法
Nutz.Dao与Hibernate相比,没有缓存层,无自动update表结构,没有复杂的映射关系管理,没有XML< –>POJO转换工具
Nutz.MVC 没有校验功能,没有配置方式的URL映射
Nutz.MVC 与Struts2相比, 没有标签库
Nutz.Lang 与Apache Common 系列相比, 很多功能都没有

问题是,我们需要这些功能吗??

Nutz 面向大型应用吗? 面向复杂应用吗?

我的观点够用就好!

做爸爸了!! 过年前有了个虎宝宝!!

2011-02-08 08:38:16 +0800

嘻嘻,母女平安. 靓照暂时就不曝光了.

下面记一下经验,嘻嘻: . 买生育保险能省很多钱,常规产检都是免费的哦! 仅住院/做手术,就省了4k . 绿色(超薄干爽)的帮宝适,很舒服,但不是最好的,那只是中档货. 最好的是母乳宝宝,然后是超级棉柔,都是黄色包装的!!前者(母乳宝宝)大陆无销售,一般是美国产,需要在香港买/淘宝代购,2.5元/片;后者(超级棉柔),一般存货不多,而且标明是日本进口, 2元/片 . 早点去医院的孕妇学校,能学到很多东西,而且能提前接触到产房的人 . 手术后6小时就得翻身(很痛,但是一定要坚强),并且马上让宝宝吮吸,对恢复很有帮助!! 使用卧式,叫护士教. . 手术后6小时开始就要喝水/喝汤了,12小时就要喝粥,24小时务必下床!! 要坚强!! 放屁后就可以吃饭了!! 不会觉得饿的,但一样要吃,按平时的饭量吃. . 术前要求医生使用”术后镇痛术”,就是一个缓慢静脉镇痛药,250元,很值得的!! . 宝宝出生后,2小时~4小时就要先喂一次水,然后开始喂奶粉,20毫升就够了,宝宝开头仅喝10毫升的,接下来2天,每2小时喂一次. . 如果打算母乳喂养,那么怀孕时就要做按摩,我老婆12小时就开始有乳汁了(剖宫产啊,一般第2/3天才有的;顺产也要第二天),医院的护士都很惊讶呢!! 做法: 每天晚上,用大拇指,按压第3/4个脚趾,从脚趾的关节,顺着骨头往脚面推,不是脚底,每个脚趾按100下,共400下.这个要老公做的,我经常按到手软呢. . 怀孕后就先休假1个月!! 好好休息一下,一般就是睡大觉,然后再上班. 这样孕期的反应就少很多了. . 香港有卖一种仿乳头的奶瓶,英国产,淘宝也有代购,150ml的,其实完全足够了. . 奶粉我觉得明治最好,为黄种人设计,不热气,虽然有人提到会缺锌,但相比欧美的产品,还是明治好!! 买明治,一定要买日本本土产的,买其他的话,还不如买美赞臣/牛栏牌 . 怀孕后,继续正常饮食,补充叶酸/维生素就可以了,不要经常进补!! 经常散步,即使顶着大肚子. 手术前,老婆走得比我还快呢! . 防辐射服 – 没用的,骗钱的仅仅是心理安慰,我就没有买 . 怀孕后,上Q/看电影,一切照旧! 我们周围最强的电磁波辐射,其实是光线,除非你住在黑暗的屏蔽室内,否则啥都挡不住! . 宝宝够暖就可以了,偶尔打个喷嚏其实很好很正常的. 衣服太多,会出红疹,严重的话要住院的!!

暂时就想到这么多,欢迎交流哦

Hibernate的ConnectionProvider是怎么一回事?

2011-01-28 02:28:12 +0800

这次讨论一下Hibernate的ConnectionProvider接口, 因为我看到某些Hibernate项目是这样配置的:

<property name="c3p0.min_size">5</property>
<property name="c3p0.max_size">30</property>
<property name="c3p0.time_out">1800</property>
<property name="c3p0.max_statement">50</property>

问题是, 这样就配置好了吗? hibernate.connection.provider_class到底需不需要呢? 来看看Hibernate 3.3.2 GA的源码 ConnectionProviderFactory类的newConnectionProvider方法.

public static ConnectionProvider newConnectionProvider(Properties properties, Map connectionProviderInjectionData) throws HibernateException {
    ConnectionProvider connections;
    String providerClass = properties.getProperty(Environment.CONNECTION_PROVIDER);
    if ( providerClass!=null ) {
        try {
            log.info("Initializing connection provider: " + providerClass);
            connections = (ConnectionProvider) ReflectHelper.classForName(providerClass).newInstance();
        }
        catch ( Exception e ) {
            log.error( "Could not instantiate connection provider", e );
            throw new HibernateException("Could not instantiate connection provider: " + providerClass);
        }
    }
    else if ( properties.getProperty(Environment.DATASOURCE)!=null ) {
        connections = new DatasourceConnectionProvider();
    }
    else if ( properties.getProperty(Environment.URL)!=null ) {
        connections = new DriverManagerConnectionProvider();
    }
    else {
        connections = new UserSuppliedConnectionProvider();
    }

    if ( connectionProviderInjectionData != null && connectionProviderInjectionData.size() != 0 ) {
        //inject the data
        try {
            BeanInfo info = Introspector.getBeanInfo( connections.getClass() );
            PropertyDescriptor[] descritors = info.getPropertyDescriptors();
            int size = descritors.length;
            for (int index = 0 ; index < size ; index++) {
                String propertyName = descritors[index].getName();
                if ( connectionProviderInjectionData.containsKey( propertyName ) ) {
                    Method method = descritors[index].getWriteMethod();
                    method.invoke( connections, new Object[] { connectionProviderInjectionData.get( propertyName ) } );
                }
            }
        }
        catch (IntrospectionException e) {
            throw new HibernateException("Unable to inject objects into the conenction provider", e);
        }
        catch (IllegalAccessException e) {
            throw new HibernateException("Unable to inject objects into the conenction provider", e);
        }
        catch (InvocationTargetException e) {
            throw new HibernateException("Unable to inject objects into the conenction provider", e);
        }
    }
    connections.configure(properties);
    return connections;
    }

上面的代码有点长, 精简出核心部分:

ConnectionProvider connections;
String providerClass = properties.getProperty(Environment.CONNECTION_PROVIDER);
if ( providerClass!=null ) {
    connections = (ConnectionProvider) ReflectHelper.classForName(providerClass).newInstance();
}else if ( properties.getProperty(Environment.DATASOURCE)!=null ) {
    connections = new DatasourceConnectionProvider();
}else if ( properties.getProperty(Environment.URL)!=null ) {
    connections = new DriverManagerConnectionProvider();
}else {
    connections = new UserSuppliedConnectionProvider();
}
/**
Environment.CONNECTION_PROVIDER 的定义:
public static final String CONNECTION_PROVIDER ="hibernate.connection.provider_class";
Environment.DATASOURCE 的定义:
public static final String DATASOURCE ="hibernate.connection.datasource";
Environment.URL 的定义:
public static final String URL ="hibernate.connection.url";
*/

可以看到, 如果hibernate.connection.provider_class和hibernate.connection.datasource都没有定义,就会使用内置的连接池,OK,那继续看默认的连接池DriverManagerConnectionProvider,只贴精华部分:

/*连接池就是一个ArrayList !!*/
private final ArrayList pool = new ArrayList();
/*获取连接*/
public Connection getConnection() throws SQLException {
    synchronized (pool) {
        if ( !pool.isEmpty() ) {
            int last = pool.size() - 1;
            Connection pooled = (Connection) pool.remove(last);
            if (isolation!=null) pooled.setTransactionIsolation( isolation.intValue() );
            if ( pooled.getAutoCommit()!=autocommit ) pooled.setAutoCommit(autocommit);
            return pooled;
        }
    }

    log.debug("opening new JDBC connection");
    Connection conn = DriverManager.getConnection(url, connectionProps);
    return conn;
}
/*释放连接*/
public void closeConnection(Connection conn) throws SQLException {
    synchronized (pool) {
        int currentSize = pool.size();
        if ( currentSize < poolSize ) {
            pool.add(conn);
            return;
        }
    }
    conn.close();
}

用一个简单ArrayList做出来的默认连接池,就是这样简单!!! sorry,是简陋!!! 无比简陋!! 性能能有多好?! 你的Hibernate还在用默认连接池? 你还没有配hibernate.connection.provider_class属性? 快去看看吧!!

系统变量file.encoding对Java的运行影响有多大?

2011-01-27 08:06:27 +0800

这个话题来自: Nutz的issue 361

在考虑这个issue时, 我一直倾向于使用系统变量file.encoding来改变JVM的默认编码.

今天,我想到, 这个系统变量,对JVM的影响到底有多大呢? 我使用最简单的方法看看这个变量的影响–在JDK 1.6.0_20的src.zip文件中,查找包含file.encoding字眼的文件. 共找到4个, 分别是: 先上重头戏 java.nio.Charset类:

    public static Charset defaultCharset() {
        if (defaultCharset == null) {
        synchronized (Charset.class) {
        java.security.PrivilegedAction pa =
            new GetPropertyAction("file.encoding");
        String csn = (String)AccessController.doPrivileged(pa);
        Charset cs = lookup(csn);
        if (cs != null)
            defaultCharset = cs;
                else 
            defaultCharset = forName("UTF-8");
            }
    }
    return defaultCharset;
    }

java.net.URLEncoder的静态构造方法,影响到的方法 java.net.URLEncoder.encode(String)

    static {

    dontNeedEncoding = new BitSet(256);
    int i;
    for (i = 'a'; i < = 'z'; i++) {
        dontNeedEncoding.set(i);
    }
    for (i = 'A'; i <= 'Z'; i++) {
        dontNeedEncoding.set(i);
    }
    for (i = '0'; i <= '9'; i++) {
        dontNeedEncoding.set(i);
    }
    dontNeedEncoding.set(' '); /* encoding a space to a + is done
                    * in the encode() method */
    dontNeedEncoding.set('-');
    dontNeedEncoding.set('_');
    dontNeedEncoding.set('.');
    dontNeedEncoding.set('*');

        dfltEncName = (String)AccessController.doPrivileged (
        new GetPropertyAction("file.encoding")
        );
    }

com.sun.org.apache.xml.internal.serializer.Encoding的getMimeEncoding方法(209行起)

    static String getMimeEncoding(String encoding)
    {

        if (null == encoding)
        {
            try
            {

                // Get the default system character encoding.  This may be
                // incorrect if they passed in a writer, but right now there
                // seems to be no way to get the encoding from a writer.
                encoding = System.getProperty("file.encoding", "UTF8");

                if (null != encoding)
                {

                    /*
                    * See if the mime type is equal to UTF8.  If you don't
                    * do that, then  convertJava2MimeEncoding will convert
                    * 8859_1 to "ISO-8859-1", which is not what we want,
                    * I think, and I don't think I want to alter the tables
                    * to convert everything to UTF-8.
                    */
                    String jencoding =
                        (encoding.equalsIgnoreCase("Cp1252")
                            || encoding.equalsIgnoreCase("ISO8859_1")
                            || encoding.equalsIgnoreCase("8859_1")
                            || encoding.equalsIgnoreCase("UTF8"))
                            ? DEFAULT_MIME_ENCODING
                            : convertJava2MimeEncoding(encoding);

                    encoding =
                        (null != jencoding) ? jencoding : DEFAULT_MIME_ENCODING;
                }
                else
                {
                    encoding = DEFAULT_MIME_ENCODING;
                }
            }
            catch (SecurityException se)
            {
                encoding = DEFAULT_MIME_ENCODING;
            }
        }

最后一个javax.print.DocFlavor类的静态构造方法:

    static {
    hostEncoding = 
        (String)java.security.AccessController.doPrivileged(
                  new sun.security.action.GetPropertyAction("file.encoding"));
    }

可以看到,系统变量file.encoding影响到 1. Charset.defaultCharset() Java环境中最关键的编码设置 2. URLEncoder.encode(String) Web环境中最常遇到的编码使用 3. com.sun.org.apache.xml.internal.serializer.Encoding 影响对无编码设置的xml文件的读取 4. javax.print.DocFlavor 影响打印的编码

故,影响还是很大的哦, 可以说是Java中编码的一个关键钥匙!

动手做一个Nginx Module-简洁版

2011-01-24 01:57:22 +0800

如果在google上搜索Nginx Module,会得到17万条结果,但是,基本上都是千篇一律. 结合我这段时间的尝试,我决定自己写一篇非常非常简单的入门,仅描述如何做出一个最简单的Hello模块

创建一个存放文件的文件夹命名为 ngx_http_hello_module —————————————————-

    #进入主文件夹
    cd ~
    wget http://nginx.org/download/nginx-0.9.4.tar.gz
    tar xvf nginx-0.9.4.tar.gz
    cd nginx-0.9.4
    mkdir ngx_http_hello_module

创建config文件,注意,切记要在Linux下创建这个文件!! ———————————————–

    vim config
    #敲入以下内容
    ngx_addon_name=ngx_http_hello_module
    HTTP_MODULES="$HTTP_MODULES ngx_http_hello_module"
    NGX_ADDON_SRCS="$NGX_ADDON_SRCS $ngx_addon_dir/ngx_http_hello_module.c"

创建ngx_http_hello_module.c文件(请使用本文结尾提供的附件中的文件) ————————————————————–

    //通过vim ngx_http_hello_module.c 创建文件并录入下面的内容

    //这3个文件必须导入,很多有用的方法都定义在里面.
    #include <ngx_config.h>
    #include <ngx_core.h>
    #include <ngx_http.h>

    //声明配置方法
    static char *ngx_http_hello(ngx_conf_t *cf, ngx_command_t *cmd, void *conf);

    //声明这个模块能够识别的配置信息
    static ngx_command_t  ngx_http_hello_commands[] = {
    { ngx_string("hello"),
      NGX_HTTP_LOC_CONF|NGX_CONF_NOARGS, //仅位于Location里,没有额外参数
      ngx_http_hello,                                       //指向配置方法
      NGX_HTTP_LOC_CONF_OFFSET,
      0,
      NULL }
    };

    //定义模块模块上下文,即在nginx解释配置信息时的行为,这里全部为NULL
    static ngx_http_module_t  ngx_http_hello_module_ctx = {
        NULL,                               /* preconfiguration */
        NULL,                               /* postconfiguration */

        NULL,                               /* create main configuration */
        NULL,                               /* init main configuration */

        NULL,                               /* create server configuration */
        NULL,                               /* merge server configuration */

        NULL,                   /* create location configuration */
        NULL                                /* merge location configuration */
    };

    //定义本模块
    ngx_module_t  ngx_http_hello_module = {
        NGX_MODULE_V1,
        &ngx_http_hello_module_ctx,      /* module context 模块上下文*/
        ngx_http_hello_commands,         /* module directives  这个模块能够识别的配置信息*/
        NGX_HTTP_MODULE,               /* module type 一般都是HTTP模块的啦*/ 
        NULL,                          /* init master */
        NULL,                          /* init module */
        NULL,                          /* init process */
        NULL,                          /* init thread */
        NULL,                          /* exit thread */
        NULL,                          /* exit process */
        NULL,                          /* exit master */
        NGX_MODULE_V1_PADDING
    };

    //请求处理器,由ngx_http_hello方法向nginx登记
    static ngx_int_t
    ngx_http_hello_handler(ngx_http_request_t *r){
        ngx_int_t                  rc;
        size_t             size;
        ngx_chain_t        out;
        ngx_buf_t         *b;

        ngx_str_set(&r->headers_out.content_type, "text/plain");//设置响应的类型为纯文本
        size = sizeof("It is OK");
        b = ngx_create_temp_buf(r->pool, size); //获取内存空间
        if (b == NULL) {
            return NGX_HTTP_INTERNAL_SERVER_ERROR;
        }
        b->last = ngx_sprintf(b->last, "It is OK!"); //写入内容到缓存
        out.buf = b;                                        //将响应体的内容指向b缓存
        out.next = NULL;

        r->headers_out.status = NGX_HTTP_OK; //响应码,200
        r->headers_out.content_length_n = b->last - b->pos;//设置响应体的长度

        b->last_buf = 1;
 
        ngx_http_send_header(r);           //发送响应头,如Content-Type    text/plain

        return ngx_http_output_filter(r, &out);//继续其他过滤器
    };

    //将本模块的处理方法ngx_http_hello_handler登记到nginx配置上下文.
    static char *ngx_http_hello(ngx_conf_t *cf, ngx_command_t *cmd, void *conf){
        ngx_http_core_loc_conf_t  *clcf;

        clcf = ngx_http_conf_get_module_loc_conf(cf, ngx_http_core_module);
        clcf->handler = ngx_http_hello_handler;

        return NGX_CONF_OK;
    };

开始编译

#返回到 ~/nginx-0.9.4 cd .. #执行configure ./configure –add-module=ngx_http_hello_module #编译 & 安装 make & make install
测试

vim /etc/nginx/nginx.conf #在server中键入: location =/hello { hello; }

#启动nginx /usr/local/nginx/sbin/nginx
通过浏览器访问 http://your_ip/hello 就能看到 It is OK!

本文用的的文件: nginx_http_hello_module.zip

Nginx不同编译选项得到的二进制文件大小对比

2011-01-17 07:45:47 +0800

Nginx信息: 版本: 0.9.3 对原版的修改, 将auto/cc/gcc的-g去掉,将-O改为-O2 附上原始数据,比较长:

#默认编译
./configure
make
ll objs/nginx
make clean
#File size 525556
#--with-cc-opt=-g 2444312
#--with-cc-opt=-g --with-debug 2513996

#加载大部分可选模块
./configure --with-http_ssl_module \
        --with-http_realip_module \
        --with-http_addition_module \
        --with-http_xslt_module \
        --with-http_sub_module \
        --with-http_dav_module \
        --with-http_flv_module \
        --with-http_gzip_static_module \
        --with-http_random_index_module \
        --with-http_secure_link_module \
        --with-http_degradation_module \
        --with-http_stub_status_module \
        --with-http_perl_module
make > /dev/null
ll objs/nginx
make clean
#File size 642031
#--with-cc-opt=-g 4557807
#--with-cc-opt=-g --with-debug 4689478

#移除大部分可以移除的模块
./configure         --without-http_charset_module \
        --without-http_gzip_module \
        --without-http_ssi_module \
        --without-http_userid_module \
        --without-http_access_module \
        --without-http_auth_basic_module \
        --without-http_autoindex_module \
        --without-http_status_module \
        --without-http_geo_module \
        --without-http_map_module \
        --without-http_split_clients_module \
        --without-http_referer_module \
        --without-http_rewrite_module \
        --without-http_proxy_module \
        --without-http_fastcgi_module \
        --without-http_uwsgi_module \
        --without-http_scgi_module \
        --without-http_memcached_module \
        --without-http_limit_zone_module \
        --without-http_limit_req_module \
        --without-http_empty_gif_module \
        --without-http_browser_module \
        --without-http_upstream_ip_hash_module
make
ll objs/nginx
make clean
#File size 357657
#--with-cc-opt=-g 1556885
#--with-cc-opt=-g --with-debug 1616309

#进一步移除Http-Cache
./configure         --without-http_charset_module \
        --without-http_gzip_module \
        --without-http_ssi_module \
        --without-http_userid_module \
        --without-http_access_module \
        --without-http_auth_basic_module \
        --without-http_autoindex_module \
        --without-http_status_module \
        --without-http_geo_module \
        --without-http_map_module \
        --without-http_split_clients_module \
        --without-http_referer_module \
        --without-http_rewrite_module \
        --without-http_proxy_module \
        --without-http_fastcgi_module \
        --without-http_uwsgi_module \
        --without-http_scgi_module \
        --without-http_memcached_module \
        --without-http_limit_zone_module \
        --without-http_limit_req_module \
        --without-http_empty_gif_module \
        --without-http_browser_module \
        --without-http_upstream_ip_hash_module \
        --without-http-cache
make
ll objs/nginx
make clean
#File size 343543
#--with-cc-opt=-g 1467019
#--with-cc-opt=-g --with-debug 1521963

附上图表(使用Google Chart). 解释: 1. 第一组, 添加大部分可选模块如gzip_static SSL等 2. 第二组, 默认配置 3. 第三组, 移除大部分可移除的模块, 使用 –without-http_XXXX 4. 第四组, 在第三组基础上,再移除Http-Cache

图表中的Y轴的单位为字节.

PS: 本blog使用的Nginx大小为450k,哈哈! 编译参数:

root@ubuntu:~# /usr/local/nginx/sbin/nginx -V
nginx: nginx version: nginx/0.9.3
nginx: built by gcc 4.4.3 (Ubuntu 4.4.3-4ubuntu5)
nginx: configure arguments: --user=www --group=www 
--prefix=/usr/local/nginx --with-http_stub_status_module 
--with-http_gzip_static_module --with-cc-opt=-ltcmalloc 
--without-http_empty_gif_module --without-http_split_clients_module 
--without-http_geo_module --without-http_auth_basic_module 
--without-http_memcached_module --with-cpu-opt=pentium4 
--without-http_uwsgi_module --without-http_scgi_module

WP-Codebox乱码问题

2011-01-10 10:05:52 +0800

以前就发现代码高亮插件WP-Codebox在IE下乱码,且行号会分行,可惜CSS水平一直有限,一直未能修正.

今天人品爆发,加上最近CSS修炼(从无知到极度菜鸟),终于修改成功!! 需要修改的文件: geshi.php 解决乱码:

var $overall_style = 'font-family:monospace;';
//改为
var $overall_style = '';

codebox.css 解决行号换行问题(仅解决了100行以内):

.line_numbers pre {
        padding: 0px;
        margin: 0px;
        text-align: right;
        width: 14px; //新加一句
}

Alfresco Virtual tomcat默认不解析EL

2011-01-06 10:17:32 +0800

我正在使用Alfresco 3.3 SP4 , 发现其Virtual tomcat竟然是构建在tomcat5.5上的. 在jsp页面中写el表达式,死活不出来.最后才发现,是tomcat5.5默认不解析EL !!

查原因, 在tomcat5.5.31的源码中: 1. 类名: org.apache.jasper.compiler.JspConfig 2. 代码:

if (webApp == null
     || !"2.4".equals(webApp.findAttribute("version"))) {//直接字符串判断,晕!
     defaultIsELIgnored = "true";
     return;
}
//如果version不是2.4,那根本不走这里!
TreeNode jspConfig = webApp.findChild("jsp-config");
if (jspConfig == null) {
     return;
}

解决方法: : 第一种,在JSP页面头部加入指令:

< %@ page isELIgnored="false" %>

第二种,在web.xml中设置version为2.4 : 第三种,在web.xml中添加一个设置(这解决方法依赖于第二种!!故基本上无效!!!),配置el-ignored为false!

严重怀疑这个是bug !!

发起一个新项目 - NginxS

2011-01-03 10:19:25 +0800

为了更好地阅读/研究Nginx的源码,我奋斗了一个上午,终于把NginxS项目搭建起来了. NginxS,就是要研读Nginx的代码,暂时打算做以下两个用途: 1. 在 branches 中提交了0.⁷⁄₀.⁸⁄₀.9分支的源代码,便于分析不同版本之间的差异,如果官网有新版发布,就会及时跟进. 2. 在 trunk 中,现在代码是当前最新稳定版0.8.54, 准备用于学习nginx的代码,并添加中文注释/笔记

项目地址: http://code.google.com/p/nginxs/

看看我能读出个啥东西来,哈哈!

3年,换了4家公司!

2010-12-30 08:43:36 +0800

不久前还说着一个朋友经常跳槽,昨天才发现,跳得最多的其实是自己!!

3年,不容易啊,换了4家!!

第一家,A公司, 200来人,干了5个月,美资第二家,B公司,2000来人,干了9个月,印度公司第三家,C公司,200来人,干了21个月,印度公司第四家,D公司,5000人,干了1天,美资

^_^,2次被收购,1次被分拆,然而我仍在同一个办公室!!

想不到都年底了,又被收购了一次. 哈哈

增强型JavaDoc -- APIviz 简洁实践

2010-12-27 01:40:55 +0800

一段时间之前,为Nutz的JavaDoc添加了这个插件,APIviz,可以自动生成包依赖关系图,和简单的UML类图. 在国内还没见到公开的使用,还是介绍一下,Nutz示例第一步,安装Graphviz,该软件可以运行在N多平台上,这里以Ubuntu为例

apt-get install graphviz

第二步,当然就是下载APIviz了, 当前最新版为 1.3.1 GA 第三步, Ant调用:

<javadoc doclet="org.jboss.apiviz.APIviz" encoding="UTF-8" sourcepath="src" docletpath="${basedir}/build/deps/apiviz-1.3.1.GA.jar" charset="utf-8" destdir="${javadoc-dir}" additionalparam="-author -version -sourceclasspath ${classes-dir-jdk6}" classpathref="nutz-classpath" docencoding="utf-8"></javadoc>

与普通的JavaDoc相比,添加了3个属性:

#引用APIviz
doclet="org.jboss.apiviz.APIviz" 
#指向APIviz的jar包
docletpath="${basedir}/build/deps/apiviz-1.3.1.GA.jar" 
#声明类文件的路径,其余的-author -version是官网上建议添加的,非必需.
#这里的${classes-dir-jdk6}就是Nutz编译好的class存放的地址
additionalparam="-author -version -sourceclasspath ${classes-dir-jdk6}"

这样,就可以自动生成全部包依赖关系了,执行的时候,需要一点点耐心哦顺带说一下,这APIviz应该是Jboss的产品

Nutz终于beta版了!!

2010-12-24 07:00:19 +0800

前前后后33版,我参与了 19(16~34)个版本,哈哈~~ 文件已经上传到Google Code, 非常鸡冻!!

另外, 提交到Maven现在正在进行中,缓慢地上传… 我可是1M的小水管. 顺便Mask一下生产asc签名的方法,copy自GPG快速入门:

gpg --armor --detach-sign your-file.zip

Log4j 分级输出

2010-12-20 12:18:12 +0800

一直以来,我都以为Log4j仅能配置输出日志的最低等级,不能限定只输出某一/某些特定等级,今天,无意中发现了其实是可以的. 先上一份普通的log4j.properties

log4j.rootLogger=INFO, Console, File

###### Console appender definition #######
log4j.appender.Console=org.apache.log4j.ConsoleAppender
log4j.appender.Console.layout=org.apache.log4j.PatternLayout
log4j.appender.Console.layout.ConversionPattern=%d{ABSOLUTE} %x %-5p [%c{3}] %m%n

###### File appender definition #######
log4j.appender.File=org.apache.log4j.DailyRollingFileAppender
log4j.appender.File.File=alfresco.log
log4j.appender.File.Append=true
log4j.appender.File.DatePattern='.'yyyy-MM-dd
log4j.appender.File.layout=org.apache.log4j.PatternLayout
log4j.appender.File.layout.ConversionPattern=%d{ABSOLUTE} %-5p [%c] %m%n

现在需要定义一个名为File2的appender ,仅记录INFO和ERROR,哈哈,有请Log4j的Filter

log4j.appender.File2=org.apache.log4j.DailyRollingFileAppender
log4j.appender.File2.File=alfresco2.log
log4j.appender.File2.Append=true
log4j.appender.File2.DatePattern='.'yyyy-MM-dd
log4j.appender.File2.layout=org.apache.log4j.PatternLayout
log4j.appender.File2.layout.ConversionPattern=%d{ABSOLUTE} %-5p [%c] %m%n

#配置Filter
#定义id为F1的拦截器,只接受INFO到ERROR
log4j.appender.File2.filter.F1=org.apache.log4j.varia.LevelRangeFilter
log4j.appender.File2.filter.F1.LevelMin=INFO
log4j.appender.File2.filter.F1.LevelMax=ERROR
#定义id为F2的拦截器,不接受WARN
log4j.appender.File2.filter.F2=org.apache.log4j.varia.LevelMatchFilter
log4j.appender.File2.filter.F2.levelToMatch=WARN
log4j.appender.File2.filter.F2.acceptOnMatch=false
#可以继续定义你需要的拦截器F3/F4.....

通过定义不同组合的LevelRangeFilter/LevelMatchFilter,让特定的appender只记录你需要的log等级,非常方便的!

详细参考,请查阅Log4j:

JavaDoc Filter PropertyConfigurator

禁用/消除 MySQL客户端的报警声

2010-12-17 02:49:58 +0800

有时候需要用MySQL客户端导入sql文件,一不小心就容易出错,然后就是一段刺耳的报警声,很是烦人! Google一下,发现2种方法

直接在服务器端禁用

[mysql] no-beep #…. other configure
或者仅仅在本地使用mysql客户端时禁用,执行命令时多加一个参数 -b

mysql -p -u root -b

从源码编译MySQL 5.5 -- 简单版

2010-12-16 01:53:13 +0800

MySQL 5.5分支,今天终于发布 5.5.8 GA了.

一贯风格,尝鲜,马上编译之. 折腾了一段时间,发现需要用cmake进行配置了

先安装cmake和ccmake

sudo apt-get install cmake cmake-curses-gui libncurses5-dev
下载并解压mysql-5.5.8.tar.gz到mysql-5.5.8

wget -o mysql-5.5.8.tar.gz http://dev.mysql.com/get/Downloads/MySQL-5.5/mysql-5.5.8.tar.gz/from/http://mirror.csclub.uwaterloo.ca/mysql/ tar xvf mysql-5.5.8.tar.gz cd mysql-5.5.8
然后执行ccmake进行配置,建议将CMAKE_BUILD_TYPE设置为Release

sudo ccmake . #或者 cmake -i 对话式配置
如果嫌第三步麻烦,那么直接执行

sudo cmake .
剩下的就是常规操作了

#编译 sudo make #跑一下测试,全部Pass sudo make test #安装 sudo make install

JavaMail 调试参数设置

2010-12-16 09:17:24 +0800

这周折腾Alfresco升级,同时也发现Alfresco 3.3 SP4 的一个bug – mail.smtp.auth不起效

故顺便看看这个配置在代码中的位置,到处寻觅JavaMail的源码,终于在kenai找到,不过其实我已经用JD-GUI反编译看了一下

找到以下代码:

String str2 = this.jdField_session_of_type_JavaxMailSession.getProperty("mail." + this.name + ".auth");

另外找到一个比较详细的JavaMail参数表,但是缺少了一个调试用的参数 – mail.debug = true , 默认是false, 调试时加上,很多信息哦,O(∩_∩)O哈哈~

后续报道: 官方API中已经有mail.debug , 看来有点多此一举了

让Nginx的SSI支持相对路径--更安全的方法

2010-12-14 02:04:24 +0800

这个比较老生长谈的问题,例如文章关于nginx的ssi 但,这种改法,实在不安全.毕竟全局的函数都被改了,任意的../../../都能被访问故,基于我对nginx的了解,使用另外一种改法,仅仅修改SSI模块,安全性相对较高修改src/http/modules/ngx_http_ssi_filter_module.c 找到以下代码(以nginx 0.9.3版为例):

    if (ngx_http_parse_unsafe_uri(r, uri, &args;, &flags;) != NGX_OK) {
        return NGX_HTTP_SSI_ERROR;
    }

将上述代码注释掉或直接删掉,然后按一般方法编译nginx即可(可以参考升级到0.9.0). 测试代码: 文件1 — index.html

测试导入

文件2 – subdir/index.html

访问subdir/index.html,测试通过!

Jxl与WPS的一点点不兼容

2010-12-10 02:18:56 +0800

今天与同事探讨了一个诡异的问题,用Jxl处理一个空的excel文件,第二次运行就报错,代码如下:

Workbook workbook = Workbook.getWorkbook(new File("Book1.xls"));
WritableWorkbook w = Workbook.createWorkbook(new File("Book1.xls"),workbook);
w.write();
w.close();
workbook.close();

很平常的代码而已,第一次运行,Pass,第二次,FAIL! 然后把旧的空xls文件覆盖回去,第一依然PASS,再跑就FAIL 折腾来折腾去,终于发现是因为这个xls文件是右键新建出来的. 如果打开WPS,然后新建一个,然后保存,就完全没有问题!! 够诡异了吧… WPS的版本是: 6.6.0.2461

将Dom对象变成XML并写入流

2010-12-10 12:37:21 +0800

昨晚在Q群上,一位群友需要解决这样的需求: 将一个Dom对象,变回XML文本,并写入流中,以便下载.

我想,为啥不直接让Dom对象边转换,边写入流呢? 这样效率应该最高哦,内存占用也会低. 故马上Google,查到一篇文章相关的文章(Writing Out a DOM as an XML File),感觉上是能够解决这个问题的. 原文是英文,而且一大堆解释,我精简如下:

//先创建一个Dom
DocumentBuilderFactory factory = DocumentBuilderFactory.newInstance();
DocumentBuilder builder = factory.newDocumentBuilder();
Document document = builder.parse(new File("faces-config-beans.xml"));
//然后应用转换器
TransformerFactory tFactory = TransformerFactory.newInstance();
Transformer transformer = tFactory.newTransformer();
DOMSource source = new DOMSource(document);
StreamResult result = new StreamResult(os);//这里的os就是OutputStream对象.
transformer.transform(source, result);

手头没有更大的XML文件,故只拿了一个200k的XML,Dom–>Stream的时间,约60ms. 算是可以接受了.

一次内存泄漏的排查

2010-12-09 09:07:10 +0800

昨天,又有一位用户抱怨阳光牧场助手的内存占用过高问用户拿到20来个帐号后,用助手加载,启动,得到一些GC的数据:

409.879: [Full GC 409.879: [Tenured: 349567K->349567K(349568K), 1.5796790 secs] 506815K->382998K(506816K), [Perm : 15879K->15879K(65536K)], 1.5797868 secs] [Times: user=1.55 sys=0.00, real=1.58 secs] 
417.784: [Full GC 417.784: [Tenured: 349567K->349568K(349568K), 1.6968523 secs] 506815K->382777K(506816K), [Perm : 15880K->15878K(65536K)], 1.6969534 secs] [Times: user=1.68 sys=0.00, real=1.69 secs] 
422.242: [Full GC 422.242: [Tenured: 349568K->349568K(349568K), 1.5697638 secs] 506815K->382844K(506816K), [Perm : 15879K->15879K(65536K)], 1.5698652 secs] [Times: user=1.56 sys=0.00, real=1.56 secs] 
Heap
 def new generation   total 157248K, used 156479K [0x029e0000, 0x0d480000, 0x0d480000)
  eden space 139776K, 100% used [0x029e0000, 0x0b260000, 0x0b260000)
  from space 17472K,  95% used [0x0b260000, 0x0c2afda8, 0x0c370000)
  to   space 17472K,   0% used [0x0c370000, 0x0c370000, 0x0d480000)
 tenured generation   total 349568K, used 349568K [0x0d480000, 0x229e0000, 0x229e0000)
   the space 349568K, 100% used [0x0d480000, 0x229e0000, 0x229e0000, 0x229e0000)
 compacting perm gen  total 65536K, used 16259K [0x229e0000, 0x269e0000, 0x2a9e0000)
   the space 65536K,  24% used [0x229e0000, 0x239c0e98, 0x239c1000, 0x269e0000)
No shared spaces configured.

由于新生代应该会很快回收,故关注另外一块已经用完的空间tenured generation

 tenured generation   total 349568K, used 349568K [0x0d480000, 0x229e0000, 0x229e0000)
   the space 349568K, 100% used [0x0d480000, 0x229e0000, 0x229e0000, 0x229e0000)

足足用掉了340M,怎么会这样呢? 最后几次都是FULL GC,故肯定是有对象一直被引用,而且用了很多内存. 用jmap把内存镜像抓下来

jmap -dump:format=b,file=heap.bin 1936
#1936是进程号pid

然后使用 Eclipse Memory Analyzer 打开heap.bin , 经过漫长的等待后不跑任何分析,直接在Overview视图,点开Dominator Tree, 哇!!! 严重震惊了,数据如下:

Class Name                                                         | Shallow Heap | Retained Heap | Percentage 
--------------------------------------------------------------------------------------------------------------
                                                                   |              |               |            
com.goojia.xiaonei.sunfarm.Config @ 0x144f8ea8                     |          136 |    15,856,928 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x135aa160                     |          136 |    15,856,880 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x1080dba8                     |          136 |    15,856,872 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x13382830                     |          136 |    15,856,872 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x1359cf10                     |          136 |    15,856,872 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x107e8a28                     |          136 |    15,856,864 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x117244d0                     |          136 |    15,856,856 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x12413010                     |          136 |    15,856,840 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x133913b0                     |          136 |    15,856,840 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x140dc1c8                     |          136 |    15,856,840 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x140d6c10                     |          136 |    15,856,824 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x10152860                     |          136 |    15,856,768 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x107ecc68                     |          136 |    15,856,768 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x144f7050                     |          136 |    15,856,736 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x1300c4d8                     |          136 |    15,856,720 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x117267b8                     |          136 |    15,856,712 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x107e8f20                     |          136 |    15,856,696 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf8796a0                      |          136 |    15,856,648 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf882128                      |          136 |    15,856,576 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf87ea38                      |          136 |    15,856,416 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf8bd308                      |          136 |    15,856,416 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf87fb40                      |          136 |    15,856,408 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0x140d7aa0                     |          136 |    15,856,280 |      4.04% 
com.goojia.xiaonei.sunfarm.Config @ 0xf8ac2a8                      |          136 |    15,856,080 |      4.04% 
com.goojia.xiaonei.sunfarm.Context @ 0x140d8970                    |          120 |     1,105,208 |      0.28% 
class com.goojia.sunfarm.TextAreaAppender @ 0x25095de8 System Class|           16 |       501,512 |      0.13% 
class java.lang.Integer$IntegerCache @ 0x24e2cdb8 System Class     |            8 |       401,032 |      0.10% 
com.goojia.xiaonei.sunfarm.Context @ 0x140dc330                    |          120 |       339,344 |      0.09% 
com.goojia.xiaonei.sunfarm.Context @ 0x13391438                    |          120 |       338,536 |      0.09% 
com.goojia.xiaonei.sunfarm.Context @ 0x117245a0                    |          120 |       337,376 |      0.09% 
Total: 30 of 8,160 entries                                         |              |               |            
--------------------------------------------------------------------------------------------------------------

Config对象竟然占用了300多M,而且很准确的与帐号数一样,因为那是一一对应的.但,不对啊,怎么这么多呢? 打开一个Config看看

Class Name                                           | Shallow Heap | Retained Heap | Percentage 
------------------------------------------------------------------------------------------------
com.goojia.xiaonei.sunfarm.Config @ 0x144f8ea8       |          136 |    15,856,928 |      4.04% 
|- com.goojia.xiaonei.sunfarm.DataMap @ 0x144f8fa8   |           56 |    15,854,760 |      4.04% 
|- java.util.HashSet @ 0x17d01f50                    |           16 |           560 |      0.00% 
|- java.util.HashSet @ 0x17d01da8                    |           16 |           424 |      0.00% 
|- java.util.HashSet @ 0x17d02208                    |           16 |           232 |      0.00% 
|- java.lang.String[4] @ 0x17d02530                  |           32 |           224 |      0.00% 
|- java.util.HashSet @ 0x17d02180                    |           16 |           136 |      0.00% 
|- java.lang.String @ 0x179f3478  guanghuiyuan@qq.com|           24 |            80 |      0.00% 
|- java.lang.String[1] @ 0x17d01d28                  |           16 |            64 |      0.00% 
|- java.lang.String[1] @ 0x17d01d68                  |           16 |            64 |      0.00% 
|- java.lang.String @ 0x179f34c8  qs828000           |           24 |            56 |      0.00% 
|- java.lang.String[10] @ 0x17d02330                 |           56 |            56 |      0.00% 
|- java.lang.String @ 0x17d01d00  xn                 |           24 |            40 |      0.00% 
|- java.lang.String @ 0x17d022e0  3                  |           24 |            40 |      0.00% 
|- java.lang.String @ 0x17d02308  30                 |           24 |            40 |      0.00% 
|- java.lang.String[1] @ 0x17d02610                  |           16 |            16 |      0.00% 
'- Total: 15 entries                                 |              |               |            
------------------------------------------------------------------------------------------------

哦? 是DataMap类的实例? 进行展开

Class Name                                              | Shallow Heap | Retained Heap | Percentage 
---------------------------------------------------------------------------------------------------
com.goojia.xiaonei.sunfarm.DataMap @ 0x144f8fa8         |           56 |    15,854,760 |      4.04% 
|- net.sf.ezmorph.bean.MorphDynaBean @ 0x20b6f3f0       |           24 |    15,734,664 |      4.01% 
|- java.util.HashMap @ 0x144f9108                       |           40 |        31,912 |      0.01% 
|- java.util.HashMap @ 0x144f9130                       |           40 |        16,504 |      0.00% 
|- java.util.HashMap @ 0x144f9068                       |           40 |        10,464 |      0.00% 
|- java.util.HashMap @ 0x144f90b8                       |           40 |         6,432 |      0.00% 
|- java.util.HashMap @ 0x144f9090                       |           40 |         4,216 |      0.00% 
|- java.util.HashMap @ 0x144f90e0                       |           40 |         4,024 |      0.00% 
|- java.text.DecimalFormat @ 0x144f8fe0                 |          136 |           672 |      0.00% 
|- java.lang.String @ 0x20d78370  shenqichinesecrabapple|           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d7cdd0  shenqiparadiseflower  |           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d85b78  caomeilianrubaobing   |           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d8c560  shenqiPutianBlackPig  |           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d957d8  shengzhuanghuanxiong  |           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d97370  shenqishuangfengluotuo|           24 |            80 |      0.00% 
|- java.lang.String @ 0x20d75070  hongtouzhuomuniao     |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d78470  shenqinigerseed       |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d78568  wanshengjienangua     |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d78950  gaojishengdanhong     |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d7a518  tianshanxuelian       |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d7b780  hongbailanmeigui      |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d7d410  munaiyinan_farm       |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d7d898  shenqima_ti_lian      |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d80770  ziyezuojiangcao       |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d822e8  shenqisweetviolet     |           24 |            72 |      0.00% 
|- java.lang.String @ 0x20d82790  chinesecrabapple      |           24 |            72 |      0.00% 
'- Total: 25 of 934 entries                             |              |               |            
---------------------------------------------------------------------------------------------------

哦!!!!!!!! 原来是一个MorphDynaBean 的实例!! 但是DataMap不应该持有这个类的实例的啊,仅仅是初始化的时候,作为过程量传进入而已稍微读了一下代码,发现这个DataMap类,发现对于这个实例变量有2个用途 1. 仅仅只是把bean赋值为一个实例变量:

this.bean = bean;

加载文件,转换为对象,赋值给实例变量,然后再另外一个方法中获取

    public boolean initFromLocal() {
            loadDataFromLocal(); #这个方法仅仅在这里被调用,目的就是为this.bean赋值
            if (null != this.bean) {
                    initSeeds(bean);
                    initBabies(bean);
                    writeSeedReferenceFile();
                    return true;
            } else {
                    return false;
            }
    }

显然,我轻微改动一下代码,这对象就不会被持有了! 具体改动,就是去掉实例变量,改为过程量!

就这样,内存就直接减下来了!! 哦也,搞定!Config对象占用的内存,从15M减到200K ,即减少98.7%! 仅仅几行代码的更改,使助手在相同内存占用的情况下,每100M内存,多运行20倍以上的帐号!! 故马上发布了助手的3.51版,哈哈!!

升级,升级,还是升级

2010-12-09 12:56:44 +0800

今天,升级了好几样东西

Nginx 0.9.1 —> 0.9.2 新增一个功能.修复几个bug Wordpress 3.0.2 —> 3.0.3 修复一个安全问题,号称之前所有版本都存在 Alfresco 3.3.3.7 —> 3.3.4 修复几个严重的bug,其中一个是无法容忍的阳光牧场助手 3.50 —> 3.51 大幅优化内存占用,锐减90%以上

推荐: 国外公开课

2010-12-04 05:32:04 +0800

网易视频-国外公开课人人影视-国外公开课 开眼看世界,国外优秀的公开课! 思维比知识更重要!! 思想进步,才能升华人生. 扔掉马哲,扔掉政治经济学,扔掉学校给你灌的垃圾!!

Spket其实是兼容 jQuery 1.4.x的!

2010-12-04 12:02:19 +0800

前几天,折腾Spket,安装好后,配置jQuery,死活不出提示!! 翻阅Google,到处都说Spket不兼容jQuery 1.4.x .但经过我一番探索,终于发现官网一个论坛帖子上面附带的jar就能成功!!

我自己打包好一个版本,放到Google Docs上了, Spket 1.6.18 兼容jQuery1.4.x,是一个Eclipse插件版本

如果你已经安装好原版的Spket 1.6.8 , 仅提取com.spket.js_1.6.18.jar覆盖原文件也就可以了.

官方很久没更新了,哈哈!!

归还技术债务--Alfresco升级记

2010-12-01 10:17:45 +0800

这周开始，按领导的意思，开始着力升级Alfresco到3.3.3 (发现已经发布3.3.3.7 改为升级最新3.x版本)

了解升级步骤，下载升级需要的war包。部署到测试环境，一切都似乎很顺利。启动！！等待了3分钟，报错了！！大意是之前的升级未完成！！

13:12:29,186 ERROR [org.alfresco.repo.domain.schema.SchemaBootstrap] Schema auto-update failed
org.alfresco.error.AlfrescoRuntimeException: 11010000 A previous schema upgrade failed or was not completed.  Revert to the original database before attempting the upgrade again.
    at org.alfresco.repo.domain.schema.SchemaBootstrap.onBootstrap(SchemaBootstrap.java:1373)
    at org.alfresco.util.AbstractLifecycleBean.onApplicationEvent(AbstractLifecycleBean.java:62)
    at org.springframework.context.event.SimpleApplicationEventMulticaster$1.run(SimpleApplicationEventMulticaster.java:77)
    at org.springframework.core.task.SyncTaskExecutor.execute(SyncTaskExecutor.java:49)

查阅 Alfresco升级指南-Schema升级发现，多了一个表 alf_bootstrap_lock，删除之！再次启动，Alfresco竟然开始建表了！！百思不得其解！！没办法，出我的绝招，看源码/反编译！研究了好久，尝试启动无数次后，发现，这Alfresco直接无视数据库中的表！！！ Why？？？！！！！最后，发现Alfresco是通过Databasemeta来获取表信息的，其中的getTables方法，传入了catalog和schema的值。其中catalog我并未定义，为null，schema的值我设置为alfresco 。难道。。。难道。。。大小写的问题！！！！猛然改为

hibernate.default_schema=ALFRESCO

一直以来都无视这个，虽然Alfresco数据库配置一直写的是大写，但我从未在意！修改后，启动成功，自动开始打补丁！！哦也！！成功了！！

恩，为啥会多了一个alf_bootstrap_lock表呢？肯定是之前升级过，并且失败了。但我已经对比过表结构，并未异样。但为啥一直以来都不报错呢？很久之前就写着

db.schema.update=false

这个选项，屏蔽了这个错误！！印象中，很久很久以前，我因为看到数据库报错才加入这个选项，难道就是一个原因？？！！但是奇怪的是，如果没有添加

hibernate.default_schema=alfresco

的话，一个Oracle实例，只安装一个Alfresco的话，也是不会出错的！难道是某个事情，在某个环境中使用了两个Alfresco，然后添加了这一语句，然后导致错误，进而添加禁止更新的选项？？

就这样，花了3天！！

恩，这也许就是解释，这应该就是技术债务了！

升级到Nginx 0.9.0

2010-11-30 08:36:52 +0800

今早一开邮箱,发现Nginx 0.9开发分支已经发布!! 对于我这种喜欢尝鲜的人,怎么错过!! 马上下载编译:

wget http://nginx.org/download/nginx-0.9.0.tar.gz
tar xvf nginx-0.9.0.tar.gz
cd nginx-0.9.0
vim auto/cc/gcc #将Debug去掉,优化改为o3
./configure --with-cpu-opt=pentium4 --user=www --group=www --prefix=/usr/local/nginx --with-http_stub_status_module --with-http_gzip_static_module
make
/usr/local/nginx/sbin/nginx -s stop #停掉旧版本
cp objs/nginx /usr/local/nginx/sbin/
/usr/local/nginx/sbin/nginx #启动新版本

这里没有用热切换. 顺便更新了Nginx中文Wiki主页上的版本信息.

最新更新：已经发布 0.9.1 ，本blog也同步更新

3年,追忆,回顾

2010-11-23 07:47:05 +0800

2007年9月,成功考过SCJP 2007年10月,人生第一个职业面试,竟然不问我Java的知识,只因我过了SCJP 2007年11月,拿到第一份offer,无比激动啊!! 因为我不是计算机专业本科毕业的 2008年2月,开始到公司实习,号称最低工资的Billable员工 2008年7月,正式入职,无试用期 2008年8月,正式接管项目组的管理,几个人的小团队. 2008年8月,获得季度”最佳项目”称号 2008年9月,改革项目.废弃沿用2年Excel式的任务管理,启用组内bugzilla;改变工作方式,强调分工,对Mac的依赖降低.(新官上任3把火?) 2008年10月,开发JLint,极大地提高项目组的工作效率,进一步降低对Mac的依赖 2008年10月,参加GCT考试,3小时回答185条题目,好在我答题是出了名的快! 2008年12月,顺利获得暨南大学的工程硕士入学资格,专业–软件工程 2009年1月,私下改造公司第一个Android项目XRace,改进其启动性能90%以上,但未获公司的注意 2009年1月,开始组内学习计划,先后学习Ruby/ror/Perl 2009年5月,开发一个Android Dex文件反编译器,后来发现其他项目做得更好,放弃之 2009年5月,考SCJD,差4分失败而归,这可是400分的总分啊!! 2009年X月,在我的推荐下,启用CDC-bugzilla,推动Hudson自动构建 2009年X月,开始参加一个内部项目的code review 2009年7月,参与一个短期的外出培训项目,是培训学生的 2009年10月,在Javaeye上发现Nutz,当时是1.a.15版. 提出几处修改意见后,成为commiter 2009年12月,使用ASM重新实现Nut.Aop,后来又做了现在这一版. 2009年12月,试水公司的Jira系统,带壳的Jira用得非常不爽! 2010年1月,项目解散,被分配到另外一个项目组,仅仅待了几天,完成了一个小功能 2010年2月,再次被分配,到了一个深圳的网站项目,折腾到现在 2010年3月,驻深圳现场开发,2男2女,哈哈 2010年4月,一期上线,奇迹! 2010年5月,负责Alfresco的底层配置,天天对着putty敲命令 2010年6月,实现了一个改资源URL的工具,因为实际部署时, 图片等静态资源放在另外域名/机器上. 2010年7月,开发基于Alfresco的工作流定制,天啊,我之前还没搞过工作流 2010年9月,二期上线,部署到全球的3个站点,客户有钱嘛 2010年11月,获颁”季度最佳员工” – 经过好几次提名后 … 人生还在继续

暂时写到这,流水帐一样.

3年,很充实.

一次不算太久的破解

2010-11-21 03:47:46 +0800

经友人推荐,发现XMind的确很好用. 不过部分功能需要收费,忽然就感觉有点不爽,毕竟这号称开源软件啊! 故今早动手破解,下午2点成功! 但无意放出破解版,毕竟是优秀的商业软件,会阻碍其发展. 仅本人使用!! 这里仅简单说说我用到的工具软件: 1. XMind 3.1.1破解版 – 这是国外破解的版本,给了我很大的启发! 2. JD-GUI – 反编译出源码,软件逻辑一目了然! 3. Java Bytecode Editor – 这软件堪称神器,直接改字节码!

其实,我只是刚刚开始用XMind,还没使用其Pro的功能.但将近300元/year,实在是高!! 我已经捐款给不少免费/开源项目,分别是我心目中的价位. 希望经过一段时间的使用,会发现XMind真正的价值!!

亚运比赛,还是没看成!

2010-11-20 08:48:42 +0800

6个月前买了票 2周前取了票坐了两个小时公交车

到达后发现,去错场馆了!!! 严格来说,是去了同一个场馆的不同区域.这两个区域相距9公里!

哎,没法,去不了…

取亚运门票,花了一个小时

2010-11-11 12:57:33 +0800

很久很久以前,买了两张亚运的门票.

比赛临近,觉得还是先取了吧,故飞奔到取票点. 在取票点待了5分钟,我意识到,只有我是来取票的,其他都是在买票的黄牛党!

天啊,咋就那么多人,他们为啥一次性买这么多! 为什么我要等那么久?!!

不过,我其实是支持黄牛的,本质上,这是市场经济的一种正常表现(门票也是一种普通商品,虽然票面上写着不得交易/出售).

商品,不能强制要求购买者不得转让,这是不符合商品自由流动的规则的! 亚运门票,一种有价证劵,是应该同时也必要能够在市场上流通. 而且,亚运门票并非公益性的(除非你是从亚运大礼包中获取),故,购买者有权处理其去留.

亚运门票,设计得还是不错的, 预定的门票是印刷的,黄牛拿到的门票,基本上都是当场打印的.

我不满的是,这么多人在购买,工行竟然只有一个人在办理!! 我讨厌四大行!!

折腾了2天,终于把Nutz提交给Maven库

2010-11-10 10:07:12 +0800

昨天在 https://oss.sonatype.org 申请将Nutz加入资源库, 相关Issue:

https://issues.sonatype.org/browse/OSSRH-983

原本以为要2天,想不到一天就通过了申请.

下午折腾了一下,搞到傍晚才成功上传一版,期间遇到的问题有:

要求asc文件,开头无头绪,后来发现是gpg工具生存的.
提交后提示public key未登记,又折腾了一下,提交到公共服务器
签名无效, 神奇之极, 没办法,重新签名, 并打包为bundle,一次性提交!

哦也,成功,release! 哈哈,发布成功:

https://oss.sonatype.org/content/groups/staging/org/nutz/nutz/1.a.32/

不过,很奇怪,并没要在Maven中央库找到nutz,难道是同步间隔的问题??

追查! 发现pom文件少了一个packaging的属性,我晕!!

刚才把1.a.31也放上去了,应该满足同步到中央库的全部条件了. 看看明天能否在中央库找到. 期待中!!

后续报道:

已经同步到中央库了, 地址 http://repo1.maven.org/maven2/org/nutz/

现在已经可以直接将Nutz加入你项目的dependency:

    <dependency>
        <groupid>org.nutz</groupid>
        <artifactid>nutz</artifactid>
        <version>1.a.33</version>
    </dependency>

换上1TB的希捷硬盘,虚惊一场

2010-11-08 09:57:49 +0800

狠下心,终于入手一块 1TB的希捷硬盘,在卓越买的,链接

欢喜地回家装进灰尘滚滚的机箱,开机! BIOS打印了相关信息,顺利进入系统. 分区后,把旧硬盘上的资料盘往新硬盘copy,开头很快, 300M后,停了!!! 我晕,干啥??!! 马上取消,what? 取消也等了1分钟才完成!! 心想,完了,中招了!! 难道遇上固件门? 上Google搜ST31000528AS, 天啊, 之前出问题的型号!!! 不过,自行看看固件版本,不对, 有问题的是CC24,但我的是CC38,为啥??为啥?? 到底哪里有问题??!!! 在网上搜了一大堆原因后,还是没搞好!! 进BIOS,发现SMART没开,32bit没开, 难道这样都有影响? 我日,我打开,回到Windows,还是不行!!

难道…. 难道… 线的问题? 好吧,开机箱,选了一个接口,把灰尘认真清干净,插入!!开机!! 开始copy文件.

!!!!!!!!!!! 40M/s 直至完成!!! 还真是灰尘的原因!!!!!!!!!!!!!!!!!!!!!!!!!!! 我的错!! 折腾了一个晚上!! 接着下了DiscWizard,把旧硬盘克隆到新盘,Oh yeah!! 搞定!!

感觉系统速度有所提高,声音也小了. 前后对比:

希捷 SATA    120G
希捷 SATA2   1TB

离线下载Android SDK

2010-11-05 11:04:22 +0800

我实在搞不懂,为啥GFW要墙Android 的开发网站.

今天,把当前最新版本的Android SDK全部下载到 http://build.sunfarms.net/android/repository/ 同时发现一个问题,即使把 http://build.sunfarms.net/android/repository/repository.xml 添加到SDK Manager ,与Google官网一样的内容,却不认平台下载. 仔细找了一下,原来写死在代码里面的点击查看没办法. 只好自己编译一个了,哈哈. Google源码截取:

        private String repositoryUrl = "http://dl-ssl.google.com/android/repository/";
        private String sdkUrl = "http://dl.google.com/android/";
        private String downloadDir = System.getProperty("java.io.tmpdir") + "/";
        private Boolean overwrite = true;
        private Boolean verbose = true;
        private DocumentBuilder builder;

        public AndroidSdkTool() throws ParserConfigurationException {
                builder = DocumentBuilderFactory.newInstance().newDocumentBuilder();
        }

        public Repository downloadRepository() {
                String file = "repository.xml";
                try {
                        download(repositoryUrl + file, downloadDir + file, overwrite);
                        return parse(new FileInputStream(new File(downloadDir+file)));
                }catch (Exception e) {
                        logger.error(e.getMessage(), e);
                }
                return null;
        }

为Alfresco加速PDF文件索引速度

2010-11-01 05:14:41 +0800

本文仅为 http://thinkalfresco.blogspot.com/2009/03/speeding-up-pdf-indexing-alfresco-hack.html 的 Alfresco 3.2版. 因为原文中的代码,已经无法在3.2版上使用.

新的代码:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE beans PUBLIC "-//SPRING//DTD BEAN//EN" "http://www.springframework.org/dtd/spring-beans.dtd">
<beans>

  <bean id="transformer.PdfBox" class="java.lang.String"></bean>

  <bean id="transformer.complex.OpenOffice.PdfBox" class="java.lang.String"></bean>

  <bean id="transformer.PdfToTextTool" class="org.alfresco.repo.content.transform.RuntimeExecutableContentTransformerWorker">
                <property name="mimetypeService">
                <ref bean="mimetypeService"></ref>
            </property>
                <property name="transformCommand">
                        <bean name="transformer.pdftotext.Command" class="org.alfresco.util.exec.RuntimeExec">
                                <property name="commandMap">
                                        <map>
                                                <entry key=".*">
                                                        <value>/usr/bin/pdftotext -enc UTF-8 ${options} ${source} ${target}</value>
                                                </entry>
                                        </map>
                                </property>
                                <property name="defaultProperties">
                                        <props><prop key="options"></prop></props>
                                </property>
                        </bean>
                </property>

                <property name="checkCommand">
                        <bean name="transformer.pdftotext.checkCommand" class="org.alfresco.util.exec.RuntimeExec">
                                <property name="commandMap">
                                        <map>
                                                <entry key=".*">
                                                        <value>chmod 777 /usr/bin/pdftotext</value>
                                                </entry>
                                        </map>
                                </property>
                                <property name="defaultProperties">
                                        <props><prop key="options"></prop></props>
                                </property>
                        </bean>
                </property>
                <property name="explicitTransformations">
         <list>
            <bean class="org.alfresco.repo.content.transform.ExplictTransformationDetails">
               <property name="sourceMimetype">
                  <value>application/pdf</value>
               </property>
               <property name="targetMimetype">
                  <value>text/plain</value>
               </property>
            </bean>
         </list>
      </property>
</bean>

<bean id="transformer.complex.OpenOffice.PdfToTextTool" parent="baseContentTransformer" class="org.alfresco.repo.content.transform.ComplexContentTransformer">
      <property name="transformers">
         <list>
            <ref bean="transformer.OpenOffice"></ref>
            <bean class="org.alfresco.repo.content.transform.ProxyContentTransformer">
                <property name="worker">
                <ref bean="transformer.PdfToTextTool"></ref>
            </property>
            </bean>
         </list>
      </property>
      <property name="intermediateMimetypes">
         <list>
            <value>application/pdf</value>
         </list>
      </property>
   </bean>
</beans>

想不到服务器一下子就被击垮了

2010-11-01 12:11:04 +0800

上周末, 从同事口中得知我休假期间,Jboss服务器曾无故自己关闭了一次.

顿时非常惊讶,咋就会自己关闭自己呢?

第一反应是OOM了,一问,没啊,内存还剩好多,而且log没提示OOM.

难道是程序里面写了System.exit(X)之类? 扫描了一遍代码,没有啊!! 我们还不至于写这么的代码

奇怪的是, JBoss是按照标准的流程顺序关闭各个应用后,再shutdown完成的,并无直接被kill掉或者异常退出,也没有找到JVM报错的log.

由于关闭的时间点在11:37AM,故,追查nginx的access.log , 翻翻翻, 在一堆502(Jboss已经关闭,nginx无法proxy_pass,报502)前面,有一些不寻常的请求,节选如下:

/acunetix-wvs-test-for-some-inexistent-file-second-try

/console/j_security_check

/_vti_pvt/authors.pwd

/phpmyadmin/main.php

/jmx-console/HtmlAdaptor?action=inspectMBean&name=jboss.system:type%3DServerInfo

看来是被攻击了!!

冷静冷静,然而,攻击开始后不到5秒,Jboss就被关闭了.

马上访问/jmx-console/, 天啊!! 竟然能够访问,Jboss的信息一览无余!! 这个默认应用竟然直接暴露给外网了!!

还真有相关的JBoss漏洞 http://websec360.com/NewsInfo/¹²⁴⁄₆₄₅₅.Html

但,如何才能关闭JBoss呢? http://www.shuq.org/read.asp?id=109 通过JMX,严重无语了!!

看来就是这个原因了, 哎. 实在没想到啊!!!

刚刚翻查access.log,我晕,原来还有好多针对php/phpadmin/.net漏洞的log. 看来攻击者是使用某种攻击攻击完成的,难道是他的命令集? 不知道哪里能够下载.

解决方法:

移除JBoss的JMX,invoker应用,因为我根本就没用到.
在nginx添加对php文件/asp文件/cgi文件的拦截,直接返回404.

看来网站的安全还得狠狠地加强!!

使用Nginx搭建Http代理服务器

2010-10-24 08:42:46 +0800

昨天, 折腾了一个下午,终于配好了. 配置如下:

    server {
        listen       8888;
                client_body_timeout 60000;
                client_max_body_size 1024m;
                send_timeout       60000;
                client_header_buffer_size 16k;
                large_client_header_buffers 4 64k;

                proxy_headers_hash_bucket_size 1024;
                proxy_headers_hash_max_size 4096;
                proxy_read_timeout 60000;
                proxy_send_timeout 60000;

        location / {
            resolver 8.8.8.8;
            proxy_pass http://$http_host$request_uri;
        }
    }

resolver 8.8.8.8; 代表使用Google DNS来解析域名 client_body_timeout , large_client_header_buffers 等设置,确保大的请求不会返回400错误.

但,这个代理服务器只支持Http请求, Https会报400错误.

在Nutz MVC中使用Freemarker

2010-10-20 12:27:06 +0800

大约一年前, axhack 发布了一篇文章 “给 nutz 添加 freemarker 视图” ,描述了如何集成nutz和freemarker.

前几天,我使用另外一种更简单的方法来实现(基于Nutz 1.a.33版新增的内部重定向视图),我使用的是Freemarker 2.3.16 首先, 在web.xml添加Freemarker官方文档描述的FreemarkerServlet, 查看原文描述.

<servlet>
<servlet-name>freemarker</servlet-name>
<servlet-class>freemarker.ext.servlet.FreemarkerServlet</servlet-class>
<init-param>
  <param-name>TemplatePath</param-name>
  <param-value>/</param-value>
</init-param>
<init-param>
  <param-name>NoCache</param-name>
  <param-value>true</param-value>
</init-param>
<init-param>
  <param-name>ContentType</param-name>
  <param-value>text/html; charset=UTF-8</param-value>
  <!-- 我觉得不需要了,如果是内部重定向的话, nutz已经设置了编码 -->
</init-param>
<init-param>
  <param-name>template_update_delay</param-name>
  <param-value>0</param-value><!-- 开发时才设置为0 -->
</init-param>
<init-param>
  <param-name>default_encoding</param-name>
  <param-value>UTF-8</param-value> <!-- 模板文件的编码 -->
</init-param>
<init-param>
  <param-name>number_format</param-name>
  <param-value>0.##########</param-value>
</init-param>

<load-on-startup>1</load-on-startup>
</servlet>

<servlet-mapping>
<servlet-name>freemarker</servlet-name>
<url-pattern>*.ftl</url-pattern>
</servlet-mapping>

然后在需要Freemarker渲染的方法上,添加:

@Ok("->:/forum/viewTip.ftl")

注意 1.a.33 才有内部重定向视图(->), 之前的版本,建议使用重定向视图(>>)代替 ftl后缀,就是web.xml配置的后缀.

这样,当方法正确返回时,就会使用Freemarker渲染, 返回值保存在 obj 变量中,你可以直接在Freemarker模板中调用.

为NutLab添加一个新项目-Nutz与OpenID集成

2010-10-12 10:16:53 +0800

忙乎了两天, 终于把项目正确运行起来了.

使用即将发布的Nutz 1.a.32 ,加 JOpenID 1.0.7

地址: http://code.google.com/p/nutzlab/source/browse/#svn/trunk/NutOpenID

同时,发现JOpenID 1.0.7的一个Bug. JOpenID 默认使用UTF-8来对参数进行getBytes. 当参数中还有非英文字符,且没有配置URIEncoding时,获取的byte[]是错误的. 具体代码:

package org.expressme.openid;
//......
public class OpenIdManager {
//......

    String getHmacSha1(String data, byte[] key) {
        SecretKeySpec signingKey = new SecretKeySpec(key, HMAC_SHA1_ALGORITHM);
        Mac mac = null;
        try {
            mac = Mac.getInstance(HMAC_SHA1_ALGORITHM);
            mac.init(signingKey);
        }
        catch(NoSuchAlgorithmException e) {
            throw new OpenIdException(e);
        }
        catch(InvalidKeyException e) {
            throw new OpenIdException(e);
        }
        try {
            byte[] rawHmac = mac.doFinal(data.getBytes("UTF-8")); //不一定,也许是ASCII
            return Base64.encodeBytes(rawHmac);
        }
        catch(IllegalStateException e) {
            throw new OpenIdException(e);
        }
        catch(UnsupportedEncodingException e) {
            throw new OpenIdException(e);
        }
    }

//.....
}

抢占我带宽的流氓软件

2010-10-12 10:56:12 +0800

第一款, PPS的PPSAP(PPS 加速器) 对系统的影响, 后台运行,抢占无数带宽,发起N多连接!! 安装pps后, 在安装目录下有一个ppsap.exe的程序, 这个程序,在之前的版本,直接删除程序文件就可以了. 最近更新后, 发现删除后自动回复(再次启动pps后), 我日!! 这下可无敌流氓了!!

第二款, 360安全卫生的在线升级 之前一直没有留意,后来打开360的流量查看器才发现其也是流氓之一! 自爆家丑!! 除了直接kill掉外,没啥办法!!

总结一点点项目经验–迁移/部署/静态资源

2010-10-01 09:45:59 +0800

如果可能的话, 提前一天切换一个小时, 会发现不少问题.
这次的部署,属于升级版,测试新版,应该在无法访问前一版本的网络环境中测试. 这一次部署,就发现项目中某些链接竟然直接指向旧的系统!!
使用CDN (内容分发网络),就是静态资源分开存放, 例如放到 res.sunfarms.net . 即使不能独立域名, 则最好把项目拆成两个工程, 一个放静态文件(css/jpg/gif/swf等),一个放动态内容

… 先写这么多, 墨水不够.

iText锚点的一个小陷阱目标地锚点必须有字符串

2010-09-08 09:27:32 +0800

昨晚折腾了一下zDoc的PDF生成功能, 不过,一听闻锚点功能失效,顿时不爽,马上研究!!

首先发现锚点无法对应起来, 触发锚点的编号,与锚点目的地无法对应起来! 这个通过查找实际对应的文件的绝对地址的hashcode生成

然后发现锚点总是失效,无法跳转, 最后才发现,锚点的目标地anchor, 使用 Anchor anchor = new Anchor(); 生成, 页面上无显示!!

实例:

Anchor anchorDest = new Anchor(); anchorDest.setName("dest");
Anchor anchorSrc = new Anchor("From"); anchorDest.setReference("#dest");

无法跳转! 即使写成

Anchor anchorDest = new Anchor(" ");

一样无法跳转, 必须写成:

Anchor anchorDest = new Anchor("To here");

Eclipse能够启动得快些

2010-09-08 09:18:44 +0800

昨天在Javaeye上看到一篇关于Eclipse调优的文件,真是当头一棒,之前咋就没想到呢?!!

自己调整了一下,得到以下参数:

-Xms40m
-Xmx256m
-XX:MaxPermSize=128m
-XX:ReservedCodeCacheSize=128m
-Dfile.encoding=utf8
-Xverify:none
-XX:+DisableExplicitGC
-XX:+UseParNewGC
-Xnoclassgc
-XX:+UseBiasedLocking
-XX:+UseFastAccessorMethods

感觉上快了不少哦

遇到一个关于ClassPath的奇怪问题 Classpath只认jar文件?No!

2010-09-07 04:24:43 +0800

昨天在客户现场部署应用,解压后开始修改配置文件,以为一切顺利,结果发现程序根本就无视我的配置文件!!

启动代码是这样的:

java -cp . -Djava.ext.dirs=. xxx.yyy.Main deploy.properties

在当前目录有 XXX.jar deploy.properties a.zip 还有就是一堆类文件在 org文件夹下, 整个文件夹的文件,就是a.zip的解压出来的.

deploy.properties就是我修改的配置文件,结果无论怎么改,程序都无视我的修改. 然后我怒了,把deploy.properties删除了,发现程序依旧运行!! 疯了,deploy.properties是启动该程序必须的!!怎么可能还能启动,这是使用spring properties holder 加载的, 写法是 classpath:deploy.properties

终于开始怀疑是否是zip压缩包的原因,删掉!! 结果,正确运行了!!

奇怪,为啥呢??!! 竟然zip文件都当成jar文件处理?? 找来一个有Main类的jar文件,并改名为XXXX.zip,执行:

java -cp XXXX.zip xxx.yyy.Main     //结果正常启动了!!

再狠一点,改为后缀改为rar, 执行 java -cp XXXX.rar xxx.yyy.Main , 结果一样,照样运行!!

继续狠一下, 执行

java -Djava.ext.dirs=. xxx.yyy.Main        //没办法,照样运行!!!

再一次刷新我对Classpath的认识!!

Nutz 与 XBlink 是什么关系? 兄弟!!

2010-09-03 02:05:00 +0800

昨天,在Nutz的主页看到额外链接中有这样一行:

XBlink - 轻量级XML序列化工具

点开,看完说明,并check out了源码,大概地过了一遍. 晚上到QQ群上弱弱地提了一下,结果一个新生的XBlink交流群,存在不到5分钟,就宣布与Nutz交流群合并. Nutz交流群的名字也改为 Nutz & XBlink

哈哈,事件都多起来了, 群里络绎不绝地询问XBlink是做什么的,与Nutz是什么关系,^_^

其实,XBlink就是 POJO <–> XML , 作者希望做到与XStream分庭抗礼(我的个人理解)

而 Nutz与XBlink的关系

严格来说只是兄弟项目,两种并未依赖关系. 不过, XBlink的主要提交者 E-hunter, 同时也是Nutz的commiter之一.
Nutz.Plugin与XBlink的Driver机制,异曲同工. 还有就是Nutz.Resource与XBlink的ClassScaner.
而XBlink,现有的Log几乎没有,难以跟踪.Nutz已经做了不少功课
XBlink 非常早就关注性能,应该与其定位有关.Nutz的性能测试,依旧非常简陋,几乎没有
Nutz已经有比较完善的文档Wiki/构建方法, XBlink还比较缺

当然, ³⁄₅,Nutz都能帮上忙. XBlink一发布就是0.5版,感觉上作者信心很足哦, 现在已经发布了0.6 , ^_^, 不过,貌似还没有一个比较明确的发布计划.

接下来几天仔细看看XBlink的源码,看看有无优秀经验借鉴到Nutz中,^_^

O(∩_∩)O哈哈~,唠叨完, 对中国的开源软件,越来越有信心了.

尝试PPTP和OpenVPN失败

2010-08-30 10:45:48 +0800

尝试了两天,焦头烂额,还是没搞定,没办法,先放放

昨天去了一趟华南植物园,附图:

对用户体验的一点点看法

2010-08-29 08:16:30 +0800

一直以来,SunFarm助手的使用反馈,让我体会到, 让用户想你一样思考,是不可能的!

例如升级, 99%的用户首先想到的是,下载后直接覆盖上去! 对于现在的设计,这样是完全不行的.

简单易用,符合常规,才是最好的选择??

纠结…

发布了阳光牧场外挂 3.34版

2010-08-27 10:47:53 +0800

原本不打算在这个blog写这个新闻的,但毕竟是该外挂一个月以来的更新,还是忍不住说说.

阳光牧场,这款游戏,这款外挂,给了我不少体会, 写外挂本身的代码活并不算很复杂.问题的关键是用户喜欢用,继续用.相比其他外挂,界面最简陋的,选项最多,而且免费. 之前一直站在开发者的角度看这款外挂,而QQ群的建立,使我直接面对用户,直接面对需求!! 之前以为很好的功能,才发现对用户只是鸡肋.而开发纯果乐果园部分的代码,使我真正意识到设计简洁,做最需要做的事,才是软件要完成的,而非所谓的高级设计技巧

在外挂中,纯果乐部分,我使用了Nutz的Ioc与Aop,对于一款外挂,显然是无需的,甚至多余的.但是,我作为一个实验来看待,比较这些用户的环境,恰恰是测试Nutz ioc/aop的好地方,系统配置千差万别.结论是,至今没有发现大问题.

说说这个blog的VPS提供商

2010-08-10 06:50:12 +0800

用了大半个月,感觉非常不错,地址: http://www.vpsee.com/vps-plans/重申一下,我不是托!

准备续费了,说说感受,打算继续月付

速度, 不错, 你简单ping一下本网站就知道,而且访问这个blog应该也是很快的
价格,我买了的是256m方案,70元一个月, 算是比较实惠的,是Xen虚拟的!!!
波折,曾经试过机房断电,凤凰城机房,vpsee的主页有提及,现在免费迁移到另外一个机房,O(∩_∩)O哈哈~
性能,感觉不错, CPU : Intel® Xeon® CPU X3220 @ 2.40GHz
操作系统, 我最初选的是openSUSE,后来改回Ubuntu 10.04.1 Server 初始化内存占用仅20M

与vpsee的工作人员交流过,感觉上应该是几个人一起在经营,而且老板还在上班呢(有一次去开会了),没有提供7*24的服务,但是我觉得没所谓,感觉上那只会是幌子.

VeryCD的标题–变化中的警示语

2010-08-09 10:13:26 +0800

很久以前就留意到VeryCD主页的标题栏是一句警示语,而且,刷新一下就会变成新的. 算不上非常惊人的举动,但成为以前经常访问其网站的原因.

实现的关键: http://www.verycd.com/statics/title.saying 内容为一个js文件, 定义一个数组,包含几条警示语,然后产生一个随机数,抽取出一句警示语,与原有的标题成新标题,然后再设置为页面的标题. 今天的内容:

_VC_DocumentTitles = new Array('每一天都是一个全新的开始', 
'你希望掌握永恒，那你必须控制现在',
 '心是最大的骗子，别人能骗你一时，而它却能骗你一辈子',
 '你的谦逊会使别人感到高兴', '自知不自见，自爱不自贵',
 '最艰苦之时，便是胜利将到之日', '拳不离手，曲不离口', '百艺通，不如一艺精',
 '只要功夫深，铁杵磨成绣花针', '如果一个人很慷慨，那他就必须把自己的慷慨表现得充满感情');
 _VC_DocumentTitleIndex = Math.floor(Math.random() * _VC_DocumentTitles.length);
document.title = 'VeryCD - '+ _VC_DocumentTitles[_VC_DocumentTitleIndex];

InputStream与OutputStream的read/write陷阱–实际是byte

2010-08-09 10:05:45 +0800

先不要说这是标题党,我觉得这是很多人都已经在使用的误区,即误以为InputStream.read()返回的值真的是int,而OutputStream.write()接受的参数的确为int. 事实上,它们返回或接受的参数是 byte, 即一个字节, 务必仔细读清楚其JavaDoc, 明确说明是读出一个字节,而非int

我觉得这是Java核心API其中一个极度容易被人误用的地方,哈哈

int read();
void write(int data);

Alfresco配置 — 第四节

2010-08-05 10:57:29 +0800

讲讲如何在WebLogic上部署Alfresco 3.2, 以EAR方式

创建一个文件夹, 名为 WL_Alfresco

将alfresco.war解压到WL_Alfresco/alfresco.war

创建WL_Alfresco/META-INF, 放入两个文件: application.xml 和 weblogic-application.xml, 内容分别是:

    <application>
        <display -name>Alfresco</display>
        <description>Alfresco</description>
        <module>
            <web></web>
            <web-uri>alfresco.war</web-uri>
            <context-root>alfresco</context-root>
        </module>
    </application>

    <?xml version="1.0" encoding="UTF-8"?>
    <weblogic -application xmlns="http://www.bea.com/ns/weblogic/90">
        <prefer-application-packages>
            <package-name>org.mozilla.*</package-name>
            <package-name>antlr.*</package-name>
        </prefer-application-packages>
    </weblogic>

将以下jar放到JAVA_HOME/jre/lib/endorsed 文件夹内: serializer.jar xalan.jar , 这两个jar可以到apache上下载.

然后按标准的方法添加到WebLogic的部署中去即可.

Alfresco配置 — 第三节

2010-08-04 10:14:25 +0800

今天打算说说Alfresco里面的工作流,这个是我折腾了好几个星期的事.

Alfresco的工作流分为3部分, Define/Model/UI

其中Define就是普通的jBpm3.2工作流引擎,你可以使用Alfresco提供的AlfrescoScriptAction直接调用Alfresco的服务,最基本的就是logger

Model,其实不单单是工作流的配置,它使用你定义的命名空间,声明需要用户输入的属性,和需要显示的属性

UI, 属于web-client-config.xml的自定义版本 web-client-config-custom.xml,用于定义各Model中的type如何显示在页面上.

具体的工作流我就不打算详细说了,也许以后会贴出示例.

说说几个技巧:

如果无法用AlfrescoScriptAction解决你遇到的问题,请毫不犹豫地使用自定义的ActionHandler,不过最好继承JBPMSpringActionHandler,以便获取Alfresco相应服务的bean, 而且,bean的name一般就是接口的首字母小写,例如节点服务 nodeService, 用户服务 personService,操作服务actionService(可以创建mail action).
流程意外停止,无法继续正常流下去,咋办? 使用 admin/workflow-console.jsp , 然后使用相关的命令对付该流程.例如signal, delete, cancel
开发工作流时,请先确保工作流本身是正确的,然后再调试Model/UI

哈哈,差点忘了, UI还需要properties< 文件,用于定义页面上显示的label

有用的链接:

alfresco WorkflowAdministration

alfresco Workflow_Console

jbpm userguide/

alfresco Data_Dictionary_Guide

Alfresco配置 — 第二节

2010-08-03 10:49:31 +0800

如何关闭/调整部分功能(通过添加选项到alfresco-global.properties):

1. 关闭OpenOffice连接 ooo.enabled=false

Alfresco默认安装OpenOffice进行文件转换,不过,大部分时间是无需的,这部分功能会占用超过100M的内存,而且是JVM之外的内容

2. 关闭CIFS和FTP cifs.enabled=false ftp.enabled=false

当你启动Alfresco后,你也许能通过 \你的ip 访问到Alfresco的资源库,这对开发非常有用,但是一般情况下不太需要, ftp也是.

3. 关闭用户空间配额限制 system.usages.enabled=false

Alfresco允许你配置每个用户的空间占用,一般使用都是无需的,而且,要真正启用这个功能,你需要逐一配置每个用户的配额.

4. 关闭自动创建用户空间 home.folder.creation.eager=false

这个选项,是我在配置LDAP信息同步的时候遇到的,由于有好几千的用户信息同步到Alfresco,结果在User Space中对应地产生了好几千个子空间,虽然无害,但毕竟非常不雅!!

5. 将索引恢复模式设置为自动 index.recovery.mode=AUTO

其实这是默认值,但我仍然要单独提出来. 当你放了成千上万的文档时,你如果设置为FULL,启动Alfresco将非常漫长.如果你配置Alfresco集群,AUTO也绝对是最佳选项.除非你的索引已经被破坏,以致启动失败,那FULL才是你的选择.另外,我建议你每周做一次FULL,能提供索引的可靠性和减少体积.

6. 调整连接池或者使用自定义的数据源

先看看 http://wiki.alfresco.com/wiki/Database_Configuration

当你使用WebLogic来部署Alfresco,那么请加上db.pool.statements.enable=false

我建议你使用自定义的数据源,替代Alfresco默认的DBCP,例如C3P0,Proxool,BoneCP

在Tomcat的server.xml添加一个全局的数据源,然后在content.xml引用它,并确保名字为jdbc/dataSource

某些故障排除

1.曾经遇到一个情况,Alfresco启动时,读取完配置后就停住,cpu为0,假死, 后来发现是数据库服务器的内存耗尽,导致HibernateSessionFastory创建时一直等待

2.务必修改/etc/hosts文件,使其与当前ip匹配

当服务器换ip后,没有改/etc/hosts文件里面的ip,导致启动是查找RMI端口时,长时间等待, 超时后报错停止.

如果使用默认的127.0.0.1, 当你把vtomcat放到其他机器上,启动连接到Alfresco时就会报127.0.0.2出错, windows下无此问题.

3.无法添加新文件或文件夹

这个问题表现为页面上提示无法添加,后台提示无法创建XX资源. 原因是磁盘已满,用df看看磁盘占用情况,清理不需要的文件.

有个小小技巧

删除了重要文件,而且提交了修改,咋办??

不要惊慌,Alfresco并没有真正删除你的文件, 点击用户属性(上方第二个按钮),可以看到最下面有”已删除的资源” 点开,哈哈,看到你想找的文件没?

Alfresco配置 — 第一节

2010-08-02 11:19:53 +0800

1. 有用的信息

Alfresco下载地址社区版企业版可以试用30天,区别不大.

2. 安装

如果你下载的是Windows版的超大安装包,那么,基本上就是一路的next,中途填一下管理员密码就可以了.

启动之前,我建议你看看安装文件夹/tomcat/shared/classes/alfresco-global.properties ,你会看到不少有用的信息:

dir.root=./alf_data 非常非常核心的参数,务必使用绝对路径,能减少不必要的麻烦(例如移动文件夹后,启动报错)

db.开头的都是数据库配置, 其中db.url就是把部分参数合成jdbc url. 关于数据库,我的建议是使用数据源,Alfresco会默认查找jndi名为jdbc/dataSource的资源作为数据源.

如果你安装的时候使用默认密码admin,就会看到一个

alfresco_user_store.adminpassword=209c6174da490caeb422f3fa5a7ae634

提前说一个问题–忘记管理员密码咋办? 看看这篇文章

http://wiki.alfresco.com/wiki/Security_and_Authentication#How_to_reset_the_admin_password

一般来说, 就是alf_node_properties表的第4或5行. 再提醒一句,只有使用alfresco/alfresco登录mysql才能看到alfresco数据库.

准备去启动Alfresco或者已经启动了? 不要急嘛, 如果你是*unix系统,请修改/etc/hosts, 查看你的主机名是否被解析为正确的ip,我可吃了不少苦头!!

3. 故障排除

启动失败? 不要惊慌,看看是不是以下错误:

PermGen XXXX ,哈哈,内存不够了? 修改alfresco.bat/alfresco.sh里面的JAVA_OPTS吧,调整-XX:MaxPermSize=160m为-XX:MaxPermSize=256m

Hibernate dialect Must set ,数据库连接出错啦!! 检查一下数据库是否已经启动,alfresco-global.properties里面填的数据库信息是否正确

切忌,不能安装到有空格的路径,最好连中文啥的都不要有.

据我的经验,启动alfresco需时60秒到90秒,第一次启动因为要初始化数据库,故需要的时间更长,有时候看上去停止了,只要cpu占用还不低,就没问题.

4. 启动成功

哦也,你终于启动成功了! (如果按默认安装的话,不能启动的概率=0)

访问 http://localhost:8080/alfresco 填入你的帐号密码(例如admin/admin) 就能看到强大的Alfresco了!

加班的星期天,应该是第一次

2010-08-01 10:18:18 +0800

为了Alfresco的工作流,又加班了一天.

算是突破性的进展,终于成功把两个流连接起来了,而且可以控制把其中一个流给关闭掉呢,哈哈! 问题的关键是实现自定义的ActionHandler和AssignmentHandler,通过页面获取的工作流id,获取另外一个工作流的全部信息. 我太强大了!!

另外一个问题是发邮件, 似乎Alfresco WCM workflow的标准定义中, 串行工作流模式中, bpm_assignees的值会发生变化,争取找个时间把它简单重现!故,我有做了一个简单的ActionHandler,负责把当前Task的actorid保存在另外一个变量中. 哈哈,又解决一个难题,之前发邮件耗费了我起码一周的时间!

应老婆建议,明天起有规律的说说Alfresco的配置. 例如如何安装,如何调整vtomcat等,还有就是一些曾经遇到的问题

加班的星期六

2010-07-31 09:40:11 +0800

已经忘记了上一次加班是什么时候了?是否曾经星期六加班过呢?

忙了一天的Alfresco工作流,终于有了突破性进展,放弃内置的AlfrescoScriptAction,改为自己写ActionHandler

在页面上让用户选需要绑定的工作流 – 通过自定义的mytasks.jsp和改造wcm的submit-config-workflow.jsp 通过jquery完成页面修改与联动,并隐藏掉原有配置界面.

今天上Google Reader,发现Alfresco 3.2 SP2 企业版已经发布,修复了不少的Bug,其中两个bug似乎与我们已经遇到的问题相关.

不清楚客户那边还买不买商业授权,难道真的像我猜测那样转为社区版? 刚刚下载了社区版的3.2 SP2, 发现schema是3300的,而3.2企业版是3400的, 希望不要出乱子.说起这个,Alfresco还真他妈的贵啊!! 不知道如果帮程序换成社区版,会不会又出什么难题… 悲剧啊… 肯定又是我来解决.

Alfresco社区版是没有官方支持Oracle和WebLogic的,严重悲剧啊.

本应该是周末,但是明天要加班

2010-07-30 10:49:01 +0800

没办法,明天加班咯.

还是工作流的问题,N多问题未解决.继续奋斗咯

今天把部分Alfresco实例从SP搬到SC,以便加速访问,提高开发速度.

今天发现并解决一个问题, 当Oracle数据库因为内存不足,cpu占用接近100%是, hibernate会停留在init sessionfactory, 而且没有任何错误提示.

另外一个问题是RMI, 因为搬迁办公室,ip变更, alfresco启动时需要查找RMI,因为/etc/hosts文件里面的ip没改,结果停留在find RMI port一段时间后死掉.

再说一个发现, 使用Alfresco vtomcat 3.3 去连接 Alfresco 3.2 时, 总是连不上. 但是3.3的部署接收器却能接收3.2的Alfresco发过来的数据.

把自己搞得这么累

2010-07-29 11:51:57 +0800

8点就已经回到家了,没休息,就对着电脑

本可以休息一晚,喝杯茶,看看书…

今晚基本上就是聊Q,SunFarm的用户提出来几个挺有效的改进建议,并发布了 3.33 很好玩的一个版本号

Nutz最近比较安静,难道大家热情消退??

今天继续磨工作流,总算有点眉目, 不过,周六日加班是必然的了

非常认同Alfresco的强大,但同时感叹其复杂与难以琢磨… 学习曲线的确是高

对Alfresco的基础配置,现在算是滚瓜烂熟了,可惜啊, 对其Workflow还是入门级别,继续奋斗吧,Wendal!

被Alfresco的工作流搞崩溃了

2010-07-28 08:15:00 +0800

我实在不行了,投降了!!

想了一天,还是没找到什么方法来满足以下需求:

在启动一个工作流的时候,列出当前用户尚未完成的工作流,并供其选择,而且是在WCM模块内

难点: 1. 无法获取myTask 2. 即使获取了,无法以列表方式展示给用户以选择

崩溃了,我交不了差了,哎………

科学城的办公室有奶茶!

2010-07-27 04:19:53 +0800

有奶茶,有精力!

久违的奶茶,O(∩_∩)O哈哈~ 热乎乎的泡上一杯!

中午还吃了烧鸭饭! 半年前的味道,爽!! 之前在SC呆了一年多,现在找回习惯的味道,(^__^) 嘻嘻……

继续奋斗工作流…

开始尝试jBpm

2010-07-27 12:37:29 +0800

非常无语,本周五要完成一个jBpm流程的开发,悲剧的是我才刚刚接触!!

下载了Eclipse 3.4.2 和jBpm installer 3.2.7 开工啦

这次,我还是打算用Alfresco集成的jBpm,因为它提供了预设的UI,无需另外编写.

参考地址: WorkflowAdministration

需要建立Model和Define,Resource

难点在于Define的识别,和Model的设计. 按照分工, Define由PM完成,我负责UI(打算用Alfresco原本的Model来构建UI)

每天写点东西

2010-07-26 02:06:16 +0800

没啥,想写点东西了

随意吧,开心就好