一.Linux国际化现状
随着INTERNET的普及,世界各国,特别是使用亚洲多字节语种的国家,开始意识到国际化的重要性。目前,
各国有自己的编码,例如,日本有JIS,韩国有KSC,中国有GBK和即将要实施的GB13080等等。如此多
的编码,使得系统兼容和国际交流成为很大的问题。
值得令人高兴的是,Linux国际标准化组织在近日发布了LI18NUX2000国际化规格草案。该草案的
发布向实现Linux操作系统标准化更迈进了一步,这必将使全体开发人员和各机构从中受益。Linux的国际化
是一项庞大的工程,它对于支持亚洲语言和其它多字节字符集是不可或缺的,将极大推动Linux在世界各地的
普及。国际化组织制定UNICODE标准,在很大程度上解决了问题。目前是向UNICODE过渡的时期,所以,我们
还必须支持各国的标准。
目前LINUX国际化基本上还是在传统的UNIX方式上。通常是以LOCALE为基础国际化,由于内核不支持双字节、
XFree86不支持多字节语言,使得国际化工作就是一些Hacking的工作。人们采用各种方式,如修改内核(UNICON),
编写新的TTY, 修改运行库,甚至修改X服务器。但一些方法已经固定下来,比如LOCALE等。更好的方法要等到
国际化的新标准。
二.什么是Unicon?
Unicon是在Linux内核基础上,增加国际化支持的程序包。它包括内核补丁、键盘设备程序、
输入法服务器和Unicon客户。应用程序可以在此基础上处理各种语言。与其它终端中文系统相比,
Unicon有以下优点:
1. 最大限度支持国际化,目前本系统可以支持Big5, GB, GBK, JIS, KSC等.
2. 良好的兼容性
Unicon以最小的内核改动换取最大的系统兼容。和其它终端软件相比,它可以对鼠标,键盘,显示有
良好的支持。最使人欣慰的是,它可以支持滚屏。其它西文软件,不需要经过修改,就可以轻松地处理
各国语言。
2. 每个TTY是独立的机器,有自己独立的状态(字体和输入法,Locale等)
3. 良好的分层结构,使系统易于扩展
本系统采用了类似于UNIX系统结构的方案。系统分三层:内核及驱动程序,输入法服务器,输入法。
此结构容易扩展、移植。例如,当我们需要将系统移植到一个新的机器上时,主要的工作
是在设备及驱动程序上,其余部分基本上不需要作很大修改。
4. 提供API和通用输入法接口
为普通程序员提供接口程序。这里包括两个方面的含义,1. 输入法模块的接口,用户只需按此接口
就可以将自己的输入法加到本系统上去;2. Client & Server 的接口,当系统改变时,只需修改这
部分,而保持系统不变。
5. 支持多种字体
6. 支持动态切换语言及输入法
系统在字体管理程序和输入法服务器的基础上,提供动态切换。另外,对环境变量,如LOCALE,
同样进行切换,极大方便了用户。
7. 为XFree86的Chinput提供输入法
由于XFree86的Chinput和Unicon使用同一输入法服务器,所以,它们可以共享输入法。
三.Unicon总体设计
和其它系统不同,在Unicon设计时,我们假定每个TTY是一个独立的机器,有自己的状态。由此,每个
有自己独立的输入法和字体。在系统设计上,我们依照Unix操作系统的特点,将整个系统分为若干层,
并尽可能将内核的修改减少到最小。将系统分为以下几层:
1. 内核补丁
智能制表符识别
提供制表符智能识别。以支持系统菜单等的正确显示, 这部分代码在
drivers/char/console.c。
字体显示程序
字体显示部分是在FrameBuffer的总体控制程序上。这样,我们只须修改高层模块,而无需
去管底层得各个驱动程序,使得我们得兼容性达到最佳。其次,UNIKEY可以方便地调用补丁
程序,方便地控制显示条。详细可以参见drivers/video/fbcon.c
键盘过滤程序(UNIKEY)
我们在两个地方对键盘进行过滤。一个是在键盘中断,另外是在TTY键盘处理程序上。之所以
这样处理,是因为:1. 我们必须过滤键,尤其是一些功能键,组合键;2. 我们必须将翻译后
的结果发送回操作系统。而当我们将翻译得结果发送回系统时,最快、最方便得方法是将他们
写回到TTY上去。这样,UNIKEY可以很方便地对键进行过滤。
详细参见drivers/char/pc_keyb.c, include/linux/tty_flip.c
字体管理程序
字体管理程序是为了支持TTY字体独立。字体显示程序必须通过调用字体管理器来确定当前TTY
的字体及编码方式,以确保正确显示。
详细参见drivers/video/fbcon.c等。
2. 设备驱动程序UNIKEY
本模块为高层模块提供了键盘过滤、字体管理,输入法显示等等。另外,对系统热键作了翻译,
以传送到高层模块。它包括以下几个方面:
输入法显示
本模块是对UNICON输入法条显示的支持。它是通过标准UNIX调用ioctl来实现的。
键过滤程序
本模块对TTY1-—TTY6进行模拟,包括:1. 系统键过滤,包括对功能键,组合键得翻译,以确保输入
法能正确,准确地接受系统的键盘信息;2. 输入法程序向操作系统发送键的接口,通过这个接口,
输入法程序将翻译得结果传送到TTY,从而应用程序接受到翻译得结果。
字体管理器
字体管理器动态管理字体。用户可以根据自己得喜好,将不同的字体模块放到系统中,从而达到
用户满意得效果。
3. 输入法服务器
本模块是输入法的管理程序。它为客户端提供输入法。服务器端维护每个连接,使每个客户端有自己
独立的状态。另外,通过共享词库,使系统的内存开销降低到最低。
4. 输入法客户
本模块为用户看到的终端程序。首先,它通过输入法服务器,打开一种输入法,通过打开UNIKEY,
过滤系统键盘,并将所得的键传送到输入法服务器,输入法服务器翻译这个键,客户程序取回结果,
并将服务器得结果显示在屏幕上。另外,它还要处理语种切换,帮助,用户造词等等。
四. Unicon 的工作原理。
1. 显示部分
显示中文(或其它文字),需要两个条件,1. 在图形方式下;2. 有编码的字库。
假定我们在TTY2运行如下程序:
main ( )
{
puts("hello, world.\n");
}
系统将通过open("/dev/tty1"), 然后,通过系统调用write(2)调用系统内核console.c的do_con_write,
而do_con_write调用内核的FrameBuffer高层管理程序fbcon.c, fbcon.c 调用具体设备驱动程序。
FrameBuffer将字符串显示到屏幕上。系统用的是默认的内核字库。
Unicon实际上,就是修改是FrameBuffer高层控制程序fbcon.c,将默认的字库指针指到我们的字库,
这样,系统就可以显示中文了。
2. 设备驱动程序
如上所述;我们的Unikey只是为应用程序(输入法)和内核之间提供了一个通讯的接口。我们采用标准
的Unix设备接口:struct file_operations, 将各自处理函数添入,这样一个设备就形成了。
当系统初始化设备驱动程序时,我们将内核有关Unicon支持的指针赋值,使内核能调用驱动程序的函数。
3. 输入法服务器
输入法服务器采用面向对象的设计技术。将系统分为接口类、输入法控制模块、输入法模块管理器、
内码转换器、共享词组模块等等。
当一个客户连接到服务器时,服务器返回一个句柄。当客户程序打开一个输入法,服务器首先检查该
输入法是否打开,如果没有打开,就将其打开,然后初始化,返回输入法句柄给客户。服务器维护该
输入法的状态。而客户程序负责到服务器上来取信息。另外,服务器负责客户状态的维护(如全角等)。
4. 输入法客户
客户程序负责和服务器连接,并通过服务器打开输入法,并将键传送到服务器。客户程序从服务器
取信息,并显示。另外,客户程序负责传送当前的状态(如全角等)。
五.Unicon系统图
Unicon User/Kernel/Hardware Architecture
========================================
+------------------+
+-------------------+ | libimm_server.so | +--------------+
| unicon | +->| |<-+ | chinput |
| | | | shared input | | | |
| console | | | method server | | | |
| daemon | | +------------------+ | | X Window XIM |
| | | |.so input methods | | | |
| +------------| | | /usr/local/lib | | |--------------|
| |immclient.a |--+ +------------------+ +--| immclient.a |
+-------------------+ +--------------+
^ ^
| | +---------------+
| | | text mode |
| | | applications |
| | +---------------+
| | ^
| | | user
--------------------------------------------------------------------
| | | kernel
| +-----------------+ | font modules
v | | +--------------+
+---------------+ | | | encode-gb.o |------+
| /dev/unikey | | | +--------------+ |
| | | | +--------------+ |
| driver module | | | | encode-gbk.o |----+ |
+---------------+ | | +--------------+ | |
^ | | +--------------+ | |
| | | | encode-big5.o|--+ | |
| | | +--------------+ | | |
v v v | | |
+-------------+ +-------------+ +--------------+ | | |
| keyboard | |/dev/tty[0-6]| | frame buffer |<-+ | |
| driver |<-->| |<-->| driver |<---+ |
| | | console tty | | |<-----+
| pc_keyb.c | | driver | | fbcon.c |
+-------------+ +-------------+ +--------------+
^ |
| |
--------------------------------------------------------------------
| | hardware
| v
+-----------+ +------------+
| keyboard | | display |
+-----------+ +------------+
五.Unicon未来
目前,UNICON输入法还有待于提高。可以提供对微软输入法支持。另外,每个用线程来模拟每个TTY
应该是更好的解决方案。我们有能力在这方面作得更好。