09-1408-3109-1409-14
01-0109-2410-1103-09
也许你感兴趣
1. 2. 3. 4. 5. 6. 7. 8. 9. 10.网卡不稳定的罪魁祸首
网卡不稳定的罪魁祸首
近期新上的DB SERVER服务器，在压测中发现网卡很不稳定，压力测试刚刚进行十几分钟后，服务器反应就变得非常慢，PING的时候经常丢包而且SSH连接也时断时续。刚开始以为是高并发时导致的db server无响应，可以看了一下CPU、内存和硬盘IO，发现都没有达到较高值，甚至比我们的预警值低很多，而且监测也表明DB服务器剩余资源很充裕！真是比较奇怪，那么引起网卡不稳定的原因到底是什么呢？
向相关工程师了解了一下情况，知道这台DB服务器是双机热备中的一台服务器，前几天刚做的2组千兆网卡绑定。据工程师说绑定前也做过压测，没有出现这样的问题。难道是绑定设置的哪个环节出问题了？于是决定从千兆网卡绑定进行详细检查。
故障现象图示:
一、 检查ifcfg-bond0和ifcfg-bond1文件
#cat &/etc/sysconfig/network-scripts/ifcfg-bond0
DEVICE=bond0 & &
BOOTPROTO=static
ONBOOT=yes
IPADDR=10.58.11.11
NETMASK=255.255.255.0
GATEWAY=10.58.121.254
USERCTL=no
#cat &/etc/sysconfig/network-scripts/ifcfg-bond1
DEVICE=bond1
BOOTPROTO=static
ONBOOT=yes
IPADDR=10.10.10.18
NETMASK=255.255.255.0
GATEWAY=10.58.121.254
USERCTL=no
分析：很标准的配置，没有什么问题。在这里注意不要指定单个网卡的IP 地址、子网掩码或网卡 ID。将上述信息指定到虚拟适配器(bonding)中即可。
二、检查ifcfg-eth0、ifcfg-eth1、ifcfg-eth2、ifcfg-eth3文件
#cat &/etc/sysconfig/network-scripts/ifcfg-eth0
　　DEVICE=eth0
　　ONBOOT=yes
　　BOOTPROTO=none
　　MASTER=bond0
& & &SLAVE=yes
　　USERCTL=no
& & &ETHTOOL_OPTS=&speed 1000 duplex full autoneg on&
　　#cat &/etc/sysconfig/network-scripts/ifcfg-eth1
　　DEVICE=eth1 & &
　　ONBOOT=yes
　　BOOTPROTO=none
　　MASTER=bond1
& & SLAVE=yes
　　USERCTL=no
& & ETHTOOL_OPTS=&speed 1000 duplex full autoneg on&
#cat & /etc/sysconfig/network-scripts/ifcfg-eth2
　　DEVICE=eth2
　　ONBOOT=yes
　　BOOTPROTO=none
　　MASTER=bond0
& & SLAVE=yes
　　USERCTL=no
& & ETHTOOL_OPTS=&speed 1000 duplex full autoneg on&
　　#cat &/etc/sysconfig/network-scripts/ifcfg-eth3
　　DEVICE=eth3
　　ONBOOT=yes
　　BOOTPROTO=none
　　MASTER=bond1
& & SLAVE=yes
　　USERCTL=no
& & ETHTOOL_OPTS=&speed 1000 duplex full autoneg on&
分析：从配置文件上看是eth0和 eth2绑定为BOND0， eth1和 eth3绑定为BOND1.
(注:临时设置网卡的千兆全双工可以这样
ethtool -s eth0 speed 1000 duplex full autoneg on
ethtool -s eth1 speed 1000 duplex full autoneg on)
三、 检查modprobe.conf配置文件
# cat /etc/modprobe.conf
alias eth0 bnx2
alias eth1 bnx2
alias eth2 bnx2
alias eth3 bnx2
alias scsi_hostadapter megaraid_sas
alias scsi_hostadapter1 ata_piix
alias scsi_hostadapter2 lpfc
alias bond0 bonding
options bond0 miimon=100 mode=0
alias bond1 bonding
options bond1 miimon=100 mode=1
###BEGINPP & &
include /etc/modprobe.conf.pp
分析：从此文件看加入
alias bond0 bonding
options bond0 miimon=100 mode=0&
alias bond1 bonding
options bond1 miimon=100 mode=1
主要目的是使在启动时加载bonding模块，对外虚拟网络接口设备为 bond0、bond1
另外miimon是用来进行链路监测的。 比如:miimon=100，那么系统每100ms监测一次链路连接状态，如果有一条线路不通就转入另一条线路;mode的值表示工作模式，他共有0，1,2,3四种模式，常用的为0,1两种。
　　mode=0表示load balancing (round-robin)为负载均衡方式，两块网卡都工作。
　　mode=1表示fault-tolerance (active-backup)提供冗余功能，工作方式是主备的工作方式,也就是说默认情况下只有一块网卡工作,另一块做备份.
　　注意：bonding只能提供链路监测，即从主机到的链路是否接通。如果只是交换机对外的链路down掉了，而交换机本身并没有故障，那么bonding会认为链路没有问题而继续使用。
& & & & 这部分的配置也没有问题。
　 & &到这里似乎还没看到问题的所在，不过还有一个地方是大家容易忽视的，那就是rc.local文件，为了让网卡绑定在每次启动后都能立即生效，我们通常会设置 rc.local.所以我们还应检查一下这个文件。
四、检查rc.local文件
# cat &/etc/rc.d/rc.local
touch /var/lock/subsys/local
ifenslave bond0 eth0 eth1
ifenslave bond1 eth2 eth3　
分析：这样的设置方便开机启动时，自动载入配置。　　
注意：这里是把 eth0和 eth1放到bond0里，eth2和 eth3放到bond1里。如果大家仔细回想的话，会发现在第二步检查当中是eth0和 eth2绑定为BOND0， eth1和 eth3绑定为BOND1的。看来问题的罪魁祸首就在这里，那么这样配置错了，会造成什么现象呢？
首先回顾一下网卡绑定的原理。我们知道，在正常情况下，ethernet网卡只接收目的mac地址是自身mac的ether帧，对于别的数据帧都过滤掉，以减轻驱动程序&&也就是软件的负担。但是ethernet网卡也支持另外一种被称为promisc的模式，可以接收网络上所有的帧，很多系统程序如：sniffer、tcpdump，都运行在这个模式下。Bonding网卡绑定也运行在这个模式下，而且修改了驱动程序中的mac地址，将两块网卡的mac地址改成相同，可以接收特定mac的数据帧。然后把相应的数据帧传送给bond驱动程序处理。
那么在我们检查的这个rc.local文件中，由于系统工程师的粗心把网卡绑定配置错了，这样一个细微的配置错误就会造成一个IP地址对应两个不同的MAC地址，显然会造成网络的延迟和不稳定，这跟ARP攻击比较像。当有多个不同MAC对应同样的IP，网络里面各机器包括对应这个IP的ARP会不停的变，包不是丢了就是发到错误的MAC了。 & &
我们可以检查一下各网卡的MAC来确认一下。
eth0 & & &Link encap:Ethernet &HWaddr D4:AE:52:7F:D1:74 &
& & & & & UP BROADCAST RUNNING SLAVE MULTICAST &MTU:1500 &Metric:1
& & & & & RX packets: errors:0 dropped:0 overruns:0 frame:0
& & & & & TX packets: errors:0 dropped:0 overruns:0 carrier:0
& & & & & collisions:0 txqueuelen:1000&
& & & & & RX bytes: (78.2 GiB) &TX bytes: (301.8 GiB)
& & & & & Interrupt:178 Memory:c12800
eth1 & & &Link encap:Ethernet &HWaddr D4:AE:52:7F:D1:76 &
& & & & & UP BROADCAST RUNNING SLAVE MULTICAST &MTU:1500 &Metric:1
& & & & & RX packets: errors:0 dropped:0 overruns:0 frame:0
& & & & & TX packets: errors:0 dropped:0 overruns:0 carrier:0
& & & & & collisions:0 txqueuelen:1000&
& & & & & RX bytes: (375.1 GiB) &TX bytes: (232.6 GiB)
& & & & & Interrupt:186 Memory:c12800
eth2 & & &Link encap:Ethernet &HWaddr D4:AE:52:7F:D1:74 &
& & & & & UP BROADCAST RUNNING SLAVE MULTICAST &MTU:1500 &Metric:1
& & & & & RX packets: errors:0 dropped:0 overruns:0 frame:0
& & & & & TX packets: errors:0 dropped:0 overruns:0 carrier:0
& & & & & collisions:0 txqueuelen:1000&
& & & & & RX bytes: (82.4 GiB) &TX bytes: (301.9 GiB)
& & & & & Interrupt:194 Memory:ca000000-ca012800
eth3 & & &Link encap:Ethernet &HWaddr D4:AE:52:7F:D1:76 &
& & & & & UP BROADCAST RUNNING SLAVE MULTICAST &MTU:1500 &Metric:1
& & & & & RX packets: errors:0 dropped:0 overruns:0 frame:0
& & & & & TX packets: errors:0 dropped:0 overruns:0 carrier:0
& & & & & collisions:0 txqueuelen:1000 &
& & & & & RX bytes: (372.8 GiB) &TX bytes: (232.6 GiB)
& & & & & Interrupt:202 Memory:cc000000-cc012800&
可以看到eth0和eth2的MAC是一样的，eth1和eth3的MAC是一样的。
针对问题原因，立即修改rc.local这个文件，改回正确的配置。
ifenslave bond0 eth0 eth2
ifenslave bond1 eth1 eth3　
然后重启服务器，再进行压测，发现果然一切正常了。
总结：双网卡的绑定是一个比较具体的操作工作，在配置当中我们不仅要熟悉了解它的原理，更要在部署实施时仔细认真，一个疏忽就会造成网络的不稳定和节点的瘫痪。
作者 xjsunjie用户名：Sunshyfangtian
文章数：74
评论数：203
访问量：238754
注册日期：
阅读量：1297
阅读量：3317
阅读量：453799
阅读量：1138463
51CTO推荐博文
cd /etc/sysconfig/network-scripts/
如果安装正常会有：ifcfg-lo、ifcfg-eth0，其中ifcfg-eth0就表示第一个网卡
如果没有ifcfg-eth0这个一般表示没有网卡或者网卡驱动程序没有安装之类的问题
查看网卡硬件识别信息
lspci | grep 'Eth'& //表示搜索局域网PCI插槽的硬件情况，有这个硬件不代表安装了驱动
如果出现：02:00.0 Ethernet controller:Realtek Semiconductor Co.,Ltd.RTLB PCI Express Gigabit Ethernet controller (rev 02)或者类似信息，就表示有这个网卡，但是可能网卡驱动没有安装或者安装的驱动程序版本不对，那么就要去下载RTLB这种类型的网卡驱动程序
先查看linux内核使用的版本
然后下载响应版本的驱动程序，这个google一下
比如我的内核是2.6.18-53.e15xen版本
那么去下载响应的网卡驱动为网站上的相应硬件型号
RTL8111B/RTL8168B/RTL8111/RTL8168/RTL8111C/RTL8111CP/RTL8111D(L)/RTL8168C/RTL8111DP/RTL8111E/RTL8105E
支持LINUX driver for kernel 2.6.x and 2.4.x (Support x86 and x64)
下载驱动包为：r.00.tar.bz2
把文件通过U盘拷贝到linux系统下
插好U盘后，查看磁盘情况
正常情况下有
Disk /dev/sda:2045 MB, bytes
47 heads,46 sectors/track,1847 cylinders
Units = cylinders of 2162 * 512 = 1106944 bytes
Device Boot&& Start&&&&&& End&&&&&& Blocks&&&&& Id&&& System
/dev/sda1&&&&&&&& 1&&&&& 1848&&&&& 1997188+&&&&& b&&& W95 FAT32
类似信息，因为我的U盘是2G的盘所以就这个信息
然后建立一个目录usb，如果存在了就算了，一般是这样的
mkdir /mnt/usb
所谓的挂接U盘
mount /dev/sda1 /mnt/usb -t vfat
这样成功后就可以进入这个U盘了
cd /mnt/usb
进入U盘就可以看到你U盘的文件了
比如要把这个U盘的驱动程序拷贝到以下目录
/usr/drivers/netcard/目录下，如果没有drivers/netcard/先建立目录
然后拷贝这个文件
cp -r /mnt/usb/r.00.tar.bz2 /usr/drivers/netcard/
然后解压文件(如果在驱动文件的所在目录)
tar jxvf r.00.tar.bz2
解压后跟解压文件平级的有个目录r.00
然后编译& 安装& 启动服务
make clean modules
make install
这里查看目录
cd /etc/sysconfig/network-scripts/
如果没有ifcfg-eth0就重启计算机
然后再进入
cd /etc/sysconfig/network-scripts/
一般就有这个目录了
查看IP情况
ifconfig& |more
有时避免过多信息看不到
这样再试试这样的网络测试命令
ping 192.168.0.110(局域网里另外一台机子的IP)
如果能够ping通的话说明网络已经配置通了
&本文出自 “” 博客，请务必保留此出处
了这篇文章
类别：┆阅读(0)┆评论(0)后使用快捷导航没有帐号？
后使用快捷导航没有帐号？
请完成以下验证码
查看: 17551|回复: 20
上尉, 积分 1327, 距离下一级还需 674 积分
该用户从未签到
本帖最后由 jlzz 于
11:45 编辑
主要原因：CDlinux是一个精简的linux系统，缺少安装驱动所需要的模块。
解决方法：
1、从CDlinux官网下载几个文件：
& && && && &CDlinux_CE-0.9.7.1.iso& && && & （0.9.7.1社区版镜像，需要里面的extra-cdl.md模块）
& && && && &devel-cdl.md& && && && && && && && &&&（编译模块）
& && && && &devel-0.9.7.1.tar.xz& && && && && &（源代码包）
& && && && &linux-3.2.11_cdl0.patches.tar.xz&&（配置补丁包）
下载地址是
下载完成后，将devel-cdl.md& &devel-0.9.7.1.tar.xz& & linux-3.2.11_cdl0.patches.tar.xz& &三个文件拷贝到U盘上。
2、虚拟机硬盘不要小于6GB，而且为ext3分区格式，硬盘已安装有0.9.7.1版的CDlinux系统。
3、挂载虚拟光盘CDlinux_CE-0.9.7.1.iso 启动，
启动完成后，按Ctrl+Alt+F1进入超级字符终端模式，再输入命令：startx &回车&&&返回到图形桌面。
分配U盘给虚拟机，把U盘上的devel-cdl.md复制到硬盘的CDlinux/extra文件夹，
把虚拟光盘的CDlinux/extra/extra-cdl.md 也复制到硬盘的CDlinux/extra文件夹。
在硬盘上建一个文件夹，把U盘上的devel-0.9.7.1.tar.xz& &和 linux-3.2.11_cdl0.patches.tar.xz 拷贝过来。
4、关闭虚拟机，卸载虚拟光盘，从虚拟硬盘启动CDlinux。进入超级字符终端。
5、进入硬盘上存放devel-0.9.7.1.tar.xz& &和linux-3.2.11_cdl0.patches.tar.xz 的目录：
& && && & cd&&/media/HDD/devel& && && && && &//假设硬盘卷标是HDD，目录名是 devel
& & 解压两个包：
& && && & tar&&xvf& &devel-0.9.7.1.tar.xz&&
& && && & tar&&xvf& &linux-3.2.11_cdl0.patches.tar.xz
& &复制配置文件 .config.i686&&到 /media/HDD/devel/usr/src/linux：
& && && & cp& &.config.i686& & /media/HDD/devel/usr/src/linux
6、系统配置、内核编译和模块编译：
& && && &cd&&/media/HDD/devel/usr/src/linux& &//进入目录
& && && &make mrproper& & //清楚旧的配置
& && && &make&&menuconfig& &//配置系统
& && && && && && && & （注意：读取配置文件.config.i686&&，保存配置为 .config）
& && && &make dep& && & //建立正确关联
& && && &make&&clean& & //删除无效文件
& && && &make& &bzImage& &&&//编译核心文件，仅为了安装驱动，这个可以不做节省时间
& && && &make& &modules& &&&//编译外部模块
& && && &make& &modules_install& &//安装外部模块
7、编译安装网卡驱动 ：（以RTL8188EU为例）
& && && & cd /media/HDD/rtl8188eu& & //进入网卡驱动目录，假设硬盘卷标HDD，网卡驱动在目录rtl8188eu里面
& && && &&&make& && && && && && &&&//编译驱动，编译结果生成驱动文件8188eu.ko
& && && &&&sudo make install& &//安装驱动
& && && &&&lsmod& &
& && && && &insmod 8188eu.ko&&//加载驱动
& && && && && && &（这时拔插一下网卡）
& && && &&&ifconfig&&wlan0& &//查看网卡是否被识别
8、 妥善保存好驱动文件8188eu.ko，以后安装驱动只要：
& && && && &insmod& & /media/HDD/rtl8188eu/8188eu.ko
Anywlan因您更精彩！: 5 Anywlan因您更精彩！&
.config.i686
/media/HDD/devel/usr/src/linux
兄弟我是按你的方法操作的就是没有找到“/devel/usr/src/linux ”这个目录&
<p id="rate_844" onmouseover="showTip(this)" tip="Anywlan因您更精彩！&金币 + 5 元
" class="mtn mbn">
<p id="rate_5124" onmouseover="showTip(this)" tip="Anywlan因您更精彩！&金币 + 20 元
" class="mtn mbn">
少尉, 积分 447, 距离下一级还需 54 积分
签到天数: 20 天[LV.4]偶尔看看III
.config.i686隐藏文件我找到了，之后又有一个问题我编译网卡驱动的时候提示错误，我的网卡是英特尔双频3160的驱动也是从官网下的，也放到虚拟硬盘里了，但是最后编译网卡驱动的时候提示找不到
上尉, 积分 1162, 距离下一级还需 839 积分
签到天数: 59 天[LV.5]常住居民I
少校, 积分 2497, 距离下一级还需 2504 积分
签到天数: 285 天[LV.8]以坛为家I
技术帖，顶起来！
上尉, 积分 1327, 距离下一级还需 674 积分
该用户从未签到
前面我们编译得到的网卡驱动8188eu.ko可以添加到CDlinux系统模块中，这样以后就能自动识别网卡了：
1、进入超级字符终端模式，再输入命令 startx《回车》返回到桌面模式
2、打开“系统”--“终端程序-超级用户模式”窗口，输入以下命令：
& && &cd& &/media/HDD/CDlinux/extra& &// 这里假设硬盘卷标是HDD
& && &unsquashfs& &base-cdl.md& & //解压系统模块
3、终端窗口不要关闭，打开“文件系统 -/media/HDD/CDlinux/extra 目录，可以看到里面多了一个文件夹squashfs-root，系统模块base-cdl.md解压后的内容都在里面，设备驱动也在里面，我们把网卡驱动8188eu.ko复制到squashfs-root/lib/modules/3.2.11_cdl0/kernel/drivers/net/wireless/rtl818x
4、回到终端窗口，重新打包：
& &&&mksquashfs& &squashfs-root& & base-cdl.new
5、把原来的base-cdl.md换个名字，把base-cdl.new改名为base-cdl.md
6、重新启动
上尉, 积分 1327, 距离下一级还需 674 积分
该用户从未签到
本帖最后由 jlzz 于
16:41 编辑
现在TP-LINK WN725N网卡可以被CDlinux识别了，连接无线上网没问题，但是启用水滴却报告“没有发现无线网卡”。。。。打气筒、奶瓶虽发现网卡，却报告说“不能进入监控模式”。。求解。。。。。。。
少尉, 积分 416, 距离下一级还需 85 积分
签到天数: 2 天[LV.1]初来乍到
jlzz 发表于
现在TP-LINK WN725N网卡可以被CDlinux识别了，连接无线上网没问题，但是启用水滴却报告“没有发现无线网卡” ...
1.其实不用重新编译整个内核，单独编译网卡驱动即可。编译后把网卡驱动单独打包，名称xxx-cdl.tgz放入local目录即可。更简单快捷一些。
2.rtl官方驱动不能打开监听模式，所以要编译compat wireless 这个linux内核自带的驱动才能打开监听模式。
3.现有的CDlinux-0.9.7.1带有无线功能的版本，应该都支持rtl8188, cu肯定支持，测试过，eu也应可以。
上尉, 积分 1327, 距离下一级还需 674 积分
该用户从未签到
feast 发表于
1.其实不用重新编译整个内核，单独编译网卡驱动即可。编译后把网卡驱动单独打包，名称xxx-cdl.tgz放入loc ...
多谢指教！！
大校, 积分 39643, 距离下一级还需 358 积分
签到天数: 115 天[LV.6]常住居民II
能否做一个驱动md独立模块 添加常见的笔记本自带网卡 3072 等等常见网卡的驱动 本人码盲 比较懒 希望楼主支持
少将, 积分 51204, 距离下一级还需 8797 积分
签到天数: 1219 天[LV.10]以坛为家III
顶起，愿意看到更多此类好帖:-$
上等兵, 积分 116, 距离下一级还需 85 积分
签到天数: 7 天[LV.3]偶尔看看II
楼主，你好，我这里有个问题要请教你，我的也是TP-link WN725n网卡，但是我的RTL8188eu,在最后一步insmod的时候，提示invalid modules format,你可以把你成功安装的驱动传一分给我吗？另外，在你的贴子里，是不是打错一个地方，就是extra-cdl.md,我按你的地址下载的0.9.7.1里面只有一个extra-cd.md 这个文件。请指教，谢谢,
另外请教一下feast，关于你说的 ：2.rtl官方驱动不能打开监听模式，所以要编译compat wireless 这个linux内核自带的驱动才能打开监听模式 这个模块怎么编译，能给些更详尽的信息吗？谢谢
上等兵, 积分 116, 距离下一级还需 85 积分
签到天数: 7 天[LV.3]偶尔看看II
有朋友帮解答一下吗，顶一下。。
上等兵, 积分 116, 距离下一级还需 85 积分
签到天数: 7 天[LV.3]偶尔看看II
大神啊，高手啊，你们在哪里啊
Powered by2011年5月 Linux/Unix社区大版内专家分月排行榜第一2011年4月 Linux/Unix社区大版内专家分月排行榜第一2011年3月 Linux/Unix社区大版内专家分月排行榜第一2010年12月 Linux/Unix社区大版内专家分月排行榜第一2010年11月 Linux/Unix社区大版内专家分月排行榜第一2010年10月 Linux/Unix社区大版内专家分月排行榜第一2010年9月 Linux/Unix社区大版内专家分月排行榜第一2010年8月 Linux/Unix社区大版内专家分月排行榜第一2010年7月 Linux/Unix社区大版内专家分月排行榜第一2010年6月 Linux/Unix社区大版内专家分月排行榜第一2010年5月 Linux/Unix社区大版内专家分月排行榜第一2010年4月 Linux/Unix社区大版内专家分月排行榜第一2010年3月 Linux/Unix社区大版内专家分月排行榜第一2010年2月 Linux/Unix社区大版内专家分月排行榜第一2010年1月 Linux/Unix社区大版内专家分月排行榜第一2009年10月 Linux/Unix社区大版内专家分月排行榜第一2009年9月 Linux/Unix社区大版内专家分月排行榜第一
2011年7月 Linux/Unix社区大版内专家分月排行榜第二2011年6月 Linux/Unix社区大版内专家分月排行榜第二2011年2月 Linux/Unix社区大版内专家分月排行榜第二
2011年5月 Linux/Unix社区大版内专家分月排行榜第一2011年4月 Linux/Unix社区大版内专家分月排行榜第一2011年3月 Linux/Unix社区大版内专家分月排行榜第一2010年12月 Linux/Unix社区大版内专家分月排行榜第一2010年11月 Linux/Unix社区大版内专家分月排行榜第一2010年10月 Linux/Unix社区大版内专家分月排行榜第一2010年9月 Linux/Unix社区大版内专家分月排行榜第一2010年8月 Linux/Unix社区大版内专家分月排行榜第一2010年7月 Linux/Unix社区大版内专家分月排行榜第一2010年6月 Linux/Unix社区大版内专家分月排行榜第一2010年5月 Linux/Unix社区大版内专家分月排行榜第一2010年4月 Linux/Unix社区大版内专家分月排行榜第一2010年3月 Linux/Unix社区大版内专家分月排行榜第一2010年2月 Linux/Unix社区大版内专家分月排行榜第一2010年1月 Linux/Unix社区大版内专家分月排行榜第一2009年10月 Linux/Unix社区大版内专家分月排行榜第一2009年9月 Linux/Unix社区大版内专家分月排行榜第一
2011年7月 Linux/Unix社区大版内专家分月排行榜第二2011年6月 Linux/Unix社区大版内专家分月排行榜第二2011年2月 Linux/Unix社区大版内专家分月排行榜第二
2011年5月 Linux/Unix社区大版内专家分月排行榜第一2011年4月 Linux/Unix社区大版内专家分月排行榜第一2011年3月 Linux/Unix社区大版内专家分月排行榜第一2010年12月 Linux/Unix社区大版内专家分月排行榜第一2010年11月 Linux/Unix社区大版内专家分月排行榜第一2010年10月 Linux/Unix社区大版内专家分月排行榜第一2010年9月 Linux/Unix社区大版内专家分月排行榜第一2010年8月 Linux/Unix社区大版内专家分月排行榜第一2010年7月 Linux/Unix社区大版内专家分月排行榜第一2010年6月 Linux/Unix社区大版内专家分月排行榜第一2010年5月 Linux/Unix社区大版内专家分月排行榜第一2010年4月 Linux/Unix社区大版内专家分月排行榜第一2010年3月 Linux/Unix社区大版内专家分月排行榜第一2010年2月 Linux/Unix社区大版内专家分月排行榜第一2010年1月 Linux/Unix社区大版内专家分月排行榜第一2009年10月 Linux/Unix社区大版内专家分月排行榜第一2009年9月 Linux/Unix社区大版内专家分月排行榜第一
2011年7月 Linux/Unix社区大版内专家分月排行榜第二2011年6月 Linux/Unix社区大版内专家分月排行榜第二2011年2月 Linux/Unix社区大版内专家分月排行榜第二
2011年5月 Linux/Unix社区大版内专家分月排行榜第一2011年4月 Linux/Unix社区大版内专家分月排行榜第一2011年3月 Linux/Unix社区大版内专家分月排行榜第一2010年12月 Linux/Unix社区大版内专家分月排行榜第一2010年11月 Linux/Unix社区大版内专家分月排行榜第一2010年10月 Linux/Unix社区大版内专家分月排行榜第一2010年9月 Linux/Unix社区大版内专家分月排行榜第一2010年8月 Linux/Unix社区大版内专家分月排行榜第一2010年7月 Linux/Unix社区大版内专家分月排行榜第一2010年6月 Linux/Unix社区大版内专家分月排行榜第一2010年5月 Linux/Unix社区大版内专家分月排行榜第一2010年4月 Linux/Unix社区大版内专家分月排行榜第一2010年3月 Linux/Unix社区大版内专家分月排行榜第一2010年2月 Linux/Unix社区大版内专家分月排行榜第一2010年1月 Linux/Unix社区大版内专家分月排行榜第一2009年10月 Linux/Unix社区大版内专家分月排行榜第一2009年9月 Linux/Unix社区大版内专家分月排行榜第一
2011年7月 Linux/Unix社区大版内专家分月排行榜第二2011年6月 Linux/Unix社区大版内专家分月排行榜第二2011年2月 Linux/Unix社区大版内专家分月排行榜第二
2011年1月 Linux/Unix社区大版内专家分月排行榜第二2010年12月 Linux/Unix社区大版内专家分月排行榜第二2010年11月 Linux/Unix社区大版内专家分月排行榜第二
2011年11月 Linux/Unix社区大版内专家分月排行榜第三2011年10月 Linux/Unix社区大版内专家分月排行榜第三2011年6月 Linux/Unix社区大版内专家分月排行榜第三2011年5月 Linux/Unix社区大版内专家分月排行榜第三2011年4月 Linux/Unix社区大版内专家分月排行榜第三2011年3月 Linux/Unix社区大版内专家分月排行榜第三2011年2月 Linux/Unix社区大版内专家分月排行榜第三2010年5月 Linux/Unix社区大版内专家分月排行榜第三
2011年5月 Linux/Unix社区大版内专家分月排行榜第一2011年4月 Linux/Unix社区大版内专家分月排行榜第一2011年3月 Linux/Unix社区大版内专家分月排行榜第一2010年12月 Linux/Unix社区大版内专家分月排行榜第一2010年11月 Linux/Unix社区大版内专家分月排行榜第一2010年10月 Linux/Unix社区大版内专家分月排行榜第一2010年9月 Linux/Unix社区大版内专家分月排行榜第一2010年8月 Linux/Unix社区大版内专家分月排行榜第一2010年7月 Linux/Unix社区大版内专家分月排行榜第一2010年6月 Linux/Unix社区大版内专家分月排行榜第一2010年5月 Linux/Unix社区大版内专家分月排行榜第一2010年4月 Linux/Unix社区大版内专家分月排行榜第一2010年3月 Linux/Unix社区大版内专家分月排行榜第一2010年2月 Linux/Unix社区大版内专家分月排行榜第一2010年1月 Linux/Unix社区大版内专家分月排行榜第一2009年10月 Linux/Unix社区大版内专家分月排行榜第一2009年9月 Linux/Unix社区大版内专家分月排行榜第一
2011年7月 Linux/Unix社区大版内专家分月排行榜第二2011年6月 Linux/Unix社区大版内专家分月排行榜第二2011年2月 Linux/Unix社区大版内专家分月排行榜第二
2011年1月 Linux/Unix社区大版内专家分月排行榜第二2010年12月 Linux/Unix社区大版内专家分月排行榜第二2010年11月 Linux/Unix社区大版内专家分月排行榜第二
2011年11月 Linux/Unix社区大版内专家分月排行榜第三2011年10月 Linux/Unix社区大版内专家分月排行榜第三2011年6月 Linux/Unix社区大版内专家分月排行榜第三2011年5月 Linux/Unix社区大版内专家分月排行榜第三2011年4月 Linux/Unix社区大版内专家分月排行榜第三2011年3月 Linux/Unix社区大版内专家分月排行榜第三2011年2月 Linux/Unix社区大版内专家分月排行榜第三2010年5月 Linux/Unix社区大版内专家分月排行榜第三
本帖子已过去太久远了，不再提供回复功能。}