iis服务器助手广告广告

扫码关注官方微信

扫码下载APP
返回顶部
首页 > 资讯 > 数据库 >怎么用MySQL+Keepalived+haproxy实现负载均衡
  • 682

0
分享到

怎么用MySQL+Keepalived+haproxy实现负载均衡

2024-04-02 19:04:59 682人浏览 泡泡鱼
摘要

本篇内容主要讲解“怎么用Mysql+Keepalived+haproxy实现负载均衡”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“怎么用mysql+Keepal

本篇内容主要讲解“怎么用Mysql+Keepalived+haproxy实现负载均衡”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“怎么用mysql+Keepalived+haproxy实现负载均衡”吧!

数据库环境：

slave2：192.168.8.59

slave3：192.168.8.61

工具包：

keepalived-1.4.5.tar.gz

haproxy-1.8.9.tar.gz

       此次实验中，slave2和slave3利用 keepalived和haproxy实现负载均衡，本文着重讲解负载均衡的搭建过程。

一、修改内核参数

echo "net.ipv4.ip_nonlocal_bind=1" >> /etc/sysctl.conf
echo "net.ipv4.ip_forward=1" >> /etc/sysctl.conf
sysctl -p

net.ipv4.ip_nonlocal_bind=1 意思是启动haproxy的时候，允许忽视VIP的存在

net.ipv4.ip_forward = 1 haproxy代理服务器同时也要打开内核的转发功能

二、安装keepalived和haproxy

mount /dev/cdrom /media
yum install kernel-devel openssl-devel popt-devel -y
cd /software
tar zxvf keepalived-1.4.5.tar.gz
cd keepalived-1.4.5
./configure --prefix=/usr/local/keepalived/
make && make install
systemctl enable keepalived

vi /usr/local/keepalived/etc/sysconfig/keepalived

KEEPALIVED_OPTioNS="-D -d -S 0"

vi /etc/rsyslog.conf

local0.* /var/log/keepalived.log
systemctl restart rsyslog
cd /software
tar zxvf haproxy-1.8.9.tar.gz
cd haproxy-1.8.9
make TARGET=linux2628 PREFIX=/usr/local/haproxy
make install PREFIX=/usr/local/haproxy
/usr/local/haproxy/sbin/haproxy -v
useradd -r -s /sbin/nologin haproxy
touch /var/log/haproxy.log
chmod 755 /var/log/haproxy.log

修改日志位置

vi /etc/rsyslog.conf
local0.* /var/log/haproxy.log
vi /etc/sysconfig/rsyslog
SYSLOGD_OPTIONS="-r -m 0 -c 2"
systemctl restart rsyslog

三、配置keepalived

192.168.8.59

/etc/keepalived/keepalived.conf

! Configuration File for keepalived
global_defs {
router_id mysql-slave
notification_email {
zdd5503@163.com
}
notification_email_from zdd5503@163.com
smtp_server stmp.163.com
smtp_connect_timeout 30
}
vrrp_script chk_haproxy {
script "/etc/keepalived/scripts/check_haproxy.sh"
interval 2
weight 2
}
vrrp_instance v_mysql_slave_zdd01 {
interface enp0s3
state MASTER
virtual_router_id 98
priority 200
nopreempt
virtual_ipaddress {
192.168.8.98/24
}
track_script {
chk_haproxy
}
notify_master /etc/keepalived/scripts/haproxy_master.sh
notify_backup /etc/keepalived/scripts/haproxy_backup.sh
notify_fault /etc/keepalived/scripts/haproxy_fault.sh
notify_stop /etc/keepalived/scripts/haproxy_stop.sh
}

192.168.8.61

/etc/keepalived/keepalived.conf

! Configuration File for keepalived
global_defs {
router_id mysql-slave
notification_email {
zdd5503@163.com
}
notification_email_from zdd5503@163.com
smtp_server stmp.163.com
smtp_connect_timeout 30
}
vrrp_script chk_haproxy {
script "/etc/keepalived/scripts/check_haproxy.sh"
interval 2
weight 2
}
vrrp_instance v_mysql_slave_zdd01 {
interface enp0s3
state BACKUP
virtual_router_id 98
priority 150
nopreempt
virtual_ipaddress {
192.168.8.98/24
}
track_script {
chk_haproxy
}
notify_master /etc/keepalived/scripts/haproxy_master.sh
notify_backup /etc/keepalived/scripts/haproxy_backup.sh
notify_fault /etc/keepalived/scripts/haproxy_fault.sh
notify_stop /etc/keepalived/scripts/haproxy_stop.sh
}

四、配置haproxy

192.168.8.59和192.168.8.61都做如下脚本配置：

mkdir -p /etc/keepalived/scripts

vi /etc/keepalived/scripts/check_haproxy.sh

#!/bin/bash
STARTHAPROXY="/usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/haproxy.cfg"
#STOPKEEPALIVED="systemctl stop keepalived"
LOGFILE="/etc/keepalived/scripts/keepalived-haproxy-state.log"
echo "[check_haproxy status]" >> $LOGFILE
A=`ps -C haproxy --no-header |wc -l`
echo "[check_haproxy status]" >> $LOGFILE
date >> $LOGFILE
if [ $A -eq 0 ];then
echo $STARTHAPROXY >> $LOGFILE
$STARTHAPROXY >> $LOGFILE 2>&1
sleep 5
fi
if [ `ps -C haproxy --no-header |wc -l` -eq 0 ];then
exit 0
else
exit 1
fi

vi /etc/keepalived/scripts/haproxy_master.sh

#!/bin/bash
STARTHAPROXY=`/usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/haproxy.cfg`
STOPHAPROXY=`ps -ef |grep sbin/haproxy| grep -v grep|awk '{print $2}'|xargs kill -s 9`
LOGFILE="/etc/keepalived/scripts/keepalived-haproxy-state.log"
echo "[master]" >> $LOGFILE
date >> $LOGFILE
echo "Being master...." >> $LOGFILE 2>&1
echo "stop haproxy...." >> $LOGFILE 2>&1
$STOPHAPROXY >> $LOGFILE 2>&1
echo "start haproxy...." >> $LOGFILE 2>&1
$STARTHAPROXY >> $LOGFILE 2>&1
echo "haproxy stared ..." >> $LOGFILE

vi /etc/keepalived/scripts/haproxy_backup.sh

#!/bin/bash
STARTHAPROXY=`/usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/haproxy.cfg`
STOPHAPROXY=`ps -ef |grep sbin/haproxy| grep -v grep|awk '{print $2}'|xargs
kill -s 9`
LOGFILE="/etc/keepalived/scripts/keepalived-haproxy-state.log"
echo "[master]" >> $LOGFILE
date >> $LOGFILE
echo "Being master...." >> $LOGFILE 2>&1
echo "stop haproxy...." >> $LOGFILE 2>&1
$STOPHAPROXY >> $LOGFILE 2>&1
echo "start haproxy...." >> $LOGFILE 2>&1
$STARTHAPROXY >> $LOGFILE 2>&1
echo "haproxy stared ..." >> $LOGFILE

vi /etc/keepalived/scripts/haproxy_fault.sh

#!/bin/bash
LOGFILE=/etc/keepalived/scripts/keepalived-haproxy-state.log
echo "[fault]" >> $LOGFILE
date >> $LOGFILE

vi /etc/keepalived/scripts/haproxy_stop.sh

#!/bin/bash
LOGFILE=/etc/keepalived/scripts/keepalived-haproxy-state.log
echo "[stop]" >> $LOGFILE
date >> $LOGFILE

更改脚本属性

chmod 755 /etc/keepalived/scripts/*

配置haproxy

192.168.8.59

vi /usr/local/haproxy/haproxy.cfg

global   #全局配置参数
		log 127.0.0.1 local0 notice #日志
		#user haproxy 
		#group haproxy
        daemon  #以后台形式运行haproxy
        #quiet
        nbproc 1  #  进程数量，可以设置多个进程提高性能
        pidfile /usr/local/haproxy/haproxy.pid   #haproxy的pid存放路径
  
		defaults   #一些默认参数
		log global  #全局日志
		retries 3  # 3次连接失败就认为服务器不可用
		option dontlognull  # 保存haproxy不记录上次负载均衡发送过来的用于检测状态没有数据的心跳包
		option Redispatch # 对应的服务器挂掉后，强制指向到其它正常的服务器
		maxconn 2000  #默认最大连接数
		timeout queue 1m # 等待最大时长
		timeout Http-request 10s #客户端建立连接又不请求数据的时候超过10S，就关闭客户端连接
		timeout connect 10s # 定义haproxy将客户端请求转发至后端服务器所等待的超时时长 
		timeout server 1m # 服务端非活动状态的超时时长
		timeout client 1m  # 客户端非活动状态的超时时长
		timeout http-keep-alive 10s #   设置http-keep-alive超时时长
		timeout check 10s #健康状态监测时的超时时间
		balance roundrobin #负载均衡方式，轮询方式（保持会话session:源地址/cookies,针对WEB应用服务器）
 
#定义负载均衡的配置       
listen mysql_slave_wgpt_lb1
        bind 192.168.8.98:3307 #绑定的IP与端口 (建议bind *:3306)
        mode tcp #模式是TCP，（7层http,4层tcp，如果是mysql用tcp，如果是weblogic/was/Tomcat之类的就用http）
		option mysql-check user haproxy_check #通过mysql连接去检测mysql是否可以访问
		stats hide-version #隐藏统计页上的haproxy的版本信息
		balance roundrobin #负载均衡方式，轮询方式
		server slave2 192.168.8.59:3306 weight 1 check inter 2000 rise 2 fall 5 maxconn 300
		server slave3 192.168.8.61:3306 weight 1 check inter 2000 rise 2 fall 5 maxconn 300
                #服务器定义,check inter 2000检测心跳频率，rise 2 2次正确认为服务器可用，fall 5 5次失败认为服务器不可用，
                #maxconn 300 最大连接数300
#自带的监控服务器的配置
listen  haproxy_stats 
        mode http 
        bind *:8888 
        option httplog 
        stats refresh 5s      
        stats uri /haproxy-stat 
	stats realm www.zdd.com monitor
        stats realm Haproxy Manager 
        stats auth haproxy:haproxy

192.168.8.61

vi /usr/local/haproxy/haproxy.cfg

global   #全局配置参数
		log 127.0.0.1 local0 notice #日志
		#user haproxy 
		#group haproxy
        daemon  #以后台形式运行haproxy
        #quiet
        nbproc 1  #  进程数量，可以设置多个进程提高性能
        pidfile /usr/local/haproxy/haproxy.pid   #haproxy的pid存放路径
  
		defaults   #一些默认参数
		log global  #全局日志
		retries 3  # 3次连接失败就认为服务器不可用
		option dontlognull  # 保存haproxy不记录上次负载均衡发送过来的用于检测状态没有数据的心跳包
		option redispatch # 对应的服务器挂掉后，强制指向到其它正常的服务器
		maxconn 2000  #默认最大连接数
		timeout queue 1m # 等待最大时长
		timeout http-request 10s #客户端建立连接又不请求数据的时候超过10S，就关闭客户端连接
		timeout connect 10s # 定义haproxy将客户端请求转发至后端服务器所等待的超时时长 
		timeout server 1m # 服务端非活动状态的超时时长
		timeout client 1m  # 客户端非活动状态的超时时长
		timeout http-keep-alive 10s #   设置http-keep-alive超时时长
		timeout check 10s #健康状态监测时的超时时间
		balance roundrobin #负载均衡方式，轮询方式（保持会话session:源地址/cookies,针对web应用服务器）
 
#定义负载均衡的配置       
listen mysql_slave_wgpt_lb1
        bind 192.168.8.98:3307 #绑定的IP与端口 (建议bind *:3306)
        mode tcp #模式是TCP，（7层http,4层tcp，如果是mysql用tcp，如果是weblogic/was/tomcat之类的就用http）
		option mysql-check user haproxy_check #通过mysql连接去检测mysql是否可以访问
		stats hide-version #隐藏统计页上的haproxy的版本信息
		balance roundrobin #负载均衡方式，轮询方式
		server slave2 192.168.8.59:3306 weight 1 check inter 2000 rise 2 fall 5 maxconn 300
		server slave3 192.168.8.61:3306 weight 1 check inter 2000 rise 2 fall 5 maxconn 300
                #服务器定义,check inter 2000检测心跳频率，rise 2 2次正确认为服务器可用，fall 5 5次失败认为服务器不可用，
                #maxconn 300 最大连接数300
#自带的监控服务器的配置
listen  haproxy_stats 
        mode http 
        bind *:8888 
        option httplog 
        stats refresh 5s      
        stats uri /haproxy-stat 
	stats realm www.zdd.com monitor
        stats realm Haproxy Manager 
        stats auth haproxy:haproxy

五、添加 haproxy_check 用户

drop user haproxy_check@'%';
create user haproxy_check@'192.168.8.59';
create user haproxy_check@'192.168.8.61';
create user haproxy_check@'192.168.8.98';
grant usage on *.* to haproxy_check@'192.168.8.59';
grant usage on *.* to haproxy_check@'192.168.8.61';
grant usage on *.* to haproxy_check@'192.168.8.98';
mysql> select user,host from mysql.user;
+---------------+--------------+
| user          | host         |
+---------------+--------------+
| repl          | 192.168.8.%  |
| root          | 192.168.8.%  |
| haproxy_check | 192.168.8.59 |
| haproxy_check | 192.168.8.61 |
| haproxy_check | 192.168.8.98 |
| mysql.session | localhost    |
| mysql.sys     | localhost    |
| root          | localhost    |
+---------------+--------------+

六、启动 keepalived

systemctl daemon-reload
systemctl enable keepalived
systemctl start keepalived
ip a |grep 98
ps -ef |grep keepalived

七、配置keepalived监控脚本

两个节点都做如下配置：

vi /etc/keepalived/keepcheck.sh

#!/bin/bash
while :
do
keepalivedcheck=`ps -C keepalived --no-header | wc -l`
if [ $keepalivedcheck -eq 0 ];then
systemctl start keepalived
else
echo "keepalived is running"
fi
sleep 5
done
chmod +x /etc/keepalived/keepcheck.sh
nohup /etc/keepalived/keepcheck.sh &
echo "nohup /etc/keepalived/keepcheck.sh &" >> /etc/rc.d/rc.local

八、配置haproxy 启动脚本

 vim /etc/rc.d/init.d/haproxy

#! /bin/sh
set -e
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/haproxy/sbin
PROGDIR=/usr/local/haproxy
PROGNAME=haproxy
DAEMON=$PROGDIR/sbin/$PROGNAME
CONFIG=$PROGDIR/$PROGNAME.cfg
PIDFILE=$PROGDIR/$PROGNAME.pid
DESC="HAProxy daemon"
SCRIPTNAME=/etc/init.d/$PROGNAME
# Gracefully exit if the package has been removed.
test -x $DAEMON || exit 0
start()
{
echo -n "Starting $DESC: $PROGNAME"
$DAEMON -f $CONFIG
echo "."
}
stop()
{
echo -n "Stopping $DESC: $PROGNAME"
haproxy_pid=`cat $PIDFILE`
kill -9 $haproxy_pid
echo "."
}
restart()
{
echo -n "Restarting $DESC: $PROGNAME"
$DAEMON -f $CONFIG -p $PIDFILE -sf $(cat $PIDFILE)
echo "."
}
case "$1" in
start)
start
;;
stop)
stop
;;
restart)
restart
;;
*)
echo "Usage: $SCRIPTNAME {start|stop|restart}" >&2
exit 1
;;
esac
exit 0
chmod +x /etc/rc.d/init.d/haproxy
echo "nohup /etc/rc.d/init.d/haproxy start &" >> /etc/rc.d/rc.local
systemctl stop keepalived
systemctl start keepalived
tail -f /var/log/keepalived.log
/etc/rc.d/init.d/haproxy start
/etc/rc.d/init.d/haproxy stop
tail -f /var/log/haproxy.log

haproxy控制台访问地址：

http://192.168.8.98:8888/haproxy-stat

九、测试负载均衡

[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a passWord on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 59    |
+---------------+-------+
[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a password on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 61    |
+---------------+-------+
[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a password on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 59    |
+---------------+-------+
[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a password on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 61    |
+---------------+-------+
[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a password on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 59    |
+---------------+-------+
[root@slave3 ~]# mysql -uroot -pmysql -h292.168.8.98 -P3307 -e "show variables like 'server_id';"
mysql: [Warning] Using a password on the command line interface can be insecure.
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 61    |
+---------------+-------+

因为我们在haproxy配置文件中配置了权重为1：1，所以会话将交替分发到两个节点上边。

到此，相信大家对“怎么用MySQL+Keepalived+haproxy实现负载均衡”有了更深的了解，不妨来实际操作一番吧！这里是编程网网站，更多相关内容可以进入相关频道进行查询，关注我们，继续学习！

您可能感兴趣的文档:
点击免费下载>>软考高级考试备考技巧/历年真题/备考精华资料

--结束END--

本文标题: 怎么用MySQL+Keepalived+haproxy实现负载均衡

本文链接: https://www.lsjlt.com/news/59709.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑，方便收藏和打印～

下载Word文档
去做题
猜你喜欢
  • Haproxy+Keepalived+MySQL实现读均衡负载
    环境说明：     本系统对数据安全性不高，TPS操作很低，主要是查询的环境。...
    99+
    2024-04-02
  • 怎么用MySQL+Keepalived+haproxy实现负载均衡
    本篇内容主要讲解“怎么用MySQL+Keepalived+haproxy实现负载均衡”，感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷，实用性强。下面就让小编来带大家学习“怎么用MySQL+Keepal...
    99+
    2024-04-02
  • mairadb+galera+haproxy+keepalived如何实现mysql负载均衡与高可用
    这篇文章主要介绍了mairadb+galera+haproxy+keepalived如何实现mysql负载均衡与高可用，具有一定借鉴价值，感兴趣的朋友可以参考下，希望大家阅读完这篇文章之后大有收获，下面让小编带着大家一起了解一下。一：服务器...
    99+
    2023-06-04
  • haproxy+mysql集群如何实现负载均衡
    haproxy+mysql集群如何实现负载均衡，相信很多没有经验的人对此束手无策，为此本文总结了问题出现的原因和解决方法，通过这篇文章希望你能解决这个问题。HAProxy是 七层代理 ，在使甠HAProxy后，在MySQL上 看不到Apps...
    99+
    2023-06-06
  • 如何进行haproxy+keepalived负载均衡主从热备功能
    本篇文章为大家展示了如何进行haproxy+keepalived负载均衡主从热备功能，内容简明扼要并且容易理解，绝对能使你眼前一亮，通过这篇文章的详细介绍希望你能有所收获。VIP: 192.168.1.100 Master: 192.168...
    99+
    2023-06-10
  • mysql中怎么实现负载均衡
    这篇文章给大家介绍mysql中怎么实现负载均衡，内容非常详细，感兴趣的小伙伴们可以参考借鉴，希望对大家能有所帮助。1.环境： mysql 5ubuntu10.04 x86_64mdb1 ...
    99+
    2024-04-02
  • Linux中如何配置HAProxy实现Web负载均衡
    这篇文章主要介绍Linux中如何配置HAProxy实现Web负载均衡，文中介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们一定要看完！HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件...
    99+
    2023-06-27
  • springcloud负载均衡怎么实现
    Spring Cloud提供了多种方式来实现负载均衡，常用的有以下几种方式：1. Ribbon：Ribbon是Spring Clou...
    99+
    2023-09-02
    springcloud 负载均衡
  • php负载均衡怎么实现
    在PHP中实现负载均衡的方式有多种，以下是其中几种常见的方法：1. 使用负载均衡器：负载均衡器是一个专门的服务器，它将请求分发给多个...
    99+
    2023-08-15
    php
  • mac负载均衡怎么实现
    在mac上实现负载均衡可以通过以下几种方式：1. 使用NAT（Network Address Translation）路由器：将多个...
    99+
    2023-09-01
    负载均衡
  • HAProxy+mongos搭建高可用负载均衡mongodb
     在生产环境中，搭建的mongodb分片，提供了三个mongos接口。但mongodb中没有failover机制，官方建议是将mongos和应用服务器部署在一起，多个应用服务器就要部署多个mong...
    99+
    2024-04-02
  • dubbo负载均衡怎么实现
    Dubbo负载均衡可以通过以下方式实现：1. 随机负载均衡(Random Load Balance)：每次从可用的服务提供者中随机选...
    99+
    2023-10-20
    dubbo
  • CDN怎么实现负载均衡
    CDN（内容分发网络）可以通过多种方式实现负载均衡，其中一些常见的方法包括： DNS轮询：CDN服务提供商可以利用DNS轮询来分...
    99+
    2024-04-24
    CDN
  • nginx怎么实现负载均衡
    要实现负载均衡，可以通过Nginx的反向代理和负载均衡模块来完成。以下是一种常见的配置方法：1. 安装Nginx：首先需要安装Ngi...
    99+
    2023-09-02
    nginx 负载均衡
  • cdn负载均衡怎么实现
    cdn负载均衡的实现过程：采用专业负载均衡设备，当用户访问yisu.com时,首先要进行DNS解析,查出yisu.comd的IP地址，然后用户与该IP地址建立TCP连接访问网站内容，DNS流量分配方式工作在DNS解析过程中，通过在域yisu...
    99+
    2024-04-02
  • dubbo怎么实现负载均衡
    Dubbo实现负载均衡主要有以下几种方式： 默认的负载均衡策略：Dubbo内置了一些默认的负载均衡策略，例如随机、轮询、一致性哈...
    99+
    2024-04-03
    dubbo
  • Teradata怎么实现负载均衡
    在Teradata中，负载均衡可以通过以下几种方式实现： 使用Teradata负载模块（TASM）：TASM是Teradata的...
    99+
    2024-04-09
    Teradata
  • socket怎么实现负载均衡
    Socket负载均衡是通过将网络流量分发到多个服务器来实现的。以下是一种基于Socket的负载均衡实现方法：1. 设置一个负载均衡器...
    99+
    2023-09-07
    负载均衡 socket
  • nacos怎么实现负载均衡
    Nacos 可以通过以下几种方式实现负载均衡：1. 服务注册与发现：Nacos 可以作为服务注册中心，将服务实例注册到 Nacos ...
    99+
    2023-08-26
    nacos
  • springcloud怎么实现负载均衡
    Spring Cloud中实现负载均衡，可以使用Ribbon和Feign两种方式。1. Ribbon负载均衡：Ribbon是一个客户...
    99+
    2023-08-26
    springcloud
软考高级职称资格查询
iis服务器助手广告
软考职称历年真题下载
软考职称资料下载
热门wiki
近期文章
推荐阅读
热门问答
热门标签
编程网，编程工程师的家园，是目前国内优秀的开源技术社区之一，形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容，为IT开发者提供了一个发现、使用、并交流开源技术的平台。

  • 官方手机版

  • 微信公众号

  • 商务合作