Организация мульти-мастер репликации двух memcached-серверов |
[исправить] |
Для организации автоматической репликации данных между двумя серверами
memcached (http://memcached.org/) можно использовать набор патчей
http://repcached.lab.klab.org/ . Система поддерживает мульти-мастер режим и
реплицирует данные в асинхронном режиме, поддерживаются все команды memcached
(set, add, delete, incr/decr, flush_all, cas).
Например, используя репликацию удобно организовать синхронизированное хранение
в memcached номеров пользовательских сессий, при раздельном обслуживании частей
сайта несколькими серверами.
Ниже представлен пример настройки двух реплицированных memcached-серверов в Debian/Ubuntu.
Для работы memcached в PHP подключаем соответствующий модуль и указываем
хранить идентификаторы сессий через него:
extension=memcache.so
session.save_handler = memcache
session.save_path = "tcp://192.168.168.61:11211?persistent=1,tcp://192.168.168.62:11211?persistent=1"
При такой конфигурации идентификаторы сессий всегда будут сохраняться сразу на
двух узлах memcached. Но у такой схемы есть проблемы: если один узел выйдет из
строя или будет перезагружен, все ранее сохраненные номера на этом узле сессий
будут потеряны.
Автоматизировать синхронизацию данных между несколькими memcached-серверами
можно при помощи repcached. При этом репликация производится в прозрачном
режиме, пользовательские приложения обращаются только к локальному memcached, а
всю работу по репликации выполняет repcached, делая это в асинхронном режиме.
1. Копируем исходные тексты repcached c http://repcached.lab.klab.org/ ,
дополнительно установив пакет libevent-dev, который понадобиться для сборки:
# tar xvf memcached-1.2.8-repcached-2.2.tar
# cd memcached-1.2.8-repcached-2.2/
# apt-get install libevent-dev checkinstall
Компилируем и устанавливаем в /usr/local/bin/memcached:
# ./configure --enable-replication
# make
Устанавливаем через создание пакета вместо make install
# checkinstall
Формируем опции для запуска, создаем /etc/default/memcachedrep:
DAEMON_ARGS="-m 64 -p 11211 -u root -P /var/run/memcachedrep.pid -d -x 192.168.168.2 -X 11212"
где 192.168.168.2 - адрес второго сервера, куда следует реплицировать данные,
11212 - номер порта, который будет использоваться для репликации данных. На
втором сервере по аналогии прописываем адрес первого сервера.
Создаем скрипт для запуска /etc/init.d/memcachedrep:
#! /bin/sh
### BEGIN INIT INFO
# Provides: memcached
# Required-Start: $syslog
# Required-Stop: $syslog
# Should-Start: $local_fs
# Should-Stop: $local_fs
# Default-Start: 2 3 4 5
# Default-Stop: 0 1 6
# Short-Description: memcached - Memory caching daemon replicated
# Description: memcached - Memory caching daemon replicated
### END INIT INFO
# Author: Marcus Spiegel <marcus.spiegel@gmail.com>
PATH=/sbin:/usr/sbin:/bin:/usr/bin
DESC="memcachedrep"
NAME=memcached
DAEMON=/usr/local/bin/$NAME
DAEMON_ARGS="--options args"
PIDFILE=/var/run/memcachedrep.pid
SCRIPTNAME=/etc/init.d/$DESC
VERBOSE="yes"
# Exit if the package is not installed
[ -x "$DAEMON" ] || exit 0
# Read configuration variable file if it is present
[ -r /etc/default/$DESC ] && . /etc/default/$DESC
# Load the VERBOSE setting and other rcS variables
. /lib/init/vars.sh
# Define LSB log_* functions.
# Depend on lsb-base (>= 3.0-6) to ensure that this file is present.
. /lib/lsb/init-functions
#
# Function that starts the daemon/service
#
do_start()
{
start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON --test > /dev/null \
|| return 1
start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON -- \
$DAEMON_ARGS \
|| return 2
}
#
# Function that stops the daemon/service
#
do_stop()
{
start-stop-daemon --stop --quiet --retry=TERM/30/KILL/5 --pidfile $PIDFILE --name $NAME
RETVAL="$?"
[ "$RETVAL" = 2 ] && return 2
start-stop-daemon --stop --quiet --oknodo --retry=0/30/KILL/5 --exec $DAEMON
[ "$?" = 2 ] && return 2
# Many daemons don't delete their pidfiles when they exit.
rm -f $PIDFILE
return "$RETVAL"
}
#
# Function that sends a SIGHUP to the daemon/service
#
do_reload() {
start-stop-daemon --stop --signal 1 --quiet --pidfile $PIDFILE --name $NAME
return 0
}
case "$1" in
start)
[ "$VERBOSE" != no ] && log_daemon_msg "Starting $DESC" "$NAME"
do_start
case "$?" in
0|1) [ "$VERBOSE" != no ] && log_end_msg 0 ;;
2) [ "$VERBOSE" != no ] && log_end_msg 1 ;;
esac
;;
stop)
[ "$VERBOSE" != no ] && log_daemon_msg "Stopping $DESC" "$NAME"
do_stop
case "$?" in
0|1) [ "$VERBOSE" != no ] && log_end_msg 0 ;;
2) [ "$VERBOSE" != no ] && log_end_msg 1 ;;
esac
;;
restart|force-reload)
log_daemon_msg "Restarting $DESC" "$NAME"
do_stop
case "$?" in
0|1)
do_start
case "$?" in
0) log_end_msg 0 ;;
1) log_end_msg 1 ;; # Old process is still running
*) log_end_msg 1 ;; # Failed to start
esac
;;
*)
# Failed to stop
log_end_msg 1
;;
esac
;;
*)
#echo "Usage: $SCRIPTNAME {start|stop|restart|reload|force-reload}" >&2
echo "Usage: $SCRIPTNAME {start|stop|restart|force-reload}" >&2
exit 3
;;
esac
exit 0
Тестируем:
На первом узле помещаем ключ в хранилище:
$ telnet 127.0.0.1 11211
set foo 0 0 3
bar
STORED
На втором узле убеждаемся, что ключи реплицировались успешно:
telnet 127.0.0.1 11211
get foo
VALUE foo 0 3
bar
END
Далее перезапускаем один из memcached-серверов и по аналогии проверяем,
восстановились ли на нем данные.
|
|
|
|
Раздел: Корень / Программисту и web-разработчику / SQL и базы данных / PostgreSQL специфика / Оптимизация и администрирование PostgreSQL |