The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

Организация мульти-мастер репликации двух memcached-серверов
Для организации автоматической репликации данных между двумя серверами
memcached (http://memcached.org/) можно использовать набор патчей
http://repcached.lab.klab.org/ . Система поддерживает мульти-мастер режим и
реплицирует данные в асинхронном режиме, поддерживаются все команды memcached
(set, add, delete, incr/decr, flush_all, cas).

Например, используя репликацию удобно организовать синхронизированное хранение
в memcached номеров пользовательских сессий, при раздельном обслуживании частей
сайта несколькими серверами.

Ниже представлен пример настройки двух реплицированных memcached-серверов в Debian/Ubuntu.

Для работы memcached в PHP подключаем соответствующий модуль и указываем
хранить идентификаторы сессий через него:

   extension=memcache.so
   session.save_handler = memcache
   session.save_path = "tcp://192.168.168.61:11211?persistent=1,tcp://192.168.168.62:11211?persistent=1"

При такой конфигурации идентификаторы сессий всегда будут сохраняться сразу на
двух узлах memcached. Но у такой схемы есть проблемы: если один узел выйдет из
строя или будет перезагружен, все ранее сохраненные номера на этом узле сессий
будут потеряны.

Автоматизировать синхронизацию данных между несколькими memcached-серверами
можно при помощи repcached. При этом репликация производится в прозрачном
режиме, пользовательские приложения обращаются только к локальному memcached, а
всю работу по репликации выполняет repcached, делая это в асинхронном режиме.

1. Копируем исходные тексты repcached c http://repcached.lab.klab.org/ ,
дополнительно установив пакет libevent-dev, который понадобиться для сборки:

   # tar xvf memcached-1.2.8-repcached-2.2.tar
   # cd memcached-1.2.8-repcached-2.2/
   # apt-get install libevent-dev checkinstall

Компилируем и устанавливаем в /usr/local/bin/memcached:

   # ./configure --enable-replication
   # make

Устанавливаем через создание пакета вместо make install
   # checkinstall


Формируем опции для запуска, создаем /etc/default/memcachedrep:

    DAEMON_ARGS="-m 64 -p 11211 -u root -P /var/run/memcachedrep.pid -d -x 192.168.168.2 -X 11212"

где 192.168.168.2 - адрес второго сервера, куда следует реплицировать данные,
11212 - номер порта, который будет использоваться для репликации данных.  На
втором сервере по аналогии прописываем адрес первого сервера.

Создаем скрипт для запуска /etc/init.d/memcachedrep:


   #! /bin/sh
   ### BEGIN INIT INFO
   # Provides:             memcached
   # Required-Start:       $syslog
   # Required-Stop:        $syslog
   # Should-Start:         $local_fs
   # Should-Stop:          $local_fs
   # Default-Start:        2 3 4 5
   # Default-Stop:         0 1 6
   # Short-Description:    memcached - Memory caching daemon    replicated
   # Description:          memcached - Memory caching daemon  replicated
   ### END INIT INFO
   # Author: Marcus Spiegel <marcus.spiegel@gmail.com>

   PATH=/sbin:/usr/sbin:/bin:/usr/bin
   DESC="memcachedrep"
   NAME=memcached
   DAEMON=/usr/local/bin/$NAME
   DAEMON_ARGS="--options args"
   PIDFILE=/var/run/memcachedrep.pid
   SCRIPTNAME=/etc/init.d/$DESC
   VERBOSE="yes"
   # Exit if the package is not installed
   [ -x "$DAEMON" ] || exit 0
   # Read configuration variable file if it is present
   [ -r /etc/default/$DESC ] && . /etc/default/$DESC
   # Load the VERBOSE setting and other rcS variables
   . /lib/init/vars.sh
   # Define LSB log_* functions.
   # Depend on lsb-base (>= 3.0-6) to ensure that this file is   present.
   . /lib/lsb/init-functions
   #
   # Function that starts the daemon/service
   #
   do_start()
   {
	start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON --test > /dev/null \
		|| return 1
	start-stop-daemon --start --quiet --pidfile $PIDFILE --exec $DAEMON -- \
		$DAEMON_ARGS \
		|| return 2
   }
   #
   # Function that stops the daemon/service
   #
   do_stop()
   {
      start-stop-daemon --stop --quiet --retry=TERM/30/KILL/5 --pidfile $PIDFILE --name $NAME
      RETVAL="$?"
      [ "$RETVAL" = 2 ] && return 2
	start-stop-daemon --stop --quiet --oknodo --retry=0/30/KILL/5 --exec $DAEMON
	[ "$?" = 2 ] && return 2
	# Many daemons don't delete their pidfiles when they exit.
	rm -f $PIDFILE
	return "$RETVAL"
   }
   #
   # Function that sends a SIGHUP to the daemon/service
   #
   do_reload() {
	start-stop-daemon --stop --signal 1 --quiet --pidfile $PIDFILE --name $NAME
	return 0
   }
   case "$1" in
     start)
	[ "$VERBOSE" != no ] && log_daemon_msg "Starting $DESC" "$NAME"
	do_start
	case "$?" in
		0|1) [ "$VERBOSE" != no ] && log_end_msg 0 ;;
		2) [ "$VERBOSE" != no ] && log_end_msg 1 ;;
	esac
	;;
     stop)
	[ "$VERBOSE" != no ] && log_daemon_msg "Stopping $DESC" "$NAME"
	do_stop
	case "$?" in
		0|1) [ "$VERBOSE" != no ] && log_end_msg 0 ;;
		2) [ "$VERBOSE" != no ] && log_end_msg 1 ;;
	esac
	;;
     restart|force-reload)
	log_daemon_msg "Restarting $DESC" "$NAME"
	do_stop
	case "$?" in
	  0|1)
		do_start
		case "$?" in
			0) log_end_msg 0 ;;
			1) log_end_msg 1 ;; # Old process is still running
			*) log_end_msg 1 ;; # Failed to start
		esac
		;;
	  *)
	  	# Failed to stop
		log_end_msg 1
		;;
	esac
	;;
     *)
	#echo "Usage: $SCRIPTNAME {start|stop|restart|reload|force-reload}" >&2
	echo "Usage: $SCRIPTNAME {start|stop|restart|force-reload}" >&2
	exit 3
	;;
   esac
   exit 0

Тестируем:

На первом узле помещаем ключ в хранилище:

   $ telnet 127.0.0.1 11211

   set foo 0 0 3
   bar
   STORED

На втором узле убеждаемся, что ключи реплицировались успешно:

   telnet 127.0.0.1 11211

   get foo
   VALUE foo 0 3
   bar
   END

Далее перезапускаем один из memcached-серверов и по аналогии проверяем,
восстановились ли на нем данные.
 
25.05.2010 , Источник: http://www.howtoforge.com/how-to-in...
Ключи: replication, memcached, cluster / Лицензия: CC-BY
Раздел:    Корень / Программисту и web-разработчику / SQL и базы данных / PostgreSQL специфика / Оптимизация и администрирование PostgreSQL

Обсуждение [ RSS ]
  • 1, Юра (??), 23:01, 27/05/2010 [ответить]  
  • +/
    Спасибо за перевод, полезно.
     

     Добавить комментарий
    Имя:
    E-Mail:
    Заголовок:
    Текст:




    Партнёры:
    PostgresPro
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2024 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру