当前位置： 移动技术网 > IT编程>开发语言>PHP > 分布式存储系统设计（2）—— 数据分片

分布式存储系统设计（2）—— 数据分片

2019年04月23日  | 移动技术网IT编程  | 我要评论

阅读这篇博客前首先你需要知道什么是分布式存储以及分布式存储中的数据分片存储的方式有哪些？

分布式存储系统设计（2）—— 数据分片

阅读玩这篇文章后你会知道分布式存储的最优方案是使用 一致性hash算法实现，至于什么是一致性hash算法可以看这里

好啦，如果你能看到这里的话说明你已经知道什么是 一致性hash算法 并且知道了它是用来做什么的啦！下面看下如果使用php代码实现hash一致性算法吧

<?php
/**
 * 一致性hash分布式算法
 * @param $key
 * @return int
 * 实现步骤
 * 1.先将0~ 是32位最大带符号整数（0x7fffffff） 想象成一个闭环
 * 2.将服务器列表通过hash算法分布在 圆环之中
 * 3.将key值也分布在圆环之中
 * 4.通过_issorted判断服务器是否需要进行倒序排序 排序后遍历服务器 找到最近的服务器 返回
 * hash算法是不保证平衡的 为了尽量保证平衡性 我们应该加入虚拟节点数 将一个服务器节点虚拟化成为多个 较大程度上保证了平衡性
 */
class flexihash{
    private $_serverlist = array();
    private $_issorted = false;
    private $_virtual_node_num = 20;//虚拟节点数 服务器越少 增加的虚拟节点数应该越多
    //通过hash算法返回一个整数值
    protected function myhash($key){
        $md5 = substr(md5($key),0,8);
        $seed = 31; //种子值
        $hash=0;
        for($i=0;$i<8;$i++){
            $hash = $hash*$seed+ord($md5{$i}); //ord 返回ascii值
            $i++;
        }
        return $hash&0x7fffffff; //0x7fffffff表示最大值
    }
    //添加服务器
    function addserver($server){
        $hash =$this->myhash($server. '#1');
        if(!isset($this->_serverlist[$hash])) {
            for ($i = 1; $i <= $this->_virtual_node_num; $i++) {
                $hash = $this->myhash($server . '#' . $i);
                $this->_serverlist[$hash] = $server;
            }
        }
        $this->_issorted = false;
        return true;
    }
    //删除服务器
    function removeserver($server){
        for ($i = 1; $i <= $this->_virtual_node_num; $i++) {
            $hash = $this->myhash($server . '#' . $i);
            unset($this->_serverlist[$hash]);
        }
        $this->_issorted = false;
        return true;
    }
    //获取服务器
    function lookup($key){
        $hash =$this->myhash($key);
        if(!$this->_issorted){
            krsort($this->_serverlist,sort_numeric);
            $this->_issorted = true;
        }
        foreach($this->_serverlist as $pos=>$server){
            if($hash >= $pos) return $server;
        }
        return end($this->_serverlist);
    }
    public function getserverlist(){
        krsort($this->_serverlist,sort_numeric);
        return $this->_serverlist;
    }
}
//demo test
$hserver = new flexihash();
//添加服务器
$hserver->addserver('192.168.1.1');
$hserver->addserver('192.168.1.2');
$hserver->addserver('192.168.1.3');
$hserver->addserver('192.168.1.4');
$hserver->addserver('192.168.1.5');
$key1='key1111';
$key2='key2222';
$key2='key3333';
$key2='key4444';
$key2='key5555';
$key2='key6666';
echo "save key1 in server: ".$hserver->lookup($key1).php_eol;
echo "save key2 in server: ".$hserver->lookup($key2).php_eol;
echo "save key1 in server: ".$hserver->lookup($key3).php_eol;
echo "save key2 in server: ".$hserver->lookup($key4).php_eol;
echo "save key1 in server: ".$hserver->lookup($key5).php_eol;
echo "save key2 in server: ".$hserver->lookup($key6).php_eol;
echo "================================================".php_eol;
//移除服务器 key值将自动转义到下一台服务器
$hserver->removeserver('192.168.1.4');
echo "save key1 in server: ".$hserver->lookup($key1).php_eol;
echo "save key2 in server: ".$hserver->lookup($key2).php_eol;
echo "save key1 in server: ".$hserver->lookup($key3).php_eol;
echo "save key2 in server: ".$hserver->lookup($key4).php_eol;
echo "save key1 in server: ".$hserver->lookup($key5).php_eol;
echo "save key2 in server: ".$hserver->lookup($key6).php_eol;
echo "================================================".php_eol;
//恢复故障服务器 key值将恢复原来服务器
$hserver->addserver('192.168.1.4');
echo "save key1 in server: ".$hserver->lookup($key1).php_eol;
echo "save key2 in server: ".$hserver->lookup($key2).php_eol;
echo "save key1 in server: ".$hserver->lookup($key3).php_eol;
echo "save key2 in server: ".$hserver->lookup($key4).php_eol;
echo "save key1 in server: ".$hserver->lookup($key5).php_eol;
echo "save key2 in server: ".$hserver->lookup($key6).php_eol;

 

您可能感兴趣的文章:

如对本文有疑问， 点击进行留言回复！！

相关文章:

验证码：
最近更新的文章
大家感兴趣的文章
移动技术网