Hive整合Zookeeper实现锁的功能

Hive缺少通常在update和insert类型的查询中使用到的对于列，行或者查询级别的锁支持。结合Zookeeper可以实现锁的功能，实现共享锁，独占锁等功能。

配置好Zookeeper集群，参考ZK官网配置，然后启动。

配置hive-site.xml文件：

<!--Hive集成Zookeeper实现锁功能 -->
    <property>
        <name>hive.zookeeper.quorum</name>
        <value>hadoop-senior.shinelon.com,hadoop-senior02.shinelon.com,hadoop-senior03.shinelon.com</value>
    </property>

    <property>
        <name>hive.support.concurrency</name>
        <value>true</value>
    </property>

可以使用 show locks命令来查看当前的所有锁。

查看某一张表的锁信息：show locks table_name extended;

查看某个分区的锁信息：show locks table_name partition() extended;

创建一个显式锁：lock table table_name exclusive;

此时启动另一个hive会话，如果尝试操作该表则会被卡住或者报 cinflicting lock 异常。

对表进行解锁：unlock table table_name;

随机推荐

硅谷互联网公司的开发流程
开发流程包括这么几个阶段: OKR 的设立; 主项目及其子项目的确立; 每个子项目的生命周期; 主项目的生命周期; 收尾、维护、复盘。第一点，OKR 的设立所有项目的起始，都应该从 Ro
RESTful-表述性状态转移风格
REST英文全拼：Representational State Transfer 面向资源编程资源指的就是一类数据产品表->就是产品资源最重要的是如何表示一个资源地址即
稳定性思考
产品功能线 0-1：当系统从无到有的时候，首要考虑的是研发效率，功能快速迭代，满足快速增长的业务需求 1-10 系统已经搭建起来，此时考虑的是系统的稳定性。可用性：1.隔离：区分出核心和非核心功能
Supervisor守护队列发邮件
安装 CentOS： yum -y install supervisor Debien/Ubuntu适用：apt-get install supervisor 配置修改主配置文件：vim /et
安装libsodium，让服务器支持chacha20等加密方式
用chacha20加密方式需要安装libsodium 注意：libsodium从1.0.15开始就废弃了aes-128-ctr yum install wget m2crypto git libsod

技术文档网

Hive整合Zookeeper实现锁的功能

相关文章

随机推荐