impala元数据自动刷新

一.操作步骤

进入CM界面 > Hive > 配置 > 搜索 启用数据库中的存储通知(英文界面搜索:Enable Stored Notifications in Database),并且勾选,注意一定要勾选,配置后面的配置不生效。数据库通知的保留时间默认为2天,意味着如果事件通知没有更新超过2天事件将会丢失

二.hive配置参数

hive-site.xml 的 Hive Metastore Server 高级配置代码段(安全阀)

<property> <name>hive.metastore.notifications.add.thrift.objects</name> <value>true</value> </property> <property> <name>hive.metastore.alter.notifications.basic</name> <value>false</value> </propert如果你想在使用Spark和其他应用程序将数据插入现有表和分区时会生成事件,需要在hive-site.xml 的 Hive 服务高级配置代码段(安全阀)以及hive-site.xml 的 Hive 客户端高级配置代码段(安全阀)添加配置 y>

如果你想在使用Spark和其他应用程序将数据插入现有表和分区时会生成事件,需要在hive-site.xml 的 Hive 服务高级配置代码段(安全阀)以及hive-site.xml 的 Hive 客户端高级配置代码段(安全阀)添加配置

hive-site.xml 的 Hive 服务高级配置代码段(安全阀)

hive-site.xml 的 Hive 客户端高级配置代码段(安全阀)

都配置如下参数

<property> <name>hive.metastore.dml.events</name> <value>true</value> </property>

二.impala配置参数

Catalog Server 命令行参数高级配置代码段(安全阀)

--hms_event_polling_interval_s=2

相关推荐

  1. Android笔记:SwipeRefreshLayout 自动刷新

    2024-01-16 20:58:04       50 阅读
  2. Edge 浏览器设置自动刷新

    2024-01-16 20:58:04       51 阅读
  3. Edge浏览器设置自动刷新

    2024-01-16 20:58:04       100 阅读
  4. mongodb-批量刷新数据

    2024-01-16 20:58:04       32 阅读
  5. jsp+ajax自动刷新局部页面

    2024-01-16 20:58:04       54 阅读
  6. Python控制Excel自动刷新页面

    2024-01-16 20:58:04       50 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-01-16 20:58:04       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-01-16 20:58:04       100 阅读
  3. 在Django里面运行非项目文件

    2024-01-16 20:58:04       82 阅读
  4. Python语言-面向对象

    2024-01-16 20:58:04       91 阅读

热门阅读

  1. Vue2:利用watch和localStorage存储数据案例

    2024-01-16 20:58:04       58 阅读
  2. JPA查询PostgreSQL行排序问题

    2024-01-16 20:58:04       49 阅读
  3. Socket-Worker模式

    2024-01-16 20:58:04       62 阅读
  4. Snakemake:初探

    2024-01-16 20:58:04       54 阅读
  5. 融优学堂-艺术史

    2024-01-16 20:58:04       38 阅读
  6. computed和watch和watchEffect 相同和不同

    2024-01-16 20:58:04       59 阅读
  7. 【速成】蓝桥杯嵌入式省一教程

    2024-01-16 20:58:04       59 阅读