spark的jdbc接口,类似于hiveserver2

https://spark.apache.org/docs/2.4.0/sql-distributed-sql-engine.html#running-the-thrift-jdbcodbc-server

Spark SQL可以作为一个分布式查询引擎,通过其JDBC/ODBC或命令行接口进行操作。通过JDBC/ODBC接口,用户可以使用常见的数据库工具或BI工具来连接和查询Spark SQL,这使得Spark SQL可以与现有的数据分析工具和报表工具集成,为用户提供了更加灵活和便捷的数据分析和查询方式。

这里实现的Thrift JDBC/ODBC服务器对应于Hive 1.2.1中的HiveServer2。您可以使用Spark或Hive 1.2.1附带的beeline脚本测试JDBC服务器。

这个脚本接受所有bin/spark-submit命令行选项,还可以使用–hiveconf选项来指定Hive属性。您可以运行./sbin/start-thriftserver.sh --help来获取所有可用选项的完整列表。默认情况下,服务器监听localhost:10000。您可以通过环境变量来覆盖这种行为,例如:

Thrift 接口的缺点

https://baijiahao.baidu.com/s?id=1695268888248206405&wfr=spider&for=pc

相关推荐

  1. sparkjdbc接口,类似hiveserver2

    2024-01-20 07:04:05       32 阅读
  2. HiveServer2

    2024-01-20 07:04:05       37 阅读
  3. 启动HiveServer2失败

    2024-01-20 07:04:05       12 阅读
  4. Spark SQL数据源 - JDBC

    2024-01-20 07:04:05       8 阅读
  5. 在vim中映射类似Windows编辑器快捷键

    2024-01-20 07:04:05       37 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-01-20 07:04:05       16 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-01-20 07:04:05       16 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-01-20 07:04:05       15 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-01-20 07:04:05       18 阅读

热门阅读

  1. JVM介绍

    JVM介绍

    2024-01-20 07:04:05      28 阅读
  2. 【LeetCode】哈希表精选5题

    2024-01-20 07:04:05       39 阅读
  3. 1.19 力扣中等图论

    2024-01-20 07:04:05       35 阅读
  4. JVM的即时编译(JIT)优化原理:加速程序的执行

    2024-01-20 07:04:05       28 阅读
  5. 网络 - 网速很慢一定是网不好引起的吗?

    2024-01-20 07:04:05       33 阅读
  6. UDP协议

    UDP协议

    2024-01-20 07:04:05      32 阅读
  7. MySQL Interview Speedrun

    2024-01-20 07:04:05       29 阅读
  8. Linux系统安装ffmpeg & 升级ffmpeg

    2024-01-20 07:04:05       40 阅读