Apache name jdk since Version Shiro 11 2.0.0
查询 启动类:org.apache.spark.sql.hive.thriftserver.HiveThriftServer2 服务:ThriftBinaryCLIService 执行SQL:org.apache.spark.sql.hive.thriftserver.Spark
元数据管理, 表关系分析,字段查询 buildwget https://mirrors.ustc.edu.cn/apache/atlas/2.3.0/apache-atlas-2.3.0-sources.tar.gz 编译问题多
相关概念包括ValueVector、Field、Schema、VectorSchemaRoot以及Table 1234567891011<dependency> <groupId>org.apache.arrow</groupId>
About Mermaid | Mermaid 1234567891011graph TD; A-->B; A-->C; B-->D; C-->D; 12345678910111213141516171819202122gra
各个输入按号码尾号分区后关联,在输入数据已知分布均匀的情况可以比hash更有效避免倾斜 123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525
Oceanbase
JDBC连接Maven Repository: com.oceanbase » oceanbase-client (mvnrepository.com) 引入oceanbase-client-1.1.10.jar到spark的jars目录,使用Beeline连接!connnect
sqlite3
usageyum install sqlite 123456789101112sqlite3 test.db.header oncreate table stu(id int, name char, sex char , score int);insert into stu va
dataTable
dim补数时使用历史版本表名增加时间信息 / 增加含时间信息的分区, 通过函数根据时间获取对应的表/分区,默认返回最新版本 以下为表名增加时间信息的示例 1234567891011121314151617181920212223242526def getCha
hadoop3
解压后默认是单机模式; 配置为伪分布模式: 1export JAVA_HOME=/opt/soft/jdk 123456<configuration> <property> <name>fs.defaultFS</na