20220315

starrocks連接hadoop源數據位置

colocate join 執行成功

20220314

集群是HA的情況下需要填

ui監控：域名：8030

聚合模型
rollup表索引，稀疏索引

數據模型
明細模型相當于數據的ods，dwd

冷熱數據
冷數據不會再被更改，不會被加載進內存

寬表都是些聚合指標不是明細數據，列可能很多，但是行很少

主鍵模型費內存，全部加載到內存

CREATE TABLE `tb_onekey_goods_info_manual_match_test` (`id` bigint(20) NOT NULL COMMENT "業務主鍵 自增id",`goods_id` varchar(200) NULL COMMENT "商品id",`hz_goods_id` varchar(200) NULL COMMENT "合縱商品id",`remarks_status` int(11) NULL COMMENT "對碼方法,0:算法規則"
) ENGINE=OLAP 
PRIMARY KEY(`id`)
COMMENT "手動對碼結果-商品信息表(商品粒度)"
DISTRIBUTED BY HASH(`id`) BUCKETS 4 
PROPERTIES (
"replication_num" = "1",
"in_memory" = "false",
"storage_format" = "DEFAULT"
);創建非外部表

import pymysqlself.config_starrocks_onekey = {"host": "192.168.1.112","port": 9030,"user": "doris","password": "hezong2022","database": "onekey_bi","charset": "utf8",}
self.conn = pymysql.connect(**self.config_starrocks_onekey)

starrock如果是建立在mysql的基礎之上的話,大部分關于mysql的操作都可以直接使用
可以直接使用pymysql,好像沒有自增功能？沒有replace into？

starrocks有按主鍵模型的（id進行更新,覆蓋）

https://mp.weixin.qq.com/s/C7UzjdAQL9PTNXeSsVRjQA
基于StarRocks的極速實時數據分析實踐

總結

以上是生活随笔為你收集整理的starrocks问题小结的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。