dolphindb 分区表
DolphinDB 分区表是将数据按指定列分区列分割存储于不同分区内存或磁盘/分布式的大表结构核心目的是通过‌分区裁剪‌提升查询效率、支持海量数据管理及并行计算 。‌‌核心概念与分类‌定义‌逻辑上是一张表物理上按分区列的值分布到多个子表分区中查询时若条件包含分区列引擎仅扫描相关分区。‌存储形态‌分为‌内存分区表‌适合单节点大规模中间计算和‌分布式分区表‌存储在 DFS支持集群水平扩展与 PB 级数据。‌主要分区类型‌‌RANGE范围分区‌按数值或时间区间划分最常用支持动态扩区适合时间序列 。‌VALUE值分区‌每个唯一值一个分区适合枚举值少且固定的场景如日期、特定 ID字符串含特殊字符可能报错 。‌HASH哈希分区‌按哈希值均匀分布适合数据量大且需均衡负载但单列查询无法裁剪分区 。‌COMPO复合分区‌多列组合多种策略如时间 RANGE 设备 HASH兼顾裁剪与均衡 。‌LIST列表分区‌基于显式值列表划分灵活性介于 VALUE 和 RANGE 之间 。‌‌创建流程与关键参数‌建库‌使用database()指定路径、分区类型及分区方案向量如日期范围或枚举值。‌建表模板‌定义表结构table()明确字段类型。‌实例化分区表‌调用db.createPartitionedTable(template, tableName, partitionColumns, ...)。‌关键参数‌partitionColumns分区列决定数据分布。sortColumnsTSDB 引擎特有分区内排序列最后一列通常为时间用于加速点查和范围查需避免索引键对应数据过少导致性能下降 。compressMethods压缩算法如 delta, lz4。sortKeyMappingFunction哈希降维函数用于减少 TSDB 索引键数量 。‌‌代码示例分布式 RANGE 分区// 1. 创建按日期范围分区的分布式数据库 db database(dfs://demo_db, RANGE, 2024.01.01..2024.12.31); // 2. 定义表结构模板 schema table(1:0, timestampsymbolprice, [TIMESTAMP, SYMBOL, DOUBLE]); // 3. 创建分区表按 timestamp 分区无排序列示例 pt db.createPartitionedTable(schema, trades, timestamp); // 4. 插入数据 data table(2024.01.01T00:00:00..2024.01.02T00:00:00 as timestamp, rand(ABC, 100) as symbol, rand(10.0, 100) as price); pt.append!(data); // 5. 加载查询自动裁剪 2024.01.01 分区 t loadTable(dfs://demo_db, trades); select * from t where timestamp 2024.01.01; ‌‌:ml-citation{ref3,5 appearanceaggregated datacitationList}

相关新闻

AI编程中间层实践:cc-switch与sdcb/chats统一团队开发环境

AI编程中间层实践:cc-switch与sdcb/chats统一团队开发环境

1. 项目背景与核心价值去年在重构团队开发环境时,我们遇到一个典型痛点:不同成员使用的AI编程工具链五花八门,有人用VS Code插件,有人依赖本地部署的模型,还有人习惯网页版工具。这种碎片化导致代码风格差异大、知识传…

2026/7/25 5:22:29 阅读更多 →
dolphindb 内存表

dolphindb 内存表

在 DolphinDB 中,内存表是一种非常灵活且高效的数据结构,适用于快速数据处理和实时分析。内存表的数据存储在内存中,这使得数据的读写速度非常快,但同时也意味着数据在服务器重启后会丢失。如果你需要持久化数据,可以使…

2026/7/25 5:22:29 阅读更多 →
dolphindb 分布式表

dolphindb 分布式表

DolphinDB 分布式表是存储在分布式文件系统(DFS)中、数据按分区策略分散在多节点磁盘上的持久化表,支持 PB 级海量数据存储与自动并行计算 。‌‌核心定义与特点‌存储机制‌:数据落盘持久化,分布在不同数据节点的磁盘…

2026/7/25 5:22:29 阅读更多 →

最新新闻

C++与OpenCV实战:从屏幕捕获到目标追踪的自动化脚本开发

C++与OpenCV实战:从屏幕捕获到目标追踪的自动化脚本开发

1. 项目概述与核心思路最近在捣鼓一些计算机视觉的小玩意儿,发现用C和OpenCV来实现一个简单的“自瞄”逻辑,是个挺有意思的实战项目。这玩意儿听起来有点游戏外挂的嫌疑,但咱们这里纯粹是技术探讨,目的是学习OpenCV在实时图像处理…

2026/7/25 5:36:34 阅读更多 →
2024三大多模态视觉模型解析与应用实践

2024三大多模态视觉模型解析与应用实践

1. 多模态视觉技术演进与2024三大标杆模型解析过去一年里,计算机视觉领域最激动人心的突破莫过于多模态模型的爆发式发展。作为长期跟踪视觉算法落地的从业者,我观察到2024年Qwen2-VL、SAM 2和Molmo这三个模型正在重新定义产业标准。不同于传统单任务模型…

2026/7/25 5:36:34 阅读更多 →
Unity开发框架设计:从重复造轮子到高效复用的架构实践

Unity开发框架设计:从重复造轮子到高效复用的架构实践

1. 项目概述:为什么Unity项目需要一个开发框架?如果你在Unity开发领域摸爬滚打超过两个项目,大概率会经历这样的场景:新项目启动,大家摩拳擦掌,然后发现第一个需求是实现一个弹窗管理器。于是A同学花了两天…

2026/7/25 5:36:34 阅读更多 →
C++面试核心:从八股文到工程能力的深度解析与实战指南

C++面试核心:从八股文到工程能力的深度解析与实战指南

1. 项目概述:一份C面试“求生”指南的诞生如果你正在准备C相关的技术面试,无论是校招还是社招,大概率已经对“八股文”这个词又爱又恨了。爱的是,它确实能帮你快速覆盖高频考点,建立知识框架;恨的是&#x…

2026/7/25 5:36:34 阅读更多 →
Umi-OCR免费OCR工具:3步完成图片文字提取与智能排版优化

Umi-OCR免费OCR工具:3步完成图片文字提取与智能排版优化

Umi-OCR免费OCR工具:3步完成图片文字提取与智能排版优化 【免费下载链接】Umi-OCR OCR software, free and offline. 开源、免费的离线OCR软件。支持截屏/批量导入图片,PDF文档识别,排除水印/页眉页脚,扫描/生成二维码。内置多国语…

2026/7/25 5:36:34 阅读更多 →
基于本地LLM的智能浏览器扩展:从云端依赖到数据自治的实践

基于本地LLM的智能浏览器扩展:从云端依赖到数据自治的实践

那天下午,我正习惯性地打开浏览器,准备用 Orbit 快速整理几个标签页,却看到一条通知——Mozilla 宣布停止支持 Orbit。那一刻的感觉,就像你用了多年的瑞士军刀突然被告知停产。Orbit 不只是个标签管理器,它是我工作流里…

2026/7/25 5:35:34 阅读更多 →

日新闻

突破文档下载限制:kill-doc让你看到的都能保存

突破文档下载限制:kill-doc让你看到的都能保存

突破文档下载限制:kill-doc让你看到的都能保存 【免费下载链接】kill-doc 看到经常有小伙伴们需要下载一些免费文档,但是相关网站浏览体验不好各种广告,各种登录验证,需要很多步骤才能下载文档,该脚本就是为了解决您的…

2026/7/25 0:00:35 阅读更多 →
C++ string类模拟实现:从深拷贝到内存管理的完整指南

C++ string类模拟实现:从深拷贝到内存管理的完整指南

1. 项目概述:为什么我们要“手撕”string类?在C的学习道路上,尤其是从C语言过渡到C的“初阶”阶段,string类绝对是一个绕不开的核心。标准库里的std::string用起来太方便了,、find、substr,几个操作符和函数…

2026/7/25 0:00:35 阅读更多 →
三角洲寻宝鼠工具:高效文件搜索与资源管理实战指南

三角洲寻宝鼠工具:高效文件搜索与资源管理实战指南

1. 先搞清楚“三角洲寻宝鼠”到底是什么工具从名称来看,“三角洲寻宝鼠”更像是一个资源查找或文件检索类工具,而不是游戏或娱乐软件。这类工具的核心价值在于帮助用户快速定位特定资源,比如文档、图片、压缩包或特定格式的文件。如果你经常需…

2026/7/25 0:00:35 阅读更多 →

周新闻

Go语言静态资源打包方案对比与实践指南

Go语言静态资源打包方案对比与实践指南

1. 项目背景与核心需求在Go语言开发中,我们经常需要处理静态资源文件的打包问题。无论是Web应用的模板文件、前端资源,还是配置文件、证书等,都需要随程序一起分发。传统做法是将这些文件与编译后的二进制文件放在同一目录下,但这…

2026/7/25 5:08:22 阅读更多 →
Go语言实现高性能LDAP认证服务的架构与实践

Go语言实现高性能LDAP认证服务的架构与实践

1. 项目背景与核心价值LDAP(轻量级目录访问协议)作为企业级身份认证的黄金标准,已经服务了超过80%的财富500强公司。我在金融科技领域实施统一认证体系时,发现传统Java方案存在启动慢、内存占用高等痛点。而Go语言凭借其协程并发模…

2026/7/25 5:13:53 阅读更多 →
【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

【AI面试官实战指南】:用ChatGPT模拟10类高频技术岗面试,3天提升应答精准度92%

更多请点击: https://intelliparadigm.com 第一章:AI面试官实战指南的核心价值与适用场景 AI面试官并非替代人类HR的“黑箱工具”,而是以可解释、可审计、可迭代的方式,赋能招聘全链路的关键基础设施。其核心价值在于将主观经验沉…

2026/7/24 18:52:18 阅读更多 →

月新闻