问题原因 实例中的虚拟内存被开启且设置的是系统自动管理，而用于物理内存为64 GB，因此在扩容后虚拟内存涨到65 GB。根据系统推荐设置虚拟内存最大是90 GB，如果系统磁盘空间足够，虚拟内存将占用更多的系统盘空间。解决方案 如非必要，请...
MB ✔️ ✔️ 平均值：os.mem_size.hugetlb_usage_2m.avg 最大值：os.mem_size.hugetlb_usage_2m.max 最小值：os.mem_size.hugetlb_usage_2m.min 2M大页使用量(MB)MB ✔️ ✔️ 内存按照进程堆叠 平均值：os.mem_process.backend.avg 最大...
规格 InstanceClass（API使用）规格信息 最大连接数 最大带宽（MB/s）CPU核数 内存（GB）可选存储性能级别与容量（GB）4C-16GB tair.essd.standard.xlarge 4 16 PL1：20~80 60,000 187.5 8C-32GB tair.essd.standard.2xlarge 8 32 PL1：60~...
规格 InstanceClass（API使用）规格信息 最大连接数 最大带宽（MB/s）CPU核数 内存（GB）可选存储性能级别与容量（GB）4C-16GB tair.essd.standard.xlarge 4 16 PL1：20~80 60,000 187.5 8C-32GB tair.essd.standard.2xlarge 8 32 PL1：60~...
索引是dump到内存中还是到磁盘上由on_disk_flush_realtime_index参数控制。注意，该值应max_realtime_memory_use大小。max_realtime_memory_use：实时索引占用的总内存大小，单位MB。实时索引占用的内存大小包括正在构建的实时索引和已经...
索引是dump到内存中还是到磁盘上由on_disk_flush_realtime_index参数控制。注意，该值应max_realtime_memory_use大小。max_realtime_memory_use：实时索引占用的总内存大小，单位MB。实时索引占用的内存大小包括正在构建的实时索引和已经...
memorySize integer 函数的内存规格，单位为 MB，内存大小为 64 MB 的倍数。不同的函数实例类型，内存规格存在差异。512 nasConfig NASConfig NAS 配置。配置此参数后，函数可以访问指定的 NAS 资源。ossMountConfig OSSMountConfig OSS ...
否 Spark（JAR/SQL）CPU：0.3核 内存：4GB 是 MapReduce CPU：0.2核 内存：512MB 是 任务资源配置说明 自定义资源配置CPU可配置区间 0.001CPU～4.0CPU，内存可配置区间 32MB～16GB。若您需自定义任务资源大小，您可以在任务的代码头部添加...
大文件指的是 1 GB 以上大小的文件。mediumFileCount:中文件个数。中文件指的是 128 MB 以上，1 GB 以下大小的文件。smallFileCount:小文件个数。小文件指的是 10 MB 以上，128 MB 以下大小的文件。tinyFileCount:极小文件个数。极小文件指...
大文件指的是 1 GB 以上大小的文件。mediumFileCount:中文件个数。中文件指的是 128 MB 以上，1 GB 以下大小的文件。smallFileCount:小文件个数。小文件指的是 10 MB 以上，128 MB 以下大小的文件。tinyFileCount:极小文件个数。极小文件指...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。123 Unit string 指标单位。“Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 128 ...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。1000 Unit string 指标单位。Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 128 ...
否 Spark（JAR/SQL）CPU：0.3核 内存：4GB 是 MapReduce CPU：0.2核 内存：512MB 是 任务资源配置说明 自定义资源配置CPU可配置区间 0.001CPU～4.0CPU，内存可配置区间 32MB～16GB。若您需自定义任务资源大小，您可以在任务的代码头部添加...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。123 Unit string 指标单位。“”Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 128...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。123 Unit string 指标单位。“Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 128 ...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。1000 Unit string 指标单位。“”Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 ...
大文件指的是 1 GB 以上大小的文件。Name string 指标名称。largeFileCount Value long 指标值。1000 Unit string 指标单位。Description string 指标描述。Number of large files MediumFileCount object 中文件个数。中文件指的是 128 ...
以英伟达GPU V100为例，其最大内存带宽为900 GB/sec，如果当前的内存带宽为450 GB/sec，则内存带宽利用率为50%。DCGM_FI_DEV_ENC_UTIL Gauge%表示编码器利用率。DCGM_FI_DEV_DEC_UTIL Gauge%表示解码器利用率。内存（Memory）指标名称 指标...
图1 单独执行SQL语句时的内存波动 图2 单独执行SQL语句时的CPU波动 从图1和图2可以看出，无论是CPU还是内存，虽然峰值比较高，但从平均值来看，资源并没有被充分利用。使用虚拟内存之后，列存索引可以根据内存的实际使用情况，对并发数量...
设置MaxCompute表访问切分split的数目，可以调节并发数目，默认64MB，当表很大时需要调大，避免过多的split影响性能。该参数在Hologres V1.1及以上版本中生效。set hg_foreign_table_split_size=128;比较宽的列有比较大的scan并行度 若是...
产生原因 外部表的对象文件太多，内存占用过大且未设置分区。解决措施 使用小数据量查询。将对象文件进行分区，以减少内存占用。通过外部表处理OSS数据时，报错Inline data exceeds the maximun allowed size，如何解决？问题现象 处理OSS...
规格 InstanceClass（API 使用）单分片内存（GB）代理模式 最大连接数 直连模式 最大连接数 总带宽（MB/s）单分片带宽（MB/s）QPS参考值 16 GB单节点集群版 redis.sharding.basic.small.default 2 500,000 80,000 768 96 800,000 32 GB单...
透明大页THP（Transparent Huge Pages）是Linux内核中的一个通用特性，它可以自动将小页面（通常为4 KB）合并成大页面（通常为2 MB或更大），可以减少内存访问页表项PTE（Page Table Entries）大小和访问次数，同时减轻了转译后备缓冲器TLB...
透明大页THP（Transparent Huge Pages）是Linux内核中的一个通用特性，它可以自动将小页面（通常为4 KB）合并成大页面（通常为2 MB或更大），可以减少内存访问页表项PTE（Page Table Entries）大小和访问次数，同时减轻了转译后备缓冲器TLB...
例如，有n个文件，作业速率上限最多设置为n MB/s：如果设置n+1 MB/s，还是以n MB/s速度同步。如果设置为n-1 MB/s，则以n-1 MB/s速度同步。关系型数据库设置作业速率上限和切分键后，才能根据作业速率上限将表进行切分。关系型数据库通常只...
说明 并发加大后也需要同步增加任务的内存设置，比例关系可以按照并发每增大4，内存增加1GB。任务并发及内存设置方法如下：对于DataStudio新建的单表到单表ETL实时同步任务，您可以单击右侧的 基本配置 设置任务并发和内存。在DataStudio...
规格 InstanceClass（API 使用）单分片内存（GB）代理模式 最大连接数 直连模式 最大连接数 总带宽（MB/s）单分片带宽（MB/s）QPS参考值 2 GB集群版（2分片）redis.amber.logic.sharding.1g.2db.0rodb.6proxy.multithread 1 480,000 60,000...
指标名称 指标级别 指标来源 指标说明 可用物理内存（MB）Critical WMI（AvailableMBytes）多个进程之间对RAM的争用将不可避免地导致分页，进而导致性能下降。为了保证机器继续运转，需要确保机器有足够的RAM来处理日常的工作负载。持续的...
指标名称 指标级别 指标来源 指标说明 可用物理内存（MB）Critical WMI（AvailableMBytes）多个进程之间对RAM的争用将不可避免地导致分页，进而导致性能下降。为了保证机器继续运转，需要确保机器有足够的RAM来处理日常的工作负载。持续的...
举个例子，低响应要求的场景，热点数据如果是100GB，那么最好要求100GB 在缓存可用（实际上数据读出来解压后，占用内存不止100GB），因此至少需要约320GB内存以上，从而推算计算资源至少需要96CU左右。为什么只有一个任务，Hologres实例CPU...
规格 InstanceClass（API 使用）单分片内存（GB）代理模式 最大连接数 直连模式 最大连接数 总带宽（MB/s）单分片带宽（MB/s）QPS参考值 2 GB集群版（2分片）redis.logic.sharding.1g.2db.0rodb.4proxy.default 1 480,000 20,000 96 48 200...
2W以上 8核32 GB，16核32 GB，16核64 GB，32核64 GB，32核128 GB，或者以上 按照实际请求量选择Core节点的数量，如果是在线型业务，适当选择大内存机型来增加Cache命中率来提高性能。如果有MR/Spark等离线大负载任务要运行或者TPS/QPS非常...
Auto Analyze默认单个Worker限制的内存是4 GB，如果存在超宽的列，采样可能超出内存而导致Analyze失败。可调整 auto_analyze_work_memory_mb 参数改变其大小，但是要注意对系统内存的影响。实例规格越大，Worker数越多，Auto Analyze可用...
使用限制 mapjoin 操作的使用限制如下：mapjoin 在Map阶段会将指定表的数据全部加载在内存中，因此指定的表仅能为小表，且表被加载到内存后占用的总内存不得超过512 MB。由于MaxCompute是压缩存储，因此小表在被加载到内存后，数据大小会...
使用限制 mapjoin 操作的使用限制如下：mapjoin 在Map阶段会将指定表的数据全部加载在内存中，因此指定的表仅能为小表，且表被加载到内存后占用的总内存不得超过512 MB。由于MaxCompute是压缩存储，因此小表在被加载到内存后，数据大小会...
当查询需要发送较大的bitmap字段时，可能会遇到该问题，此时可以通过调大该配置避免该错误。transfer_large_data_by_brpc 默认值：true 类型：Bool 说明：该配置用来控制是否在Tuple或者Block data长度大于1.8 GB时，将protoBuf request...
这个值默认是1000，约消耗4 MB内存，请根据您机器内存大小调整为合适的值。ossfs在读写时会占用磁盘写大量的temp cache，和Nginx差不多，可能会导致磁盘可用空间不足。当ossfs退出后，会自动清理临时文件。使用ossutil替代ossfs，非线上...
规格 InstanceClass（API 使用）单分片内存（GB）代理模式 最大连接数 直连模式 最大连接数 总带宽（MB/s）单分片带宽（MB/s）QPS参考值 2 GB集群版（2分片）redis.amber.logic.sharding.1g.2db.0rodb.6proxy.multithread 1 480,000 60,000...
使用限制 产品系列 节点规格码 CPU和内存 文件系统占用内存 文件个数上限 最大连接数 集群版（独享规格）polar.mysql.x4.medium 2核8 GB 800 MB 1,024,000 6,000 polar.mysql.x4.large 4核16 GB 1,300 MB 2,048,000 8,000 polar.mysql.x4....
说明 例如配额为1 GB的云数据库Redis实例，已使用700 MB内存，内存碎片率为2倍，实际占用系统内存为2 GB，但该实例剩余可用容量仍为300 MB（1 GB减去700 MB）。Redis内存碎片是如何形成的？内存碎片形成有内部原因和外部原因：内部原因：...