DM 供查询结果集缓存策略

时间：2022-07-05 09:51:56

在DM8中有一个查询优化器，当对SQL语句进行优化后数据库才会去执行查询语句。如果查询优化器认为查询语句可以从并行查询中获得较高效率，就会将本地通信操作符插入到查询执行计划中，为并行查询做准备。本地通信操作符是在查询执行计划中提供进程管理、数据重新分发和流控制的运算符。在查询计划执行过程中，数据库会确认当前的系统工作负荷和配置信息，判断是否有足够多的线程允许执行并行查询。确定最佳的线程数后，在查询计划初始化确定的线程上展开并行查询执行。在多个线程上并行执行查询时，查询将一直使用相同的线程数，直到完成。每次从高速缓存中检索查询执行计划时，DM8都重新检查最佳线程数。

OLAP对从OLTP数据库和其他来源聚合而成的大量历史数据应用复杂查询，用于数据挖掘、分析和商业智能项目。在OLAP中，重点是对这些复杂查询的响应时间。每个查询都涉及从多行聚合的一列或多列数据。示例包括同比财务业绩或营销线索生成趋势。OLAP数据库和数据仓库使分析师和决策者能够使用自定义报告工具将数据转化为信息。OLAP中的查询失败不会中断或延迟客户的事务处理，但会延迟或影响商业智能洞察的准确性。

一般来说，慢的查询都意味着比较吃资源的（CPU、磁盘I/O）。举个例子，假如某个查询功能需要3秒时间，串行查询的时候并没什么问题，我们继续假设这功能每秒大概QPS为100，那么在第一次查询结果返回之前，接下来的所有查询都应该穿透到数据库，也就意味着这几秒时间有300个请求到数据库，如果这个时候数据库CPU达到了100%，那么接下来的所有查询都会超时，也就是无法有第一个查询结果缓存起来，从而还是形成了缓存击穿。

DM8提供查询结果集缓存策略。相同的查询语句，如果涉及的表数据没有变化，则可以直接重用缓存的结果集。查询结果缓存，在数据变化不频繁的OLAP应用模式，或存在大量类似编目函数查询的应用环境下有非常良好的性能提升效果。

对系统中的检测业务信息和资源管理信息进行各种查询统计，实现项目承接和完成情况的统计、项目进度查询、项目明细查询、项目状态统计、合同查询、检测报告查询、检测数据查询、检测方法查询、物资库存查询、人员工作量统计、样品量统计、数据量统计等，并支持根据管理需求进一步增加统计查询内容。

标签：查询