InfluxDB 占用的磁盘空间最高达�?TDengine �?4.5 �?/h2>

�(she)�前面三个场(man)景中(fu)(fu)�Q(ben)�InfluxDB 落�(jie)��(er)后数据文(yun)件规模与 TDengine 非常�(�)�近�Q(ben)�但是在(��)大数据规模的�(she)�景四和(nin)�(she)�景五中(fu)(fu)�Q(ben)�InfluxDB 落�(jie)��(er)后文(yun)件占(zi)�(�)�的��(shu)�盘(er)�I�间显著(xian)����(zi)���?TDengine。下(xiao)图比较了 TDengine �(xia)?InfluxDB �(she)�不(zhen)同场(man)景下(xiao)的磁盘空�(xiang)��(cun)��(zi)�(�)�情况：(xi)

�(xi)��(tong)��囑�(ju)���(xi)�看�(rou)�ͼ�(ren)在前(shan)�(wei)(wei)�三个场�(xiu)�中(fu)�Q(ben)(ben)�InfluxDB �(nie)�盘(er)�(yang)�数(kai)据文�(xi)��(duo)���(zhou)�与(ya) TDengine �(wei)(wei)�常接近�Q(ben)(ben)�在场景二中(fu)�Q(ben)(ben)�TDengine 的数(kai)据落盘规�(zhou)�比 InfluxDB 大了 1%�Q(ben)(ben)��?strong>但是在场�(xiu)�四和场�(xiu)�五中，(ren)InfluxDB �(nie)�盘(er)�(yang)�文�(xi)�占用的���盘(er)�I(chu)�间�(rou)�别�(tuan)?TDengine �?4.2 �(lian)�和 4.5 �(lian)��?/strong>

写在最�?/h2>

��Z��本次���试报告�Q�我们可以得出结论，在全部的数据场景中，TDengine 写入性能、查询性能均全面超�q?InfluxDB。在整个写入�q�程中，TDengine 在提供更高写入和查询能力的前提下�Q�不论是服务器的 CPU �q�是 IO�Q�TDengine 均优�?InfluxDB。即使加上客��L��的开销�l�计�Q�TDengine 在写入开销上也�?InfluxDB 之下�?/p>

从实践角度出发，�q�个报告�l�果也很好地说明了�ؓ什么有很多企业客户�?InfluxDB �?TDengine 的选型调研中选择�?TDengine�Q�双汇便是其中之一�Q�在《双汇大数据�Ҏ��选型�Q�从���手的InfluxDB+Redis到毫�U���查询的TDengine�?/a>�q�篇文章中，侉K���q�C��光���型调研�q�程的具体思考�?/p>

��Z��方便大家验证���试�l�果�Q�本���试报告支持�q�行���试脚本一键复玎ͼ��Ƣ迎大家在评论区互动交流。同�Ӟ��你也可以��d�� ���T vx�Q�tdengine1�Q�加�?TDengine 用户交流���，和更多志同道合的开发者一��h��讨数据处理难题�?/p> ]]> //www.yakult-sh.com.cn/tdengine-engineering/17465.html Sun, 09 Apr 2023 11:59:43 +0000 //www.yakult-sh.com.cn/?p=17465

��?T ��D���Q�taosKeeper �?TDengine 3.0 的运行状态指标监控工��P��通过���单的几项配置卛_��获取 TDengine 的运行状态信息。其使用 TDengine RESTful 接口�Q�所以不需要安�?TDengine 客户端即可��用。本文将详细解读 taosKeeper 的详�l�语法规则，方便有需要的用户开展应用�?/p>

时序数据�?/a> TDengine�Q?Time Series Database,TSDB�Q?通过 taosKeeper ���服务器�?CPU、内存、硬盘空间、带宽、请求数、磁盘读写速度�{�信息定时写入指�?a href="//www.yakult-sh.com.cn/" data-internallinksmanager029f6b8e52c="4" title="实时数据�? target="_blank" rel="noopener">实时数据�?/a>�Q�也支持寚w��要的�pȝ��操作�Q�比如登录、创建、删除数据库�{�）以及各种错误报警信息�q�行记录。系�l�管理员可以从命令行直接查看该数据库�Q�也可以�?Web 端通过囑�Ş化界面查看这些监���信息。这些监���信息的采集�~�省是打开的，也可以通过修改配置文�g里的选项 monitor 来关闭�?/p>

taosKeeper 安装方式�Q�单独编�?taosKeeper �q�安装，详情请参�?taosKeeper 仓库�Q?a href="//github.com/taosdata/taoskeeper" target="_blank" rel="noreferrer noopener nofollow">//github.com/taosdata/taoskeeper�Q��?/p>

配置和运行方�?/h2>

taosKeeper 需要在操作�pȝ���l�端中执行，该工��h��持三�U�配�|�方式：命��o行参数、环境变量和配置文�g。优先��为：命��o行参数、环境变量、配�|�文件参数�?/p>

需要注意的是，在运�?taosKeeper 之前要确�?TDengine 集群�?taosAdapter 已经正确�q�行�Q?/strong>�q�且 TDengine 已经开启监控服务。监控配�|�可参�?a href="//docs.yakult-sh.com.cn/reference/config/#%E7%9B%91%E6%8E%A7%E7%9B%B8%E5%85%B3" rel="nofollow noopener" target="_blank">相关文档�Q�具体的配置��包�?monitor�(mo)�monitorFqdn�(mo)�monitorPort�(mo)�monitorInterval �?telemetryReporting�(mo)?/strong>

命��o行参数启�?/h2>

可以直接执行 taosKeeper�Q�也可以在执行命令时提供命��o行参数�?/p>

$ taosKeeper

环境变量启动

通过讄���环境变量辑ֈ�控制启动参数的目的，通常在容器中�q�行时��用�?/p>

$ export TAOS_KEEPER_TDENGINE_HOST=192.168.64.3
$ taoskeeper

具体参数列表请参�?taoskeeper -h 输入�l�果�?/p>

配置文�g启动

执行以下命��o卛_��快速体�?taosKeeper。当不指�?taosKeeper 配置文�g�Ӟ��优先使用 /etc/taos/keeper.toml 配置�Q�否则将使用默认配置�?/p>

$ taoskeeper -c <keeper config file>

具体配置文�g�C�Z��请参考：//docs.yakult-sh.com.cn/reference/taosKeeper/

获取监控指标

taosKeeper 作�ؓ TDengine 监控指标的导出工��P��可以��?TDengine 产生的监控数据记录在指定数据库中�Q��ƈ提供导出接口�?/p>

查看监控�l�果�?/strong>

$ taos
# 如上�C�Z���Q����?log 库作为监控日志存储位�|?> use log;
> select * from cluster_info limit 1;

�l�果�C�Z���Q?/p>

           ts            |            first_ep            | first_ep_dnode_id |   version    |    master_uptime     | monitor_interval |  dbs_total  |  tbs_total  | stbs_total  | dnodes_total | dnodes_alive | mnodes_total | mnodes_alive | vgroups_total | vgroups_alive | vnodes_total | vnodes_alive | connections_total |  protocol   |           cluster_id           |
===============================================================================================================================================================================================================================================================================================================================================================================
 2022-08-16 17:37:01.629 | hlb:6030                       |                 1 | 3.0.0.0      |              0.27250 |               15 |           2 |          27 |          38 |            1 |            1 |            1 |            1 |             4 |             4 |            4 |            4 |                14 |           1 | 5981392874047724755            |
Query OK, 1 rows in database (0.036162s)

导出监控指标

$ curl //127.0.0.1:6043/metrics

部分�l�果集：

# HELP taos_cluster_info_connections_total 
# TYPE taos_cluster_info_connections_total counter
taos_cluster_info_connections_total{cluster_id="5981392874047724755"} 16
# HELP taos_cluster_info_dbs_total 
# TYPE taos_cluster_info_dbs_total counter
taos_cluster_info_dbs_total{cluster_id="5981392874047724755"} 2
# HELP taos_cluster_info_dnodes_alive 
# TYPE taos_cluster_info_dnodes_alive counter
taos_cluster_info_dnodes_alive{cluster_id="5981392874047724755"} 1
# HELP taos_cluster_info_dnodes_total 
# TYPE taos_cluster_info_dnodes_total counter
taos_cluster_info_dnodes_total{cluster_id="5981392874047724755"} 1
# HELP taos_cluster_info_first_ep 
# TYPE taos_cluster_info_first_ep gauge
taos_cluster_info_first_ep{cluster_id="5981392874047724755",value="hlb:6030"} 1

TDinsight

除了 taosKeeper�Q�TDengine �q�提供了 TDinsight——��用监控数据库 + Grafana �?TDengine �q�行监控的解��x��案，下文���浅谈一�?TDinsight 的前期部�|�和准备。在部��v�Ӟ��我们首先需要下载自动化脚本 TDinsight.sh�Q?/p>

wget //github.com/taosdata/grafanaplugin/raw/master/dashboards/TDinsight.sh
chmod +x TDinsight.sh

准备�Q?/p>

1. TDengine Server 信息�Q?
   • TDengine RESTful 服务�Q���用参�?-a指定。如果是�q�行在同一��L���Q�通常�?//localhost:6041�?/li>
   • TDengine 用户名和密码�Q����?-u-p 指定�?/li>
2. Grafana 告警通知
   • 使用已经存在�?Grafana Notification Channel uid�Q�参�?-E。该参数可以使用 curl -u admin:admin localhost:3000/api/alert-notifications |jq 来获取。JSON 解析工具 jq 可能需要单独安装�?/li>

sudo ./TDinsight.sh -a //localhost:6041 -u root -p taosdata -E <notifier uid>

�q�行�E�序�q�����?Grafana 服务�Q�打开面板�Q?code>//localhost:3000/d/tdinsight可以查看 TDengine 服务�q�行状态�?/p>

监控数据库�ؓ用户提供了更多的监控��，�?taosKeeper 共同�{�牢 TDengine 数据监控的城墙。在下一���文章中�Q�我们将会详解解说如何���?TDinsight �Ҏ���?TDengine �q�行监控�Q�敬��h��待�?/p> ]]>