使用笔记本收集和分析大数据群集中的日志

此页是 SQL Server 大数据群集的笔记本索引。 这些可执行笔记本(.ipynb)专为 SQL Server 2019 设计,可帮助记录大数据群集。

重要

Microsoft SQL Server 2019 大数据群集附加产品将停用。 对 SQL Server 2019 大数据群集的支持将于 2025 年 2 月 28 日结束。 具有软件保障的 SQL Server 2019 的所有现有用户都将在平台上获得完全支持,在此之前,该软件将继续通过 SQL Server 累积更新进行维护。 有关详细信息,请参阅公告博客文章Microsoft SQL Server 平台上的大数据选项

每个笔记本旨在检查其自己的依赖项。 “运行所有单元格”选项成功完成,或者向另一个笔记本发出超链接提示引发异常,以解决缺少的依赖项。 点击指向目标笔记本的超链接,然后单击运行所有单元格。 成功返回原始笔记本后,单击“ 运行所有单元格”。

安装所有依赖项后,但 运行所有单元格 失败后,每个笔记本将分析结果,并尽可能生成指向另一个笔记本的超链接提示,以进一步帮助解决问题。

从大数据群集收集日志

本部分包含一组可用于从 SQL Server 大数据群集获取日志的笔记本。

名称 DESCRIPTION
TSG001 - 运行 azdata copy-logs 使用 azdata 命令行接口复制大数据群集中的数据。
TSG061 - 获取 BDC 命名空间中 Pod 所有容器日志的尾部 从命名空间中的大数据群集获取 Pod 的所有容器日志。
TSG062 - 获取 BDC 命名空间中 Pod 的所有以前容器日志的结尾 从命名空间中的大数据群集中获取 Pod 的所有历史容器日志。
TSG083 - 运行 kubectl 集群信息转储 使用 kubectl 命令行接口导出大数据群集相关信息。
TSG084 - 内部查询处理器错误 使用 DMV 查询获取有关内部查询处理器错误的详细信息。
TSG091 - 获取 azdata CLI 日志 从本地计算机获取 azdata 日志。

分析大数据群集中的日志

一组笔记本,用于从 SQL Server 大数据群集收集和分析日志。 分析过程将针对日志中发现的已知问题,建议运行后续笔记本。

名称 DESCRIPTION
TSG030 - SQL Server 错误日志文件 获取 SQL Server 错误日志文件并分析日志条目,并建议进一步相关的故障排除指南。
TSG031 - SQL Server PolyBase 日志 获取 SQL Server PolyBase 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG034 - Livy 日志 获取 Livy 日志并分析日志条目,并建议进一步的相关故障排除指南。
TSG035 - Spark 历史日志 获取 Spark 历史记录日志并分析日志条目,并建议进一步的相关故障排除指南。
TSG036 - 控制器日志 获取控制器日志的最后“n”小时,并分析日志条目,并建议进一步相关的故障排除指南。
TSG046 - Knox 网关日志 Knox 向客户端返回 500 错误,并移除指向潜在问题原因的详细信息(堆栈)。 因此,使用此笔记本从群集获取 Knox 日志。 获取 Knox 网关日志并分析日志条目,并建议进一步的相关故障排除指南。
TSG073 - InfluxDB 日志 获取 InfluxDB 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG076 - Elasticsearch日志 获取弹性搜索日志并分析日志条目,并建议进一步的相关故障排除指南。
TSG077 - Kibana 日志 获取 Kibana 日志并分析日志条目,并建议进一步的相关故障排除指南。
TSG088 - Hadoop 数据节点日志 获取 Hadoop datanode 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG090 - Yarn nodemanager 日志 获取 Yarn nodemanager 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG092 - BDC 中所有容器的监督日志尾部 获取 BDC 中所有容器的 Supervisord 日志尾部,分析日志条目,并提出进一步的故障排除建议。
TSG093 - BDC 中所有容器的代理日志结尾 获取 BDC 中所有容器的代理日志尾日志,并分析日志条目,并建议进一步相关的故障排除指南。
TSG094 - Grafana 日志 获取 Grafana 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG095 - Hadoop namenode 日志 获取 Hadoop namenode 日志并分析日志条目,并建议进一步相关的故障排除指南。
TSG096 - Zookeeper 日志 获取 Zookeeper 日志和分析日志条目,并建议进一步的相关故障排除指南。

后续步骤