CN112612675A - 微服务架构下的分布式大数据日志链路跟踪方法及系统 - Google Patents

微服务架构下的分布式大数据日志链路跟踪方法及系统 Download PDF

Info

Publication number
CN112612675A
CN112612675A CN202011566084.7A CN202011566084A CN112612675A CN 112612675 A CN112612675 A CN 112612675A CN 202011566084 A CN202011566084 A CN 202011566084A CN 112612675 A CN112612675 A CN 112612675A
Authority
CN
China
Prior art keywords
service
log
micro
link
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011566084.7A
Other languages
English (en)
Other versions
CN112612675B (zh
Inventor
刘宏亮
李铭
张丽丽
张辉
贾立平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Jingweishengrui Data Technology Co ltd
Original Assignee
Shandong Jingweishengrui Data Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Jingweishengrui Data Technology Co ltd filed Critical Shandong Jingweishengrui Data Technology Co ltd
Priority to CN202011566084.7A priority Critical patent/CN112612675B/zh
Publication of CN112612675A publication Critical patent/CN112612675A/zh
Application granted granted Critical
Publication of CN112612675B publication Critical patent/CN112612675B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324—Display of status information
    • G06F11/328—Computer systems status display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G06F11/3476—Data logging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供了微服务架构下的分布式大数据日志链路跟踪方法及系统。其中该方法包括微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，得到traceID和spanID；判断当前业务方法是否为第一次调用的业务方法，更新调用链中的spanID关系；缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，对日志信息按照调用链路信息进行排序处理；绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。

Description

微服务架构下的分布式大数据日志链路跟踪方法及系统
技术领域
本发明属于计算机微服务分布式系统技术领域，尤其涉及一种微服务架构下的分布式大数据日志链路跟踪方法及系统。
背景技术
本部分的陈述仅仅是提供了与本发明相关的背景技术信息，不必然构成在先技术。
随着系统业务需求越来越复杂，大型的业务系统不得不按照业务功能将系统进行各种模块拆分，然后通过模块的动态组合，最终提供丰富的业务功能，同时提高系统灵活性和扩展性，特别是随着计算机软件技术中微服务架构和容器技术的兴起，看似简单的一个应用，后台可能有几十个甚至几百个微服务在支撑，一个简单的前端调用请求可能需要透传多次的微服务调用最后才能完成，被调用的微服务可能还要继续调用其它微服务。当系统拆分的微服务越多时，这种分布式服务架构下服务之间的调用关系也就自然而然的更加复杂化，见附图1。
由于微服务模块数量众多，并且分布式部署，各个微服务的运行日志分散到不同的存储位置，因此发明人发现，在微服务架构下的计算机系统面临以下几个技术问题：1)无法实现微服务之间复杂调用关系的链路跟踪，使得开发人员无法对微服务模块的边界进行准确地规划。2)运维人员无法从数量众多的微服务中快速识别定位到系统性能瓶颈模块。3)现有技术可以对微服务模块的运行日志文件数据进行查询，但是存在运行日志的查询过程较为繁琐，日志的查询效率和准确率均不高的问题。
发明内容
为了解决上述背景技术中存在的至少一项技术问题，本发明提供一种微服务架构下的分布式大数据日志链路跟踪方法及系统，其能够实现对微服务架构系统的服务链路展示和跟踪、服务性能的自动检测、详细运行日志的跟踪排查等全系列操作，可显著提高系统的开发和运维效率，降低企业硬件成本，为微服务架构下分布式系统的稳定运行提供了技术保障。
为了实现上述目的，本发明采用如下技术方案：
本发明的第一个方面提供一种微服务架构下的分布式大数据日志链路跟踪方法。
一种微服务架构下的分布式大数据日志链路跟踪方法，包括：
当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息；
根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系；
执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；
根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理；
业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
作为一种实施方式，根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法。
作为一种实施方式，若当前业务方法为第一次调用的业务方法，则将当前业务方法对应的父业务方法parentSpanID绑定为null，否则将当前业务方法对应的父业务方法绑定为请求参数中的parentSpanID。
作为一种实施方式，在执行当前微服务业务方法的过程中，如果业务方法中有记录日志的操作，则先将日志内容记录到微服务模块所在服务器的本地文件系统中，然后检查是否有进行链路日志跟踪的标记标量。
作为一种实施方式，如果没有记录日志的操作，则直接检查是否有进行链路日志跟踪的标记标量。
作为一种实施方式，如果需要进行日志跟踪记录，则从缓存中获取traceID、spanID信息，然后根据traceID和spanID为当前日志记录生成自增序列logOrder，并将logOrder以及当前日志信息追加到缓存中对应的日志有序集合列表中。
作为一种实施方式，所述分布式大数据日志链路跟踪方法还包括：当前微服务是否继续调用下游微服务，若是，则将调用请求中的parentSpanID设置为当前的spanID后，发起对下游微服务的调用；否则，检查当前微服务是否执行完毕。
本发明的第二个方面提供一种微服务架构下的分布式大数据日志链路跟踪系统。
一种微服务架构下的分布式大数据日志链路跟踪系统，包括：
服务模块调用判断模块，其用于当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息；
业务方法调用判断模块，其用于根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系；
缓存模块，其用于执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；
信息绑定模块，其用于根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理；
日志信息发送模块，其用于业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
本发明的第三个方面提供一种计算机可读存储介质。
一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
本发明的第四个方面提供一种计算机设备。
一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
与现有技术相比，本发明的有益效果是：
本发明创新性的将调用链路信息与微服务运行日志数据进行绑定，并将运行日志数据按照微服务模块进行压缩存储，不但可显著提高系统运行日志数据的存储和检索查询效率，节省服务器硬件成本投入，而且还可以保证日志序列的准确性，可使开发人员和运维人员方便快捷地，通过图形化方式点击微服务链路跟踪图上的问题节点，就可以直接查看对应节点的详细的运行日志信息，大大提高了相关人员问题排查的便捷性和准确性。
本发明实现了微服务之间复杂调用关系的链路跟踪，便于开发人员对微服务模块的边界进行更加准确地规划设计，实现了微服务模块的性能检测，便于运维人员从数量众多的微服务中快速识别定位到系统性能瓶颈模块，还实现了微服务模块运行日志与微服务跟踪链路数据以及性能数据的有效结合，让开发人员和运维人员能够通过图形化方式、在统一的平台就可以十分便捷、快速、准确高效地检索出问题模块的系统运行日志，极大提高系统整体开发和运维效率，节省开发成本。
附图说明
构成本发明的一部分的说明书附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。
图1是本发明所述发微服务之间复杂调用关系的说明示意图；
图2是本发明实施例提供的服务链路跟踪的流程示意图；
图3是本发明实施例提供的微服务架构下的分布式大数据日志链路跟踪方法流程图。
具体实施方式
下面结合附图与实施例对本发明作进一步说明。
应该指出，以下详细说明都是例示性的，旨在对本发明提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本发明所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本发明的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
实施例一
微服务链路跟踪技术,一般是通过请求源生成本次调用请求的traceID标识并发起请求，收到请求的目标微服务解析traceID，并生成调用方法对应的spanID以及附加信息(如被调用方法名称、上一级SpanID、节点IP地址等)，通过这些链路ID信息就可以构建出整个微服务调用依赖关系，如Spring Cloud Sleuth框架就是采用该技术方案实现，如图2所示。
1)该技术方案依赖于抽象的traceID来生成服务间的跟踪链路信息，当系统出现性能或功能故障时，运维或开发人员往往先通过查找日志文件，找出异常日志中的traceID，然后再通过traceID去检索完整的运行日志，效率低、准确度差，尤其当服务模块众多、系统运行日志数量巨大时此技术方案的弊端更加明显；
2)该技术方案无法方便快捷的统计各个模块的运行时间等性能参数信息，无法进行性能检测，不便于系统出现性能故障时的问题排查；
3)该技术方案由于设计上的缺陷无法提供方便、准确、快速的微服务运行日志查询方案，不利于运维人员和开发人员快速定位系统问题根源。
微服务链路跟踪技术+微服务计时跟踪技术是在微服务链路跟踪技术的基础上引入服务计时跟踪技术，服务计时跟踪技术是通过记录每一个服务节点的开始执行时间、持续时间、结束执行时间等信息，可统计出整个链路中每个服务节点的平均总执行时间，方便对服务节点进行性能统计。
通过微服务链路跟踪技术+微服务计时跟踪技术两种技术的结合，该技术方案可实现微服务链路跟踪以及性能监控，可跟踪出微服务的调用链路，并且可根据每个微服务节点的运行时间统计数据快速识别造成系统性能瓶颈的微服务节点，但是该方案无法帮助开发人员和运维人员进一步准确定位性能或功能问题根源：服务运行时的日志输出到底是怎样的，到底是什么原因导致性能问题，即该技术方案只能解决技术背景中的问题1和2，无法解决问题3。
微服务链路跟踪技术+微服务计时跟踪技术+日志数据收集和可视化技术，在微服务链路跟踪技术+微服务计时跟踪技术的基础上引入日志数据收集和可视化技术，将微服务调用的数据链路信息、以及微服务性能跟踪数据发送到日志文件中，然后通过Logstash将日志数据逐条发送到Elasticsearch(数据存储服务器)，然后通过Kibana图形化界面进行查询展示。微服务链路跟踪技术+微服务计时跟踪技术+日志数据收集和可视化技术可以对微服务模块的运行日志文件数据进行查询，但是存在以下缺点：
运行日志的查询过程较为繁琐：先通过zipkin和sleuth查询到对应的traceID等信息，然后再到Kibana中查询展示对应的日志内容，开发人员和运维人员需要在不同的管理模块中来回切换，当需要查询的微服务调用关系复杂时，时间成本会非常高，另外，该技术方案也增加了运维部门和开发部门之间的沟通成本，同时由于该方案涉及的工具软件较多，也对相关人员提出了更高的技术要求。
日志的查询效率不高：在Kibana中用图形化方式查询和展示日志结果，是从Elasticsearch的海量日志数据中进行的直接查询，由于该方案中系统运行的日志未做任何压缩优化处理直接记录存储到Elasticsearch中，查询效率会随着日志数量上升而显著下降，也对硬件成本提出了更高的要求。
日志查询的准确率不高：该方案通过zipkin和sleuth查询到traceID，然后根据traceID去Elasticsearch中查询本次链路的有关日志信息时，一般是基于时间戳进行排序来展示系统运行日志情况，但是由于微服务是分布式部署，实际生产环境中各个微服务所部署的服务器的时钟时间频率存在一定的偏差，这往往导致查询展示出来的日志序列与实际的运行日志序列不一致，而这非常不利于技术人员对问题根源的快速、准确定位，甚至有时候会产生误导。
如图3所示，本实施例提供了一种微服务架构下的分布式大数据日志链路跟踪方法，具体包括如下步骤：
S101：当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息。
在具体实施中，微服务模块接收到调用请求，如果请求中没有traceID则说明当前微服务是第一个被调用的微服务，生成代表当前调用链的唯一标识traceID；如果请求中已经有traceID则说明当前微服务模块是后续请求的微服务，此时无需进一步处理直接当前调用的业务方法生成spanID。
在为当前调用的业务方法生成spanID，同时标记该spanID对应的traceID，以及当前业务方法的开始执行时间戳、IP地址、当前登录用户等信息。
S102：根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系。
在具体实施中，根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法。若当前业务方法为第一次调用的业务方法，则将当前业务方法对应的父业务方法parentSpanID绑定为null，否则将当前业务方法对应的父业务方法绑定为请求参数中的parentSpanID。
S103：执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息。
在具体实施中，将当前微服务所在服务器IP地址、微服务名称、业务方法名称、链路唯一标致traceID、业务方法唯一标识spanID、父业务方法唯一标识parentSpanID、开始执行时间startTime、当前用户标识userID等信息保存到Redis上下文缓存对象中。
此处需要说明的是，实施举例中提及的Redis缓存还可以用mysql等数据库产品、ActiveMQ等消息中间件来代替，甚至可以直接用机器缓存来实现，都可以用来完成本发明提出的技术方案，都属于本发明专利的保护范围。
S104：根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理。
在执行当前微服务业务方法的过程中，如果业务方法中有记录日志的操作，则先将日志内容记录到微服务模块所在服务器的本地文件系统中，然后检查是否有进行链路日志跟踪的标记标量logTrace＝true。如果没有记录日志的操作，则直接检查是否有进行链路日志跟踪的标记标量。
如果需要进行日志跟踪记录，则从缓存(比如：Redis上下文缓存对象)中获取traceID、spanID信息，然后根据traceID和spanID为当前日志记录生成自增序列logOrder，并将logOrder以及当前日志信息(比如：当前日志内容、日志级别、日志时间戳等)追加到缓存中对应的日志有序集合列表中。
如果不进行日志链路跟踪(logTrace＝null或true)，则判断当前微服务是否继续调用下游微服务。
当前微服务是否继续调用下游微服务，若是，则将调用请求中的parentSpanID设置为当前的spanID后，发起对下游微服务的调用；否则，检查当前微服务是否执行完毕。
检查当前微服务是否执行完毕，如果没有执行完毕，则继续执行当前微服务业务方法，如果业务方法中有记录日志的操作，则先将日志内容记录到微服务所在服务器的本地文件系统中，然后检查是否有进行链路日志跟踪的标记标量logTrace＝true；如果没有记录日志的操作，则直接检查是否有进行链路日志跟踪的标记标量logTrace＝true。
S105：业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
业务方法执行完毕，将执行完时的时间戳信息、运行时间段信息保存到上下文缓存对象中,采用异步方式将上下文对象中的链路跟踪数据、性能数据以及当前微服务业务方法中所有有序日志数据一起打包发送到Elasticsearch存储服务器中，并将Redis上下文缓存对象中删除对应的数据，释放内存。
此处需要说明的是，本实施举例中提及的数据存储服务器Elasticsearch也可以用mysql、neo4j等关系型数据库或nosql数据库产品来代替，都可以用来完成本发明提出的技术方案，都属于本发明专利的保护范围。
在具体实施中，将所有日志信息按照调用的相对先后顺序先进行排序合并，最后将当前业务方法的所有日志与链路信息绑定，并且这个过程随着业务方法中日志记录的过程而动态增长，直至业务方法执行完毕。
在一些实施例中，除了绑定日志内容外，还将当前业务方法的日志最高级别与链路信息进行了绑定，便于图形化展示模块根据日志级别进行自动标记；
在其他实施例中，除了绑定日志内容外，还将当前用户信息与链路信息进行了绑定，便于图形化展示模块根据用户信息进行数据展示；
在一些实施例中，还可以对微服务的性能数据进行标记和监控，当微服务性能数据超出设定阈值时，该图形化展示模块会在链路图中自动高亮标记相应的微服务模块；
在其他实施例中，还可以对微服务的运行日志健康状态进行标记和监控，当微服务运行日志超过设置的监控日志级别时，该图形化展示模块会在链路图中自动高亮标记相应的微服务模块；
在一些实施例中，还可以按需逐级展示微服务调用链路中每个微服务模块的详细运行日志信息，包括但不限于日志级别、操作人、日志时间、日志所在服务器IP、日志描述等信息；
需要说明的是，按需逐级展示是指可以很方便的在微服务链路图中直接点击任意的微服务模块名字来查看对应的运行日志数据，不需要相关人员切换到其它工具软件或管理页面中；
运行日志数据的排序不是按照日志所在服务器时间戳进行排序，而是日志在存储时已经按照实际运行的相对顺序排序处理，该图形展示模块中展示的日志数据无需再进行排序处理。
本实施例通过spanID、parentSpanID等信息建立起本次微服务调用中的链路依赖信息；将微服务方法的运行时间、所有运行日志、以及日志级别信息与链路信息进行了绑定；本实施例还将当前业务方法的所有有序日志数据与链路信息数据打包压缩后异步方式上传到存储服务器，这样可大大减少对存储服务器的性能压力，大大降低了存储服务器中存储数据的记录数量，显著提高日志检索时的查询效率，并且存储时已经对日志内容进行了排序处理，这样查询出来的业务方法日志内容就是整体且有序的，不需要再根据时间戳排序，所以可以保证查询检索后日志序列的准确性。
实施例二
本实施例提供了一种微服务架构下的分布式大数据日志链路跟踪系统，其包括：
服务模块调用判断模块，其用于当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息；
业务方法调用判断模块，其用于根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系；
缓存模块，其用于执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；
信息绑定模块，其用于根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理；
日志信息发送模块，其用于业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
此处需要说明的是，本实施例的微服务架构下的分布式大数据日志链路跟踪系统中的各个模块，与实施例一中的各个步骤一一对应，其具体实施过程相同，此处不再累述。
在实际开发设计中，微服务架构下的分布式大数据日志链路跟踪系统可采用分布式链路跟踪及性能数据收集模块、链路日志信息收集模块、图形化展示模块及数据存储器模块来实现。其中，所述分布式链路跟踪及性能数据收集模块，用来生成和收集微服务之间复杂调用链路信息以及运行的性能数据信息；所述链路日志信息收集模块，用来将服务的运行日志同调用链路信进行绑定，并将绑定信息发送到所述的数据存储器模块；所述的图形化展示模块，用可视化方式展示微服务之间的调用链路信息、服务性能数据以及对应的运行日志信息，并且可以对性能数据超出设定阈值或有异常日志的微服务自动进行区别标记，便于运维和开发人员便捷、快速地定位出问题的微服务，在出问题的微服务节点还可以进一步查看该微服务本次调用中的所有运行日志信息，帮助相关人员快速定位问题根源；数据存储器模块用来存储前述的微服务调用链路数据、服务性能数据、运行日志数据等。
本实施例可通过图形化方式展示微服务之间的调用链路跟踪图信息；可通过图形化方式对系统中运行性能时间明显低于设置阈值的服务模块自动进行高亮标记，实现对整个系统中所有微服务模块的自动性能检测，便于相关人员快速主动发现系统性能问题；可通过图形化方式对系统运行日志中出现告警或异常级别的服务模块自动进行高亮标记，实现对整个系统中所有微服务模块的自动健康检查，便于相关人员快速主动发现运行问题。
本实施例创新性的将调用链路信息与微服务运行日志数据进行绑定，并将运行日志数据按照微服务模块进行压缩存储，不但可显著提高系统运行日志数据的存储和检索查询效率，节省服务器硬件成本投入，而且还可以保证日志序列的准确性，可使开发人员和运维人员方便快捷地，通过图形化方式点击微服务链路跟踪图上的问题节点，就可以直接查看对应节点的详细的运行日志信息，大大提高了相关人员问题排查的便捷性和准确性。
本发明提出的技术方案可让开发人员或运维人员通过统一的图形化入口，实现对微服务架构系统的服务链路展示和跟踪、服务性能的自动检测、详细运行日志的跟踪排查等全系列操作，可显著提高系统的开发和运维效率，降低企业硬件成本，为微服务架构下分布式系统的稳定运行提供了技术保障，具有非常大的价值。
实施例三
本实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上述所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
实施例四
本实施例提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(RandomAccessMemory，RAM)等。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，包括：
当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息；
根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系；
执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；
根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理；
业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
2.如权利要求1所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法。
3.如权利要求1所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，若当前业务方法为第一次调用的业务方法，则将当前业务方法对应的父业务方法parentSpanID绑定为null，否则将当前业务方法对应的父业务方法绑定为请求参数中的parentSpanID。
4.如权利要求1所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，在执行当前微服务业务方法的过程中，如果业务方法中有记录日志的操作，则先将日志内容记录到微服务模块所在服务器的本地文件系统中，然后检查是否有进行链路日志跟踪的标记标量。
5.如权利要求4所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，如果没有记录日志的操作，则直接检查是否有进行链路日志跟踪的标记标量。
6.如权利要求4所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，如果需要进行日志跟踪记录，则从缓存中获取traceID、spanID信息，然后根据traceID和spanID为当前日志记录生成自增序列logOrder，并将logOrder以及当前日志信息追加到缓存中对应的日志有序集合列表中。
7.如权利要求1所述的微服务架构下的分布式大数据日志链路跟踪方法，其特征在于，所述分布式大数据日志链路跟踪方法还包括：当前微服务是否继续调用下游微服务，若是，则将调用请求中的parentSpanID设置为当前的spanID后，发起对下游微服务的调用；否则，检查当前微服务是否执行完毕。
8.一种微服务架构下的分布式大数据日志链路跟踪系统，其特征在于，包括：
服务模块调用判断模块，其用于当微服务模块接收到调用请求后，判断当前微服务模块是否为第一次调用，若是，则生成链路唯一标识traceID，再生成业务方法唯一标识spanID；否则，直接生成spanID，同时标记对应关联的traceID及起始时间戳信息；
业务方法调用判断模块，其用于根据请求中是否存在父业务方法唯一标识parentSpanID，来判断当前业务方法是否为第一次调用的业务方法，并更新调用链中的spanID关系；
缓存模块，其用于执行当前业务方法时缓存微服务模块所在服务器IP地址、微服务模块名称、业务方法名称、traceID、spanID、parentSpanID及业务方法开始执行时间信息；
信息绑定模块，其用于根据链路日志跟踪标记来执行日志跟踪记录，将日志信息与调用链路信息和微服务模块运行性能信息分别进行绑定，形成日志记录并将其按照调用链路信息进行排序处理；
日志信息发送模块，其用于业务方法执行完毕时，绑定微服务模块运行的性能数据与调用链路信息，将排序后的日志记录压缩后发送到日志存储服务器，然后删除调用链路对应的缓存数据，释放内存空间。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一项所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
10.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-7中任一项所述的微服务架构下的分布式大数据日志链路跟踪方法中的步骤。
CN202011566084.7A 2020-12-25 2020-12-25 微服务架构下的分布式大数据日志链路跟踪方法及系统 Active CN112612675B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011566084.7A CN112612675B (zh) 2020-12-25 2020-12-25 微服务架构下的分布式大数据日志链路跟踪方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011566084.7A CN112612675B (zh) 2020-12-25 2020-12-25 微服务架构下的分布式大数据日志链路跟踪方法及系统

Publications (2)

Publication Number Publication Date
CN112612675A true CN112612675A (zh) 2021-04-06
CN112612675B CN112612675B (zh) 2023-02-28

Family

ID=75249241

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011566084.7A Active CN112612675B (zh) 2020-12-25 2020-12-25 微服务架构下的分布式大数据日志链路跟踪方法及系统

Country Status (1)

Country Link
CN (1) CN112612675B (zh)

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113157478A (zh) * 2021-04-21 2021-07-23 多点(深圳)数字科技有限公司 一种分布式系统配置化数据采集和业务报警系统
CN113297076A (zh) * 2021-05-21 2021-08-24 建信金融科技有限责任公司 基于调用链的服务变更识别方法及装置
CN113590372A (zh) * 2021-08-10 2021-11-02 平安普惠企业管理有限公司 基于日志的链路追踪方法、装置、计算机设备及存储介质
CN113688012A (zh) * 2021-09-09 2021-11-23 中国银行股份有限公司 调用链监控系统及方法
CN113849331A (zh) * 2021-09-22 2021-12-28 网易（杭州）网络有限公司 混合技术栈的异常追踪方法、系统、装置、设备及介质
CN113901097A (zh) * 2021-10-12 2022-01-07 山东可信云信息技术研究院 微服务架构下服务链路及业务的快速检索方法及系统
CN113986759A (zh) * 2021-11-16 2022-01-28 中国工商银行股份有限公司 业务处理流程获取方法、业务架构流程验证方法及系统
CN114064718A (zh) * 2021-11-05 2022-02-18 上海新炬网络技术有限公司 一种基于日志分析的业务调用链的网络故障定位方法
CN114116426A (zh) * 2021-11-30 2022-03-01 平安养老保险股份有限公司 基于微服务的跟踪日志生成方法、装置、设备及介质
CN114143369A (zh) * 2021-12-09 2022-03-04 华人运通(上海)云计算科技有限公司 一种云平台的服务监控系统
CN114338494A (zh) * 2022-03-13 2022-04-12 北京金堤科技有限公司 服务依赖拓扑关系获取方法和装置、存储介质和电子设备
CN114745295A (zh) * 2022-04-19 2022-07-12 京东科技控股股份有限公司 数据采集方法、装置、设备和可读存储介质
CN114844797A (zh) * 2022-05-27 2022-08-02 中国银行股份有限公司 调用链日志与监控日志关联方法及微服务异常检测方法
CN115022213A (zh) * 2022-06-30 2022-09-06 福州畅昕信息科技有限公司 一种请求异常识别的方法与存储介质
CN115086376A (zh) * 2022-06-16 2022-09-20 云赛智联股份有限公司 一种基于微服务的政务数据处理系统
CN115118583A (zh) * 2022-06-29 2022-09-27 北京奇艺世纪科技有限公司 日志查询方法、装置、电子设备及计算机可读存储设备
CN115129491A (zh) * 2022-07-08 2022-09-30 盐城金堤科技有限公司 微服务请求消息跟踪方法、生成方法、装置、介质及设备
CN115412592A (zh) * 2022-08-19 2022-11-29 恒生电子股份有限公司 业务处理系统以及方法
CN115529313A (zh) * 2022-09-16 2022-12-27 建信金融科技有限责任公司 调用链路的确定方法、装置、电子设备和介质
US11561849B1 (en) * 2022-01-05 2023-01-24 International Business Machines Corporation Intelligently adaptive log level management of a service mesh
CN115658431A (zh) * 2022-10-25 2023-01-31 贝壳找房(北京)科技有限公司 链路追踪的方法、电子设备及计算机可读存储介质
CN115720190A (zh) * 2021-08-24 2023-02-28 上海宝信软件股份有限公司 穿透式运营的调用链日志系统及方法
CN115766391A (zh) * 2022-09-26 2023-03-07 阿波罗智能技术(北京)有限公司 消息跟踪方法、消息生成方法、装置、设备、介质和车辆
CN115904878A (zh) * 2022-12-30 2023-04-04 支付宝(杭州)信息技术有限公司 业务变更处理方法、装置、设备及存储介质
CN116016646A (zh) * 2022-11-07 2023-04-25 中国工商银行股份有限公司 业务访问控制方法、装置、设备及介质
CN116232963A (zh) * 2023-02-20 2023-06-06 中银消费金融有限公司 一种链路跟踪方法及系统
CN116431459A (zh) * 2023-06-12 2023-07-14 北京新里程叮铃科技有限公司 分布式日志链路跟踪数据处理方法及装置
US20230247099A1 (en) * 2022-02-01 2023-08-03 International Business Machines Corporation Intelligent, fast-forwarded health checks within service mesh
CN116756044A (zh) * 2023-08-11 2023-09-15 杭州罗莱迪思科技股份有限公司 一种基于数据链路追踪的rpc远程调试方法、装置及应用
CN116775440A (zh) * 2023-08-21 2023-09-19 青岛民航凯亚系统集成有限公司 一种基于机场生产运营系统的日志级链路追踪方法及系统
CN117692310A (zh) * 2023-12-25 2024-03-12 北京优特捷信息技术有限公司 基于zipkin链路数据的拓扑聚合方法、装置、电子设备及介质
WO2024066518A1 (zh) * 2022-09-27 2024-04-04 中兴通讯股份有限公司 效率瓶颈检测的方法和装置、计算机可读介质
WO2024149107A1 (zh) * 2023-01-13 2024-07-18 深圳安科百腾科技有限公司 一种软件日志处理方法

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6519231B1 (en) * 1999-01-12 2003-02-11 Nortel Networks Limited Method and apparatus providing a spanning tree protocol for a data communications network having a multi-link trunk
US20140325070A1 (en) * 2013-04-24 2014-10-30 Zynga Inc. Usage consumption for an invitee of a cloud system
US20150172150A1 (en) * 2011-08-31 2015-06-18 Google Inc. Asynchronous and synchronous resource links
CN106487596A (zh) * 2016-10-26 2017-03-08 宜人恒业科技发展（北京）有限公司 分布式服务跟踪实现方法
CN106790718A (zh) * 2017-03-16 2017-05-31 北京搜狐新媒体信息技术有限公司 服务调用链路分析方法及系统
CN107580018A (zh) * 2017-07-28 2018-01-12 北京北信源软件股份有限公司 一种分布式系统的跟踪方法与装置
CN109921927A (zh) * 2019-02-20 2019-06-21 苏州人之众信息技术有限公司 基于微服务的实时调用链跟踪方法
CN109992465A (zh) * 2017-12-29 2019-07-09 中国电信股份有限公司 服务追踪方法、装置和计算机可读存储介质
CN110113200A (zh) * 2019-04-29 2019-08-09 平安科技（深圳）有限公司 链路系统与日志系统的关联方法、装置及存储介质
CN110175154A (zh) * 2019-05-17 2019-08-27 深圳前海微众银行股份有限公司 一种日志记录的处理方法、服务器及存储介质
CN110445643A (zh) * 2019-07-25 2019-11-12 泰康保险集团股份有限公司 异步微服务调用链路跟踪方法、装置、介质及电子设备
CN110535722A (zh) * 2019-08-27 2019-12-03 江苏瑞中数据股份有限公司 一种跨安全区域的微服务全链路运行监控方法
CN110730246A (zh) * 2019-10-23 2020-01-24 家乡互动(厦门)网络科技有限公司 一种微服务架构下的分布式链路跟踪方法
CN111078432A (zh) * 2019-12-10 2020-04-28 深圳前海环融联易信息科技服务有限公司 一种服务之间调度的追踪方法及装置
CN111459766A (zh) * 2019-11-14 2020-07-28 国网浙江省电力有限公司信息通信分公司 一种面向微服务系统的调用链跟踪与分析方法
CN111459760A (zh) * 2020-04-01 2020-07-28 交通银行股份有限公司太平洋信用卡中心 一种微服务监控方法、装置及计算机存储介质

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6519231B1 (en) * 1999-01-12 2003-02-11 Nortel Networks Limited Method and apparatus providing a spanning tree protocol for a data communications network having a multi-link trunk
US20150172150A1 (en) * 2011-08-31 2015-06-18 Google Inc. Asynchronous and synchronous resource links
US20140325070A1 (en) * 2013-04-24 2014-10-30 Zynga Inc. Usage consumption for an invitee of a cloud system
CN106487596A (zh) * 2016-10-26 2017-03-08 宜人恒业科技发展（北京）有限公司 分布式服务跟踪实现方法
CN106790718A (zh) * 2017-03-16 2017-05-31 北京搜狐新媒体信息技术有限公司 服务调用链路分析方法及系统
CN107580018A (zh) * 2017-07-28 2018-01-12 北京北信源软件股份有限公司 一种分布式系统的跟踪方法与装置
CN109992465A (zh) * 2017-12-29 2019-07-09 中国电信股份有限公司 服务追踪方法、装置和计算机可读存储介质
CN109921927A (zh) * 2019-02-20 2019-06-21 苏州人之众信息技术有限公司 基于微服务的实时调用链跟踪方法
CN110113200A (zh) * 2019-04-29 2019-08-09 平安科技（深圳）有限公司 链路系统与日志系统的关联方法、装置及存储介质
CN110175154A (zh) * 2019-05-17 2019-08-27 深圳前海微众银行股份有限公司 一种日志记录的处理方法、服务器及存储介质
CN110445643A (zh) * 2019-07-25 2019-11-12 泰康保险集团股份有限公司 异步微服务调用链路跟踪方法、装置、介质及电子设备
CN110535722A (zh) * 2019-08-27 2019-12-03 江苏瑞中数据股份有限公司 一种跨安全区域的微服务全链路运行监控方法
CN110730246A (zh) * 2019-10-23 2020-01-24 家乡互动(厦门)网络科技有限公司 一种微服务架构下的分布式链路跟踪方法
CN111459766A (zh) * 2019-11-14 2020-07-28 国网浙江省电力有限公司信息通信分公司 一种面向微服务系统的调用链跟踪与分析方法
CN111078432A (zh) * 2019-12-10 2020-04-28 深圳前海环融联易信息科技服务有限公司 一种服务之间调度的追踪方法及装置
CN111459760A (zh) * 2020-04-01 2020-07-28 交通银行股份有限公司太平洋信用卡中心 一种微服务监控方法、装置及计算机存储介质

Cited By (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113157478B (zh) * 2021-04-21 2024-05-10 多点(深圳)数字科技有限公司 一种分布式系统配置化数据采集和业务报警系统
CN113157478A (zh) * 2021-04-21 2021-07-23 多点(深圳)数字科技有限公司 一种分布式系统配置化数据采集和业务报警系统
CN113297076A (zh) * 2021-05-21 2021-08-24 建信金融科技有限责任公司 基于调用链的服务变更识别方法及装置
CN113590372A (zh) * 2021-08-10 2021-11-02 平安普惠企业管理有限公司 基于日志的链路追踪方法、装置、计算机设备及存储介质
CN115720190A (zh) * 2021-08-24 2023-02-28 上海宝信软件股份有限公司 穿透式运营的调用链日志系统及方法
CN113688012A (zh) * 2021-09-09 2021-11-23 中国银行股份有限公司 调用链监控系统及方法
CN113849331B (zh) * 2021-09-22 2023-09-29 网易（杭州）网络有限公司 混合技术栈的异常追踪方法、系统、装置、设备及介质
CN113849331A (zh) * 2021-09-22 2021-12-28 网易（杭州）网络有限公司 混合技术栈的异常追踪方法、系统、装置、设备及介质
CN113901097A (zh) * 2021-10-12 2022-01-07 山东可信云信息技术研究院 微服务架构下服务链路及业务的快速检索方法及系统
CN114064718A (zh) * 2021-11-05 2022-02-18 上海新炬网络技术有限公司 一种基于日志分析的业务调用链的网络故障定位方法
CN113986759A (zh) * 2021-11-16 2022-01-28 中国工商银行股份有限公司 业务处理流程获取方法、业务架构流程验证方法及系统
CN114116426A (zh) * 2021-11-30 2022-03-01 平安养老保险股份有限公司 基于微服务的跟踪日志生成方法、装置、设备及介质
CN114143369A (zh) * 2021-12-09 2022-03-04 华人运通(上海)云计算科技有限公司 一种云平台的服务监控系统
US11561849B1 (en) * 2022-01-05 2023-01-24 International Business Machines Corporation Intelligently adaptive log level management of a service mesh
US20230247099A1 (en) * 2022-02-01 2023-08-03 International Business Machines Corporation Intelligent, fast-forwarded health checks within service mesh
CN114338494A (zh) * 2022-03-13 2022-04-12 北京金堤科技有限公司 服务依赖拓扑关系获取方法和装置、存储介质和电子设备
CN114338494B (zh) * 2022-03-13 2022-05-27 北京金堤科技有限公司 服务依赖拓扑关系获取方法和装置、存储介质和电子设备
CN114745295B (zh) * 2022-04-19 2024-08-16 京东科技控股股份有限公司 数据采集方法、装置、设备和可读存储介质
CN114745295A (zh) * 2022-04-19 2022-07-12 京东科技控股股份有限公司 数据采集方法、装置、设备和可读存储介质
CN114844797A (zh) * 2022-05-27 2022-08-02 中国银行股份有限公司 调用链日志与监控日志关联方法及微服务异常检测方法
CN115086376A (zh) * 2022-06-16 2022-09-20 云赛智联股份有限公司 一种基于微服务的政务数据处理系统
CN115118583B (zh) * 2022-06-29 2024-03-26 北京奇艺世纪科技有限公司 日志查询方法、装置、电子设备及计算机可读存储设备
CN115118583A (zh) * 2022-06-29 2022-09-27 北京奇艺世纪科技有限公司 日志查询方法、装置、电子设备及计算机可读存储设备
CN115022213B (zh) * 2022-06-30 2024-04-05 福州畅昕信息科技有限公司 一种请求异常识别的方法与存储介质
CN115022213A (zh) * 2022-06-30 2022-09-06 福州畅昕信息科技有限公司 一种请求异常识别的方法与存储介质
CN115129491B (zh) * 2022-07-08 2024-03-05 盐城天眼察微科技有限公司 微服务请求消息跟踪方法、生成方法、装置、介质及设备
CN115129491A (zh) * 2022-07-08 2022-09-30 盐城金堤科技有限公司 微服务请求消息跟踪方法、生成方法、装置、介质及设备
CN115412592B (zh) * 2022-08-19 2023-08-22 恒生电子股份有限公司 业务处理系统以及方法
CN115412592A (zh) * 2022-08-19 2022-11-29 恒生电子股份有限公司 业务处理系统以及方法
CN115529313B (zh) * 2022-09-16 2024-08-20 建信金融科技有限责任公司 调用链路的确定方法、装置、电子设备和介质
CN115529313A (zh) * 2022-09-16 2022-12-27 建信金融科技有限责任公司 调用链路的确定方法、装置、电子设备和介质
CN115766391A (zh) * 2022-09-26 2023-03-07 阿波罗智能技术(北京)有限公司 消息跟踪方法、消息生成方法、装置、设备、介质和车辆
WO2024066518A1 (zh) * 2022-09-27 2024-04-04 中兴通讯股份有限公司 效率瓶颈检测的方法和装置、计算机可读介质
CN115658431A (zh) * 2022-10-25 2023-01-31 贝壳找房(北京)科技有限公司 链路追踪的方法、电子设备及计算机可读存储介质
CN116016646B (zh) * 2022-11-07 2024-05-28 中国工商银行股份有限公司 业务访问控制方法、装置、设备及介质
CN116016646A (zh) * 2022-11-07 2023-04-25 中国工商银行股份有限公司 业务访问控制方法、装置、设备及介质
CN115904878A (zh) * 2022-12-30 2023-04-04 支付宝(杭州)信息技术有限公司 业务变更处理方法、装置、设备及存储介质
CN115904878B (zh) * 2022-12-30 2024-09-03 支付宝(杭州)信息技术有限公司 业务变更处理方法、装置、设备及存储介质
WO2024149107A1 (zh) * 2023-01-13 2024-07-18 深圳安科百腾科技有限公司 一种软件日志处理方法
CN116232963B (zh) * 2023-02-20 2024-02-09 中银消费金融有限公司 一种链路跟踪方法及系统
CN116232963A (zh) * 2023-02-20 2023-06-06 中银消费金融有限公司 一种链路跟踪方法及系统
CN116431459B (zh) * 2023-06-12 2023-08-18 北京新里程叮铃科技有限公司 分布式日志链路跟踪数据处理方法及装置
CN116431459A (zh) * 2023-06-12 2023-07-14 北京新里程叮铃科技有限公司 分布式日志链路跟踪数据处理方法及装置
CN116756044B (zh) * 2023-08-11 2023-11-21 杭州罗莱迪思科技股份有限公司 一种基于数据链路追踪的rpc远程调试方法、装置及应用
CN116756044A (zh) * 2023-08-11 2023-09-15 杭州罗莱迪思科技股份有限公司 一种基于数据链路追踪的rpc远程调试方法、装置及应用
CN116775440B (zh) * 2023-08-21 2023-12-01 青岛民航凯亚系统集成有限公司 一种基于机场生产运营系统的日志级链路追踪方法及系统
CN116775440A (zh) * 2023-08-21 2023-09-19 青岛民航凯亚系统集成有限公司 一种基于机场生产运营系统的日志级链路追踪方法及系统
CN117692310A (zh) * 2023-12-25 2024-03-12 北京优特捷信息技术有限公司 基于zipkin链路数据的拓扑聚合方法、装置、电子设备及介质

Also Published As

Publication number Publication date
CN112612675B (zh) 2023-02-28

Similar Documents

Publication Publication Date Title
CN112612675B (zh) 微服务架构下的分布式大数据日志链路跟踪方法及系统
US20210271582A1 (en) Operation and maintenance system and method
CN106656536B (zh) 一种用于处理服务调用信息的方法与设备
EP3425524A1 (en) Cloud platform-based client application data calculation method and device
CN109885496B (zh) 测试日志管理方法及系统
CN108737170A (zh) 一种批量日志异常数据告警方法及装置
CN110096419A (zh) 接口日志的获取方法、接口日志管理服务器及业务服务器
CN112711496A (zh) 日志信息全链路追踪方法、装置、计算机设备和存储介质
CN112069049A (zh) 数据监控管理方法、装置、服务器及可读存储介质
CN109828886B (zh) 一种容器云环境下的ci/cd监控方法和系统
CN111092752B (zh) 跨多个网络切片的故障定位方法及装置
CN109254912A (zh) 一种自动化测试的方法及装置
CN113596078B (zh) 业务问题定位方法及装置
CN111314137A (zh) 信息通信网络自动化运维方法、装置、存储介质和处理器
CN113760677A (zh) 异常链路分析方法、装置、设备及存储介质
CN112527619A (zh) 一种基于有向无环图结构的分析链路调用方法及系统
CN112579552A (zh) 日志存储及调用方法、装置及系统
CN114143369A (zh) 一种云平台的服务监控系统
CN111324583B (zh) 一种业务日志的分类方法及装置
CN112069144A (zh) 一种多控集群收集系统日志的方法及装置
CN112214459A (zh) 基于事件机制的资源处理流程日志收集系统
CN117135030A (zh) 告警关联分析方法、装置、终端设备以及存储介质
CN113238901B (zh) 多设备的自动化测试方法及装置、存储介质、计算机设备
CN112860527A (zh) 应用服务器的故障监测方法及装置
CN113918636A (zh) 一种基于etl的数据处理量分析方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: Distributed Big Data Log Link Tracking Method and System under Microservices Architecture

Effective date of registration: 20230728

Granted publication date: 20230228

Pledgee: Jinan Rural Commercial Bank Co.,Ltd. Runfeng sub branch

Pledgor: Shandong jingweishengrui Data Technology Co.,Ltd.

Registration number: Y2023980050126