'Insufficient system resources' 当我在 ServiceFabric 集群上使用 EventFlow 监听 ETW 事件时

Question

我有一个在 Service Fabric 上使用 EventFlow 运行的 ETW 侦听器。

这是我的配置文件(eventFlowConfig.json):

{
  "inputs": [
    {
      "type": "ETW",
      "sessionNamePrefix": "MyListenerService",
      "cleanupOldSessions": true,
      "reuseExistingSession": true,
      "providers": [
        {
          "providerName": "Provider0"
        }
      ]
    }
  ],
  "filters": [],
  "outputs": [
    {
      "type": "CustomOutput"
    }
  ],
  "schemaVersion": "2018-04-04",

  "extensions": [
    {
      "category": "outputFactory",
      "type": "CustomOutput",
      "qualifiedTypeName": "MyNamespace.EventFlow.Outputs.CustomOutputFactory, MyAssembly"
    }
  ]
}

这是我的切入点：

private static void Main()
{
    try
    {
        string configurationFileName = "eventFlowConfig.json";

        using (var diagnosticsPipeline = ServiceFabricDiagnosticPipelineFactory.CreatePipeline("MyService", configurationFileName))
        {
            ServiceRuntime.RegisterServiceAsync("MyServiceType",
                context => new Service(context)).GetAwaiter().GetResult();

            ServiceEventSource.Current.ServiceTypeRegistered(Process.GetCurrentProcess().Id, typeof(Service).Name);
            // Prevents this host process from terminating so services keeps running. 
            Thread.Sleep(Timeout.Infinite);
        }
    }
    catch (Exception e)
    {
        ServiceEventSource.Current.ServiceHostInitializationFailed(e.ToString());
        throw;
    }
}

当我在调试时在本地集群中多次 start/stop 我的服务时，我得到了这个异常：

System.Runtime.InteropServices.COMException: 'Insufficient system resources exist to complete the requested service. (Exception from HRESULT: 0x800705AA)'

我必须重新启动计算机才能重新启动服务。问题是我在本地以外的其他环境中遇到相同的异常。

我试过这个：：我的服务是无状态的，每个节点只有一个实例。

此配置是否足以 free/reuse ETW 会话？

"sessionNamePrefix": "MyListenerService",
"cleanupOldSessions": true,
"reuseExistingSession": true,

有没有其他人遇到过这个问题？

编辑在@Diego Mendes 的回答之后，我已经执行了 logman -ets

...
EventFlow-EtwInput-a8aefb3c-594f-4ac7-b9d8-6da1791fb122 Trace                         Running
EventFlow-EtwInput-fe5f58e6-d1a7-4198-95b2-d343584cf46b Trace                         Running
EventFlow-EtwInput-33f67287-5563-4835-b3a1-5527e4fc5e5e Trace                         Running
EventFlow-EtwInput-959eef04-a5ae-47eb-9b7e-057a9fd3fb28 Trace                         Running
EventFlow-EtwInput-0095f186-d657-4974-a613-213d7eb49def Trace                         Running
EventFlow-EtwInput-8fbc52f5-2de6-4826-bce2-36d8abf0c264 Trace                         Running
EventFlow-EtwInput-8e654b40-c299-48f4-818e-5ebe3c2341a4 Trace                         Running
EventFlow-EtwInput-7ec63ec9-428b-4658-b059-698b5ae66986 Trace                         Running

EventFlow 忽略了我的 sessionNamePrefix 并且正在用 EventFlow-EtwInput 覆盖？可能是 EventFlow 的错误？

我会尝试使用 EventFlow-EtwInput 作为我的 sessionNamePrefix。

Answer 1

正如您所指出的，这是因为您多次启动和停止服务。每次启动服务时，都会创建一个新会话，当您在调试模式下执行此操作时，调试器会在关闭活动会话之前终止进程。

来自你链接的马特回答：

Windows has a limit of 64 ETW sessions that can be running concurrently. Consider using a single stateless app running on every node to create a single session.

您可以检查它何时再次发生，是否有任何会话通过运行此命令保持打开状态：

logman -ets

它将列出所有活动会话，您的会话可能显示如下：

MyListenerService-A402EE30-53B7-48E4-B602-76B101C0AB97

如果您有多个活动会话，是因为它没有正确关闭，也没有重新使用旧会话。

在配置中，当你设置：

cleanupOldSessions: If set to TRUE, existing ETW trace sessions matching the sessionNamePrefix will be closed. This helps to collect leftover session instances, as there is a limit on their number.

reuseExistingSession: If turned on, then an existing trace session matching the sessionNamePrefix will be re-used. If cleanupOldSessions is also turned on, then it will leave one session open for re-use.

根据您的设置，您同时使用了两个 ON，我会尝试调整这些值以查看是否可以解决问题。

Answer 2

只是添加到这个答案，因为我遇到了同样的错误。

使用

logman -ets

对于所有活动会话执行停止命令，例如

logman stop "MyListenerService-A402EE30-53B7-48E4-B602-76B101C0AB97" -ets

它帮助我继续我的代码。

'Insufficient system resources' 当我在 ServiceFabric 集群上使用 EventFlow 监听 ETW 事件时

'Insufficient system resources' when I listen ETW events with EventFlow on ServiceFabric cluster

c#

etw

event-flow

azure-service-fabric

asp.net-core