为什么我的 BSTR 到 std::wstring 的转换这么慢?我的测试仪坏了吗?
Why is my BSTR to std::wstring conversion so slow? Is my tester bad?
我经常需要将 BSTR
字符串转换为 std::wstring
。 NULL
BSTR
算作空 BSTR
.
我以前是这样做的:
#define CHECKNULLSTR(str) ((str) ? (str) : L"")
std::wstring wstr(CHECKNULLSTR(bstr));
它不处理内部 '[=20=]'
个字符,但它还需要计算字符数才能分配足够的内存,所以它应该很慢。我想到了这个优化,应该可以处理所有情况,不会截断,也不需要计数:
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
为了测试此更改的影响,我编写了以下测试程序。它表明在大多数情况下优化花费的时间是原来的两倍多。在调试和发布配置中都可以观察到变化,我使用的是 VC++ 2013.
因此我的问题是,这是怎么回事? "pair of pointers" 迭代器构造函数怎么会比 C-String 构造函数慢这么多?
完整测试人员
#include <windows.h>
#include <stdio.h>
#include <tchar.h>
#include <strsafe.h>
#include <iostream>
#define CHECKNULLSTR(str) ((str) ? (str) : L"")
ULONGLONG bstrAllocTest(UINT iterations = 10000)
{
ULONGLONG totallen = 0;
ULONGLONG start, stop, elapsed1, elapsed2;
BSTR bstr = ::SysAllocString( // 15 * 50 = 750 chars
L"01234567890123456789012345678901234567890123456789" // 1
L"01234567890123456789012345678901234567890123456789" // 2
L"01234567890123456789012345678901234567890123456789" // 3
L"01234567890123456789012345678901234567890123456789" // 4
L"01234567890123456789012345678901234567890123456789" // 5
L"01234567890123456789012345678901234567890123456789" // 6
L"01234567890123456789012345678901234567890123456789" // 7
L"01234567890123456789012345678901234567890123456789" // 8
L"01234567890123456789012345678901234567890123456789" // 9
L"01234567890123456789012345678901234567890123456789" // 10
L"01234567890123456789012345678901234567890123456789" // 11
L"01234567890123456789012345678901234567890123456789" // 12
L"01234567890123456789012345678901234567890123456789" // 13
L"01234567890123456789012345678901234567890123456789" // 14
L"01234567890123456789012345678901234567890123456789" // 15
);
start = ::GetTickCount64();
for (UINT i = 1; i <= iterations; ++i)
{
std::wstring wstr(CHECKNULLSTR(bstr));
size_t len;
::StringCchLengthW(wstr.c_str(), STRSAFE_MAX_CCH, &len);
totallen += len;
}
stop = ::GetTickCount64();
elapsed1 = stop - start;
start = ::GetTickCount64();
for (UINT i = 1; i <= iterations; ++i)
{
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
size_t len;
::StringCchLengthW(wstr.c_str(), STRSAFE_MAX_CCH, &len);
totallen += len;
}
stop = ::GetTickCount64();
elapsed2 = stop - start;
wprintf_s(L"Iter:\t%u\n"
L"Elapsed (CHECKNULLSTR):\t%10llu ms\n"
L"Elapsed (Ptr iter pair):\t%10llu ms\n"
L"Speed difference:\t%f %%\n",
iterations,
elapsed1,
elapsed2,
(static_cast<double>(elapsed2) / elapsed1 * 100));
::SysFreeString(bstr);
return totallen;
}
int wmain(int argc, char* argv[])
{
ULONGLONG dummylen = bstrAllocTest(100 * 1000);
wprintf_s(L"\nTotal length:\t%llu", dummylen);
getchar();
return 0;
}
我系统上的输出
Iter: 100000
Elapsed (CHECKNULLSTR): 296 ms
Elapsed (Ptr it pair): 577 ms
Speed difference: 194.932432 %
Total length: 150000000
确实很有趣,也有点令人惊讶。 Visual C++ 2013 Update 4 的性能差异在于两个 std::wstring
构造函数在其标准库中的实现方式。一般来说,采用一对迭代器的构造函数必须处理更多的情况,因为这些迭代器不一定是指针,它们可以指向其他数据类型而不是字符串的字符类型(字符类型只需要从指向的类型构造由迭代器)。但是,我希望实现能够使用优化代码单独处理您的案例。
std::wstring wstr(CHECKNULLSTR(bstr));
确实是扫描字符串的结尾0
,然后分配,然后使用memcpy
以最快的方式复制字符串数据,这是使用汇编代码实现的.
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
确实避免了扫描,因为 ::SysStringLen
(速度非常快,只读取存储的长度),然后分配,然后使用以下循环复制字符串数据:
for (; _First != _Last; ++_First)
append((size_type)1, (_Elem)*_First);
VC12 决定不内联 append
调用(可以理解,主体相当大),正如您可以想象的那样,与炽热的 memcpy
.
一种解决方案是使用带有指针和计数的 std::basic_string
构造函数(Ben Voigt 在他的评论中也提到了),如下所示:
std::wstring wstr(CHECKNULLSTR(bstr), ::SysStringLen(bstr));
我刚刚对其进行了测试,它确实在 Visual C++ 2013 上带来了预期的好处 - 它有时只需要第一个版本的一半时间,在最坏的情况下大约需要 75%(无论如何这些都是近似测量值).
Visual C++ 2015 CTP6 中的标准库实现为采用迭代器对的构造函数优化了代码路径,当迭代器实际上是指向与要构造的字符串相同的字符类型的指针时,会产生基本相同的代码作为上面的指针和计数变体。因此,在这个版本上,您使用这两个构造函数变体中的哪一个并不重要 - 它们都比仅采用指针的版本更快。
我经常需要将 BSTR
字符串转换为 std::wstring
。 NULL
BSTR
算作空 BSTR
.
我以前是这样做的:
#define CHECKNULLSTR(str) ((str) ? (str) : L"")
std::wstring wstr(CHECKNULLSTR(bstr));
它不处理内部 '[=20=]'
个字符,但它还需要计算字符数才能分配足够的内存,所以它应该很慢。我想到了这个优化,应该可以处理所有情况,不会截断,也不需要计数:
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
为了测试此更改的影响,我编写了以下测试程序。它表明在大多数情况下优化花费的时间是原来的两倍多。在调试和发布配置中都可以观察到变化,我使用的是 VC++ 2013.
因此我的问题是,这是怎么回事? "pair of pointers" 迭代器构造函数怎么会比 C-String 构造函数慢这么多?
完整测试人员
#include <windows.h>
#include <stdio.h>
#include <tchar.h>
#include <strsafe.h>
#include <iostream>
#define CHECKNULLSTR(str) ((str) ? (str) : L"")
ULONGLONG bstrAllocTest(UINT iterations = 10000)
{
ULONGLONG totallen = 0;
ULONGLONG start, stop, elapsed1, elapsed2;
BSTR bstr = ::SysAllocString( // 15 * 50 = 750 chars
L"01234567890123456789012345678901234567890123456789" // 1
L"01234567890123456789012345678901234567890123456789" // 2
L"01234567890123456789012345678901234567890123456789" // 3
L"01234567890123456789012345678901234567890123456789" // 4
L"01234567890123456789012345678901234567890123456789" // 5
L"01234567890123456789012345678901234567890123456789" // 6
L"01234567890123456789012345678901234567890123456789" // 7
L"01234567890123456789012345678901234567890123456789" // 8
L"01234567890123456789012345678901234567890123456789" // 9
L"01234567890123456789012345678901234567890123456789" // 10
L"01234567890123456789012345678901234567890123456789" // 11
L"01234567890123456789012345678901234567890123456789" // 12
L"01234567890123456789012345678901234567890123456789" // 13
L"01234567890123456789012345678901234567890123456789" // 14
L"01234567890123456789012345678901234567890123456789" // 15
);
start = ::GetTickCount64();
for (UINT i = 1; i <= iterations; ++i)
{
std::wstring wstr(CHECKNULLSTR(bstr));
size_t len;
::StringCchLengthW(wstr.c_str(), STRSAFE_MAX_CCH, &len);
totallen += len;
}
stop = ::GetTickCount64();
elapsed1 = stop - start;
start = ::GetTickCount64();
for (UINT i = 1; i <= iterations; ++i)
{
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
size_t len;
::StringCchLengthW(wstr.c_str(), STRSAFE_MAX_CCH, &len);
totallen += len;
}
stop = ::GetTickCount64();
elapsed2 = stop - start;
wprintf_s(L"Iter:\t%u\n"
L"Elapsed (CHECKNULLSTR):\t%10llu ms\n"
L"Elapsed (Ptr iter pair):\t%10llu ms\n"
L"Speed difference:\t%f %%\n",
iterations,
elapsed1,
elapsed2,
(static_cast<double>(elapsed2) / elapsed1 * 100));
::SysFreeString(bstr);
return totallen;
}
int wmain(int argc, char* argv[])
{
ULONGLONG dummylen = bstrAllocTest(100 * 1000);
wprintf_s(L"\nTotal length:\t%llu", dummylen);
getchar();
return 0;
}
我系统上的输出
Iter: 100000
Elapsed (CHECKNULLSTR): 296 ms
Elapsed (Ptr it pair): 577 ms
Speed difference: 194.932432 %
Total length: 150000000
确实很有趣,也有点令人惊讶。 Visual C++ 2013 Update 4 的性能差异在于两个 std::wstring
构造函数在其标准库中的实现方式。一般来说,采用一对迭代器的构造函数必须处理更多的情况,因为这些迭代器不一定是指针,它们可以指向其他数据类型而不是字符串的字符类型(字符类型只需要从指向的类型构造由迭代器)。但是,我希望实现能够使用优化代码单独处理您的案例。
std::wstring wstr(CHECKNULLSTR(bstr));
确实是扫描字符串的结尾0
,然后分配,然后使用memcpy
以最快的方式复制字符串数据,这是使用汇编代码实现的.
std::wstring wstr(bstr, bstr + ::SysStringLen(bstr));
确实避免了扫描,因为 ::SysStringLen
(速度非常快,只读取存储的长度),然后分配,然后使用以下循环复制字符串数据:
for (; _First != _Last; ++_First)
append((size_type)1, (_Elem)*_First);
VC12 决定不内联 append
调用(可以理解,主体相当大),正如您可以想象的那样,与炽热的 memcpy
.
一种解决方案是使用带有指针和计数的 std::basic_string
构造函数(Ben Voigt 在他的评论中也提到了),如下所示:
std::wstring wstr(CHECKNULLSTR(bstr), ::SysStringLen(bstr));
我刚刚对其进行了测试,它确实在 Visual C++ 2013 上带来了预期的好处 - 它有时只需要第一个版本的一半时间,在最坏的情况下大约需要 75%(无论如何这些都是近似测量值).
Visual C++ 2015 CTP6 中的标准库实现为采用迭代器对的构造函数优化了代码路径,当迭代器实际上是指向与要构造的字符串相同的字符类型的指针时,会产生基本相同的代码作为上面的指针和计数变体。因此,在这个版本上,您使用这两个构造函数变体中的哪一个并不重要 - 它们都比仅采用指针的版本更快。