CStdioFile 不能处理大于 2GB 的文件?
CStdioFile cannot work with files larger than 2GB?
我正在使用 Visual C++ 2008。在 VC++ 2008 中,CFile
支持 2^64 个大文件。所以我觉得CStdioFile
也应该支持。
然而,当在大于 2GB 的文件上使用 CStdioFile::GetLength()
时,我得到一个 CFileException
,下面是代码片段:
void CTestCStdioFileDlg::OnBnClickedButton1()
{
// TODO: Add your control notification handler code here
CStdioFile MyFile;
CString strLine;
ULONGLONG uLength;
strLine = _T("This is a line.");
if (MyFile.Open(_T("C:\Temp\MyTest.dat"), CFile::modeCreate | CFile::modeWrite | CFile::shareExclusive | CFile::typeBinary))
{
for (UINT uIndex = 0; uIndex = 200000000; uIndex ++)
{
MyFile.WriteString(strLine);
uLength = MyFile.GetLength();
}
MyFile.Close();
}
}
跟踪到CStdio::GetLength()
后,我发现下面的代码片段会引发异常,如下所示:
nCurrent = ftell(m_pStream); -> This will return -1
if (nCurrent == -1)
AfxThrowFileException(CFileException::invalidFile, _doserrno,
m_strFileName);
令人惊讶的是CStdioFile
仍然使用ftell
而不是_ftelli64
来处理流
然后我在文档中搜索 CStdioFile
,我找不到 CStdioFile::GetLength
上的任何文档,唯一相关的是 https://docs.microsoft.com/en-us/cpp/mfc/reference/cstdiofile-class?view=vs-2019#seek,它让我看 fseek
文档。但是在 fseek
文档中,我仍然没有找到任何与文件大小限制相关的内容。
终于找到第三方网站,提示CStdioFile::GetLength
包含错误:http://www.flounder.com/msdn_documentation_errors_and_omissions.htm#CStdioFile::GetLength,但没有提供解决方案。
除此之外,网上几乎没有任何关于CStdioFile
2GB 限制的问题或帖子。真是奇怪。
我尝试检查CStdioFile
iN VC++ 2017的源代码,它与2008的源代码相同。
那么有没有不用重写整个问题的简单解决方案CStdioFile
class?
CStdioFile exists primarily for a single reason: It's constructor taking a FILE*
argument. The purpose of this class is to wrap a C Runtime file 并通过 CFile
兼容的接口公开它。该实现继承了所有 C 运行时限制,特别是 2GB 的文件大小限制。
要解决这个问题,有几种选择:
如果可能,完全放弃使用 CStdioFile
。除非您正在与(遗留)C 代码交互,否则没有明显的理由使用它。
如果这不是一个选项,则从 CStdioFile
和 override
所有 class 成员派生自定义实现,这些成员显示文件相对偏移量(GetPosition()
、GetLength()
、Seek()
)。所有其他 class 成员不受影响,可以简单地继承。 (注意:执行GetLength()
时一定要恢复当前文件指针。)
Microsoft 为其 C 运行时提供扩展,提供 64 位宽的偏移量 (_ftelli64 and _fseeki64)。
如果您需要选择选项 2,CStdioFile
的以下扩展可用作直接替换,支持大于 2GB 的文件。
CStdioFileExt.h:
#pragma once
#include <afx.h>
class CStdioFileExt : public CStdioFile
{
DECLARE_DYNAMIC(CStdioFileExt)
public:
ULONGLONG GetPosition() const override;
ULONGLONG GetLength() const override;
ULONGLONG Seek(LONGLONG lOff, UINT nFrom) override;
};
CStdioFileExt.cpp:
#include "CStdioFileExt.h"
ULONGLONG CStdioFileExt::GetPosition() const
{
ASSERT_VALID(this);
ASSERT(m_pStream != NULL);
auto const pos = _ftelli64(m_pStream);
if (pos == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
return static_cast<ULONGLONG>(pos);
}
ULONGLONG CStdioFileExt::GetLength() const
{
ASSERT_VALID(this);
auto const nCurrent = _ftelli64(m_pStream);
if (nCurrent == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
auto nResult = _fseeki64(m_pStream, 0, SEEK_END);
if (nResult != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
auto const nLength = _ftelli64(m_pStream);
if (nLength == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
nResult = _fseeki64(m_pStream, nCurrent, SEEK_SET);
if (nResult != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
return static_cast<ULONGLONG>(nLength);
}
ULONGLONG CStdioFileExt::Seek(LONGLONG lOff, UINT nFrom)
{
ASSERT_VALID(this);
ASSERT(nFrom == begin || nFrom == end || nFrom == current);
ASSERT(m_pStream != NULL);
if (_fseeki64(m_pStream, lOff, nFrom) != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
auto const pos = _ftelli64(m_pStream);
return static_cast<ULONGLONG>(pos);
}
IMPLEMENT_DYNAMIC(CStdioFileExt, CStdioFile)
我正在使用 Visual C++ 2008。在 VC++ 2008 中,CFile
支持 2^64 个大文件。所以我觉得CStdioFile
也应该支持。
然而,当在大于 2GB 的文件上使用 CStdioFile::GetLength()
时,我得到一个 CFileException
,下面是代码片段:
void CTestCStdioFileDlg::OnBnClickedButton1()
{
// TODO: Add your control notification handler code here
CStdioFile MyFile;
CString strLine;
ULONGLONG uLength;
strLine = _T("This is a line.");
if (MyFile.Open(_T("C:\Temp\MyTest.dat"), CFile::modeCreate | CFile::modeWrite | CFile::shareExclusive | CFile::typeBinary))
{
for (UINT uIndex = 0; uIndex = 200000000; uIndex ++)
{
MyFile.WriteString(strLine);
uLength = MyFile.GetLength();
}
MyFile.Close();
}
}
跟踪到CStdio::GetLength()
后,我发现下面的代码片段会引发异常,如下所示:
nCurrent = ftell(m_pStream); -> This will return -1
if (nCurrent == -1)
AfxThrowFileException(CFileException::invalidFile, _doserrno,
m_strFileName);
令人惊讶的是CStdioFile
仍然使用ftell
而不是_ftelli64
来处理流
然后我在文档中搜索 CStdioFile
,我找不到 CStdioFile::GetLength
上的任何文档,唯一相关的是 https://docs.microsoft.com/en-us/cpp/mfc/reference/cstdiofile-class?view=vs-2019#seek,它让我看 fseek
文档。但是在 fseek
文档中,我仍然没有找到任何与文件大小限制相关的内容。
终于找到第三方网站,提示CStdioFile::GetLength
包含错误:http://www.flounder.com/msdn_documentation_errors_and_omissions.htm#CStdioFile::GetLength,但没有提供解决方案。
除此之外,网上几乎没有任何关于CStdioFile
2GB 限制的问题或帖子。真是奇怪。
我尝试检查CStdioFile
iN VC++ 2017的源代码,它与2008的源代码相同。
那么有没有不用重写整个问题的简单解决方案CStdioFile
class?
CStdioFile exists primarily for a single reason: It's constructor taking a FILE*
argument. The purpose of this class is to wrap a C Runtime file 并通过 CFile
兼容的接口公开它。该实现继承了所有 C 运行时限制,特别是 2GB 的文件大小限制。
要解决这个问题,有几种选择:
如果可能,完全放弃使用
CStdioFile
。除非您正在与(遗留)C 代码交互,否则没有明显的理由使用它。如果这不是一个选项,则从
CStdioFile
和override
所有 class 成员派生自定义实现,这些成员显示文件相对偏移量(GetPosition()
、GetLength()
、Seek()
)。所有其他 class 成员不受影响,可以简单地继承。 (注意:执行GetLength()
时一定要恢复当前文件指针。)Microsoft 为其 C 运行时提供扩展,提供 64 位宽的偏移量 (_ftelli64 and _fseeki64)。
如果您需要选择选项 2,CStdioFile
的以下扩展可用作直接替换,支持大于 2GB 的文件。
CStdioFileExt.h:
#pragma once
#include <afx.h>
class CStdioFileExt : public CStdioFile
{
DECLARE_DYNAMIC(CStdioFileExt)
public:
ULONGLONG GetPosition() const override;
ULONGLONG GetLength() const override;
ULONGLONG Seek(LONGLONG lOff, UINT nFrom) override;
};
CStdioFileExt.cpp:
#include "CStdioFileExt.h"
ULONGLONG CStdioFileExt::GetPosition() const
{
ASSERT_VALID(this);
ASSERT(m_pStream != NULL);
auto const pos = _ftelli64(m_pStream);
if (pos == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
return static_cast<ULONGLONG>(pos);
}
ULONGLONG CStdioFileExt::GetLength() const
{
ASSERT_VALID(this);
auto const nCurrent = _ftelli64(m_pStream);
if (nCurrent == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
auto nResult = _fseeki64(m_pStream, 0, SEEK_END);
if (nResult != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
auto const nLength = _ftelli64(m_pStream);
if (nLength == -1L)
AfxThrowFileException(CFileException::invalidFile, _doserrno, m_strFileName);
nResult = _fseeki64(m_pStream, nCurrent, SEEK_SET);
if (nResult != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
return static_cast<ULONGLONG>(nLength);
}
ULONGLONG CStdioFileExt::Seek(LONGLONG lOff, UINT nFrom)
{
ASSERT_VALID(this);
ASSERT(nFrom == begin || nFrom == end || nFrom == current);
ASSERT(m_pStream != NULL);
if (_fseeki64(m_pStream, lOff, nFrom) != 0)
AfxThrowFileException(CFileException::badSeek, _doserrno, m_strFileName);
auto const pos = _ftelli64(m_pStream);
return static_cast<ULONGLONG>(pos);
}
IMPLEMENT_DYNAMIC(CStdioFileExt, CStdioFile)