Phantom
a7b78c547a
fix(encoding): encoding detection and decoding logic ( #8024 )
2025-07-10 22:13:40 +08:00
Phantom
05b8afd681
feat: more encoding ( #7898 )
...
* feat(文件处理): 添加文件编码支持以正确处理不同编码的文本文件
添加文件编码检测和指定编码读取功能
- 在FileMetadata接口中添加encoding字段
- 添加iconv-lite和jschardet依赖用于编码处理和检测
- 文件上传时自动检测文本文件编码
- 文件读取时支持指定编码参数
- 更新所有API客户端以传递文件编码参数
* feat(文件处理): 添加文件编码检测和UTF-8读取功能
新增文件编码检测工具函数和UTF-8读取功能，统一处理不同编码的文件读取
移除重复的编码检测逻辑，优化代码结构
* refactor(FileStorage): 使用 readFileUTF8 替换 decodeBuffer 读取文件
移除冗余的 decodeBuffer 逻辑，直接使用封装好的 readFileUTF8 方法读取文件内容
* docs(utils): 为文件编码相关函数添加注释说明
添加对 detectEncoding、decodeBuffer 和 readFileUTF8 函数的详细注释，说明其功能和使用方法
* fix(utils): 为detectEncoding函数添加返回类型声明
* refactor(文件处理): 移除冗余的decodeBuffer函数并直接使用iconv.decode
简化文件读取逻辑，直接调用iconv.decode而不是通过中间函数decodeBuffer
* test(file): 添加文件编码检测的测试用例
* test(文件编码检测): 移除ISO-8859-1编码的测试匹配
* refactor(file): 移除文件编码相关逻辑，统一使用UTF-8读取文本文件
移除FileMetadata接口中的encoding字段及相关检测逻辑
将所有文件读取操作统一改为使用readTextFileUTF8方法
* fix(文件读取): 改进文本文件解码逻辑以处理编码识别错误
当自动识别的编码包含错误字符时，尝试其他可能的编码
* refactor(utils): 将 console 日志替换为 electron-log 记录器
* refactor(文件存储): 移除文件读取时的可选编码参数
简化文件读取逻辑，始终使用UTF-8编码读取文本文件
* fix(utils): 修复文件编码检测中的文件描述符泄漏
在detectEncoding函数中，文件描述符在使用后未关闭，可能导致资源泄漏
* refactor(文件处理): 将readTextFileUTF8重命名为readTextFileWithAutoEncoding并改进编码检测
修复文件编码检测中未正确关闭文件描述符的问题
改进文本文件读取功能以支持自动编码检测
* test(file): 重构编码检测测试用例并改进测试结构
- 将 describe 块重命名为更明确的 detectEncoding
- 提取公共的 mock 逻辑到 beforeEach
- 更新测试描述为英文并保持一致性
- 简化测试实现，移除重复代码
* test(file): 添加对readTextFileWithAutoEncoding的测试用例
2025-07-08 00:57:31 +08:00
Tristan Zhang
a8e23966fa
feat(FileStorage): add support for .doc files using word-extractor ( #7374 )
...
* feat(FileStorage): add support for .doc files and integrate word-extractor
* chore(package): add word-extractor to devdependencies
2025-06-23 08:55:03 +08:00
one
665a62080b
test: more unit tests ( #5130 )
...
* test: more unit tests
- Adjust vitest configuration to handle main process and renderer process tests separately
- Add unit tests for main process utils
- Add unit tests for the renderer process
- Add three component tests to verify vitest usage: `DragableList`, `Scrollbar`, `QuickPanelView`
- Add an e2e startup test to verify playwright usage
- Extract `splitApiKeyString` and add tests for it
- Add and format some comments
* fix: mock individual properties
* test: add tests for CustomTag
* test: add tests for ExpandableText
* test: conditional rendering tooltip of tag
* chore: update dependencies
2025-05-26 16:50:26 +08:00
