 Lu Fan(SonnyCalcr)
|
692bed7d7c
|
fix(engine): 出厂词库换过时，回放不再用旧量级的调频权重压住新词频 (#1049)
用户词库日志存的是调频写下的绝对权重。词库升级换了权重量级后（msime-dictionary
把拼音词频对齐万象，「了 le」从 348 万变成 5200 万），安装时的回放仍把旧词库上
调出来的 650 万写回去，打 l 时「了」排到「来」「里」后面。
回放现在用数据目录里 dictionary-manifest.json 记的 msime.db SHA-256 认出厂词库，
并在日志新增的 dictionary_state 表记下回放到哪份。同一份词库照旧原样写回；换了
词库（或日志还没有记录）时，自动调频的行只在高过新出厂权重时写回，否则保留新
权重并把日志改记成新权重。用户手动加的词和删除不变。
设置页改权重改走新的 record_weight_edit，记在新增的 weight_edited 列里，换词库时
照写不让位；之后的自动调频覆盖同一行时清掉这个标记。
|
2026-10-18 10:40:59 +08:00 |
|
|
fanlusky
|
a219e499f6
|
fix(engine): 全拼纠错上下文接管让位于用户在主切读音上的选择
加载 sc.lm 时词格路径分里的词库权重只剩 dictionary_tiebreak（≤0.07）和
reading_prior，调频改的权重翻不过 1.0 的接管边际：banzhng 的用户每次都选
班长，办证系照样每次领衔，调频在这组词上被架空。
接管前加一道判据：主切键在用户日志里有 upsert，且主切整键首位权重不低于
胜出切分首位（即用户已把主切读音选到前面），就不接管、走按权重排序的静态
合并。出货词频本身仍交给上下文裁决；日志只在边际达标后查一次。
测试用手写 ARPA 作 sc.lm，让 LM 稳定偏向办证，覆盖无用户记录照常接管、
用户选过班长不再接管、用户记录未越过胜者照常接管三种情形。
|
2026-10-04 14:35:50 +08:00 |
|
|
fanlusky
|
05d202ce5b
|
feat(server): 日期时间候选支持调频、置顶、固定位置，并加「📅日期」格式入口
日期时间候选（Shift+T 模式与 rq / sj / xq 混输）按格式 ID 调频：日期文本每天都变，
所以给每种格式一个稳定 ID，学到的顺序记在用户库新表 date_time_format_order，固定位置
借用 fixed_candidate_positions。T 模式与混输共用一份顺序，混输取排第一的格式。右键
置顶、固定位置、取消固定对日期候选生效。
混输时在第三位放一个「📅日期」入口（时间为「🕒时间」），选中后不上屏，候选框整页换成
全部格式，与 Ctrl+Enter 译文页同一套子页机制。新增开关 utility.date_time_menu，默认
打开，出厂模板、工作配置、两个设置宿主与设置页同步更新。UILess 宿主不显示入口。
|
2026-10-03 20:44:22 +08:00 |
|
|
fanlusky
|
c280634c2a
|
fix(engine,server): 词库切到 WAL，避免调频写入阻塞按键线程
选词后的调频写入在词库写线程上提交 msime_user.db / msime.db。两个库都是
默认的 rollback-journal 模式，提交时持独占锁并 fsync，按键线程此时读同一个
库（引擎查询、apply_fixed_positions）就得等完整个提交。磁盘忙或杀软扫描
-journal 时单键可达 0.7~1.1 s，后续按键排队；排队期间按空格/数字会超过 TSF
300 ms 的上屏回复等待，组合被当作传输失败丢掉，表现为输入消失。
- 用户日志库每次建连接时切到 WAL；msime.db 在每次创建输入会话时切到 WAL
（安装升级会换上非 WAL 的新文件）。WAL 下读取看到最近一次提交的快照，
不再等写锁。安装器已保留 msime_user.db-wal/-shm、替换词库前删除旧的
msime.db-wal/-shm。
- ensure_schema 的 PRAGMA user_version=3 本身是写操作，版本已一致时跳过，
建连接不再被其他写者阻塞。
- 新增回归测试：两个库都被写事务锁住时，读取须在 1 s 内返回提交前的内容。
本地用真实词库加锁测量：被锁时首键 769 ms -> 0.5 ms，
apply_fixed_positions 810 ms -> 0.4 ms。
|
2026-10-02 14:57:31 +08:00 |
|
|
fanlusky
|
c99fb8d585
|
fix(engine): 英文调频不再以中文权重为基准，并按输入记英文槽位
混输列表里英文调频把「全表最高权重 + 1000」写成新权重，中文候选也算在内。
在 zai 下选一次 zaire，它的权重就变成 19,196,987，超过「在」，并且对所有能查出它的输入永久生效。
- adjust_english_candidate_ranking 只用英文候选的权重当基准
- 新增 english_slots 表和 english_slot / set_english_slot /
learn_english_slot_selection / learn_english_slot_bypass：按输入记录首个英文候选在列表中的位置，
选中时按调频名次前移（可以升到首位），越过它时后退一位，最多到首页末位
- 新增 InputSession::reads_as_pinyin：整串能否读成拼音（允许简拼声母和打到一半的音节）
|
2026-09-30 22:49:27 +08:00 |
|
|
fanlusky
|
42fbb9541c
|
feat(engine): 快捷短语混入全拼 / 双拼候选并参与调频
Shift+K 快捷短语模式保留，仍按编码前缀查询（query_quick_phrases）。另外全拼 / 双拼下
编码精确匹配（query_quick_phrases_by_code）的快捷短语作为一组插在固定位置候选之后，由
LocalModeOptions::quick_phrase_candidates 单独开关；五笔不混。
用户日志新增 quick_phrase_slots 表记录快捷短语组前的普通候选数：选中短语让组前移，
越过组选普通候选让组后移，后移上限为页长减一。quick_phrase_frequency 关掉时组固定在
首位。与普通候选同文本时保留快捷短语那份。
|
2026-09-29 14:31:51 +08:00 |
|
|
Jia Sui
|
c6632e8d85
|
feat(engine): 五笔前缀逐键提示与调频接线
- 码表查询从精确匹配改为前缀匹配：精确等长行优先（保住一级/二级简码），
前缀行按权重降序跟随，LIMIT 50 截断（引擎层不读 server 配置的分层边界）
- WubiCandidateProvider 注入 RuntimePaths：接通 update_weight / delete_by_key
到 user_dictionary journal；新增 bump_wubi_weight（同码组 MAX+1、主库更新
与 journal upsert 同事务，行缺失不造行）
- create_word / cache_dynamic_candidate 补「为何 no-op」注释（后续任务范畴）
- 两个 toml 的 wubi_schema 注释与实现对齐：当前仅支持 wubi86
- server 测试：前缀语义、LIMIT 截断、上界构造、调频+journal 回放、删词墓碑
|
2026-09-22 09:23:25 +08:00 |
|
|
fanlusky
|
a7779d2b05
|
refactor(engine): 将 engine 从 submodule 内嵌为仓内一等组件
`vendor/MetasequoiaImeEngine` submodule 改为 `engine/` 目录，导入的是
product-lock.json 原本钉住的提交 c810d201，逐文件核对过 blob，因此这是一次
搬迁而不是引擎升级。引擎自己的嵌套 submodule（googlepinyinime-rev、utfcpp、
miniaudio）按各自 gitlink 一并展开，来源与提交见 engine/UPSTREAM.md。
Windows 专门化裁掉了不属于本产品的部分：whisper.cpp 与本地推理 provider、
macOS 示例宿主、整个 dictionary/ 建库流水线、上游 CI 与 release-please 配置。
词库仍按 product-lock.json 在构建时取发布产物。
引擎不再进 product-lock.json：没有 gitlink 就没有可比对的东西，锁里写一个上游
commit 等于宣称这棵树仍等于上游，而第一个 Windows 专门化改动落地时这句话就假了。
verify-contracts / verify-checkout 随之移除，verify-published 保留。
CI 与工具链：引擎源码并入根 scripts/format.sh（删掉引擎自己的那份，避免两套排除
列表分叉）；引擎 voice.yml 里的 silero_vad.onnx 摘要校验移到本仓 lock job；
engine-bump-triage 工作流与其测试删除；gitsubmodule 的 dependabot 频率由 daily
改为 monthly。
README、README.en、AGENTS.md、CONTRIBUTING、docs/product-release.md 及各子目录
文档同步说明新的位置与边界。
|
2026-09-12 03:40:48 +08:00 |
|