tomoaki/hakorune
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
1,402 Commits 1 Branch 0 Tags
29058d2c9a583e53cf699d57d2a2ab5c256986bc
Commit Graph

203 Commits

Author SHA1 Message Date
nyash-codex
588129db65 feat(joinir): Phase 34-6 MethodCall 構造と本物の substring 意味論 
**Phase 34-6 実装完了**: MethodCall 構造を JoinIR に追加し、本物の substring
呼び出しを通すことに成功。

## 主要変更

### 1. MethodCall 構造追加 (34-6.1)
- `src/mir/join_ir/mod.rs`: JoinInst::MethodCall バリアント (+8 lines)
  - 構造: `{ dst, receiver, method, args }`
  - 設計原則: JoinIR は構造のみ、意味論は MIR レベル

### 2. extract_value 更新 (34-6.2)
- `src/mir/join_ir/frontend/ast_lowerer.rs`: Method 処理本物化 (+37 lines)
  - receiver/args を extract_value で再帰処理
  - ダミー Const(0) 削除 → 本物の MethodCall 生成
  - cond 処理修正: ValueId(0) ハードコード → extract_value で取得

### 3. JoinIR→MIR 変換実装 (34-6.3)
- `src/mir/join_ir_vm_bridge.rs`: MethodCall → BoxCall 変換 (+12 lines)
- `src/mir/join_ir/json.rs`: MethodCall JSON シリアライゼーション (+16 lines)
- `src/mir/join_ir_runner.rs`: MethodCall 未対応エラー (+7 lines)

### 4. テスト更新 (34-6.4)
- `docs/.../fixtures/json_shape_read_value.program.json`: 本物の substring 構造
- `src/tests/joinir_frontend_if_select.rs`: run_joinir_via_vm 使用
- テスト成功: v="hello", at=3 → "hel" ✅

## 成果

- ✅ テスト全通過（1 passed; 0 failed）
- ✅ 設計原則確立: JoinIR = 構造 SSOT、意味論 = MIR レベル
- ✅ Phase 33-10 原則との整合性: Method でも同じ原則適用

**ドキュメント更新**: CURRENT_TASK.md + TASKS.md（Phase 34-6 完了記録）

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-27 17:05:46 +09:00
nyash-codex
35cd93a37a Phase 33-2: JoinInst::Select implementation + minimal If JoinIR lowering 
Implementation:
- Add JoinInst::Select variant to JoinIR schema
- Implement Select execution in JoinIR Runner (Bool/Int cond support)
- Add Select handling in JoinIR→MIR Bridge (4-block structure)
- Create test cases (joinir_if_select_simple/local.hako)
- Add dev toggle NYASH_JOINIR_IF_SELECT=1
- Create lowering infrastructure (if_select.rs, stub for Phase 33-3)

Tests:
- 3/3 unit tests pass (test_select_true/false/int_cond)
- Integration tests pass (RC: 0)
- A/B execution verified (existing if_phi vs JoinIR Select)

Files changed:
- New: apps/tests/joinir_if_select_{simple,local}.hako
- New: src/mir/join_ir/lowering/if_select.rs
- Modified: src/mir/join_ir/{mod,json,runner,vm_bridge}.rs
- Modified: src/config/env.rs (joinir_if_select_enabled)
- Modified: docs/reference/environment-variables.md

Phase 33-3 ready: MIR pattern recognition + auto-lowering pending

🤖 Generated with Claude Code
Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-27 02:58:38 +09:00
nyash-codex
51ff558904 feat(phase32): L-2.1 Stage-1 UsingResolver JoinIR integration + cleanup 
Phase 32 L-2.1 complete implementation:

1. Stage-1 UsingResolver main line JoinIR connection
   - CFG-based LoopForm construction for resolve_for_source/5
   - LoopToJoinLowerer integration with handwritten fallback
   - JSON snapshot tests 6/6 PASS

2. JoinIR/VM Bridge improvements
   - Simplified join_ir_vm_bridge.rs dispatch logic
   - Enhanced json.rs serialization
   - PHI core boxes cleanup (local_scope_inspector, loop_exit_liveness, loop_var_classifier)

3. Stage-1 CLI enhancements
   - Extended args.rs, groups.rs, mod.rs for new options
   - Improved stage1_bridge module (args, env, mod)
   - Updated stage1_cli.hako

4. MIR builder cleanup
   - Simplified if_form.rs control flow
   - Removed dead code from loop_builder.rs
   - Enhanced phi_merge.rs

5. Runner module updates
   - json_v0_bridge/lowering.rs improvements
   - dispatch.rs, selfhost.rs, modes/vm.rs cleanup

6. Documentation updates
   - CURRENT_TASK.md, AGENTS.md
   - Various docs/ updates

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-26 10:17:37 +09:00
nyash-codex
29ae922a57 feat(joinir): Stage-1 UsingResolver JoinIR VM Bridge A/B test 
Phase 30.x: Stage-1 ループでも PHI バグが発生することを確認・JoinIR で設計根絶可能を実証

変更内容:
- src/tests/joinir_vm_bridge_stage1_usingresolver.rs: 新規作成（モジュール化・削除容易）
  - empty_entries: VM → "void" (PHI bug, expected "init")
  - with_entries: VM → "void" (PHI bug, expected "ABC")
  - lowering_sanity: 常時実行の構造検証
- src/runner/modes/vm.rs: Stage1UsingResolverBox.resolve_for_source/5 検出・JoinIR lowering 確認
- src/tests/mod.rs: モジュール追加（1行で削除可能）
- docs: Phase 30 TASKS.md に L-0.5 追加

発見:
  Stage-1 ループでも PHI バグが発生 → JoinIR で設計根絶可能を確認
  (ArrayBox/MapBox 引数対応は TODO)

テスト結果:
  ✅ empty_entries ... ok (VM="void", expected="init", PHI bug detected)
  ✅ with_entries ... ok (VM="void", expected="ABC", PHI bug detected)
  ✅ lowering_sanity ... ok (JoinIR structure: 2 functions)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 12:34:20 +09:00
nyash-codex
ee2b3115ee feat(joinir): FuncScannerBox.trim/1 JoinIR VM Bridge A/B test 
Phase 30.x: JoinIR VM Bridge でPHI問題を設計で解決できることを実証

変更内容:
- src/runner/modes/vm.rs: FuncScannerBox.trim/1 検出時にJoinIR経由実行
- src/mir/join_ir_vm_bridge.rs: Non-tail call サポート追加
  - dst=Some(id) の場合、結果を格納して次の命令へ継続
- src/tests/joinir_vm_bridge_trim.rs: A/Bテスト新規作成
  - メインテスト: Route A (VM) → "void" (PHI bug), Route C (JoinIR) → "abc" ✅
  - エッジケース: 5パターン全てPASS
- src/config/env.rs: joinir_vm_bridge_debug() 追加
- docs: Phase 30 TASKS.md に L-0.4 追加

テスト結果:
  Route A (MIR→VM直接):     "void"  ← PHI バグ
  Route C (MIR→JoinIR→VM):  "abc"   ← 正解 ✅

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 12:22:08 +09:00
nyash-codex
c479e5f527 fix(dx): Quick Win 1-3 for better error messages and API simplification 
Quick Win 1: Show available boxes on "Unknown Box type" error
- vm.rs, vm_fallback.rs: Display sorted list of available user-defined boxes
- Before: "Unknown Box type: Foo"
- After:  "Unknown Box type: Foo. Available: Bar, Baz, Main"

Quick Win 2: Show stderr on child process timeout
- child.rs, selfhost_exe.rs: Capture and display stderr (up to 500 chars)
- Helps diagnose what went wrong in selfhost compiler child process

Quick Win 3: Simplify Stage-B compiler API (SSOT)
- compiler_stageb.hako: Add StageBDriverBox.compile() as single entry point
- compiler_stageb.hako: Remove StageBMain compatibility wrapper
- compiler.hako: Change from `using ... as StageBMain` to direct import
- compiler.hako: Call StageBDriverBox.compile() directly

Also includes child_env.rs NYASH_MODULES env var for module mapping.

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 08:44:31 +09:00
nyash-codex
6726ee246d fix(selfhost): Phase 28.2 Ny compiler child process fixes 
- Use --stage-b flag for file-based compilation (Stage-A expects source
  content, not path; Stage-B uses FileBox to read files)
- Remove redundant env overrides that conflicted with
  apply_selfhost_compiler_env() settings
- Re-enable plugins in selfhost compiler env (NYASH_DISABLE_PLUGINS=0)
  so compiler.hako can use FileBox to read source files

Note: Pipeline infrastructure now works, but compiler.hako has a MIR
SSA bug (undefined ValueId(374)) that needs separate investigation.

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 07:49:47 +09:00
nyash-codex
22575aa1db refactor(selfhost): clean up selfhost.rs - remove duplicates, unify env access 
## Changes

### Duplicate code removal
- Remove nested double cli_verbose() checks (2 places)
- Remove duplicate pre_run_reset_oob_if_strict() calls
- Remove duplicate OOB strict check blocks

### Environment variable access unification
- All raw std::env::var() calls replaced with config::env functions
- Added new config::env functions:
  - ny_compiler_use_py()
  - macro_selfhost_pre_expand()
  - scopebox_enable()
  - loopform_normalize()
  - selfhost_inline_force()

### Common helper extraction
- maybe_dump_mir_verbose(): MIR dump with verbose check
- check_oob_strict_exit(): OOB strict mode check and exit
- execute_with_oob_check(): Combined run + OOB check

## Result
- Net ~11 lines reduction
- Much better code structure and maintainability
- Consistent environment variable access through config::env

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 07:18:29 +09:00
nyash-codex
94b2bd2799 feat(selfhost): add observation logs for Ny compiler path diagnosis 
Add NYASH_CLI_VERBOSE>=2 observation logs to trace the Ny compiler
child process path (NYASH_USE_NY_COMPILER=1):
- Log when spawning child process
- Log when receiving Program(JSON v0)
- Log before/after maybe_dump_mir with dump path info
- Report whether MIR dump file was created

Key finding: apps/selfhost/compiler/compiler.hako doesn't exist,
so the preferred child process route never fires. This explains
why RUST_MIR_DUMP_PATH doesn't create files in Ny compiler path.

Also update environment-variables.md with:
- NYASH_CLI_VERBOSE=2 level documentation
- Ny compiler observation template for Phase 29

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-25 07:08:32 +09:00
nyash-codex
c6c5653ae0 fix(parser): Stage-1 CLI infinite loop - MirBuilder-friendly refactoring (Part 1/3) 
**Problem**: Stage-1 CLI hits VM step budget (infinite loops) in multiple functions
- ParserBox.parse_program2: bb2853→bb2854 loop
- StringHelpers.skip_ws: bb488→bb491 loop

**Root Cause**: MirBuilder bug with `loop(cont==1)` + nested `if-else` pattern
- PHI instructions with self-references
- Loop exit blocks jumping back to header instead of continuation

**Solution**: Refactor to MirBuilder-friendly pattern
```hako
// Before (causes infinite loop):
loop(cont == 1) {
  if guard > max { return j } else { guard++ }
  if condition { action } else { cont = 0 }
}

// After (MirBuilder-friendly):
loop(j < n) {
  if condition { j++; continue }
  break
}
```

**Changes**:
1. parser_box.hako: parse_program2 main loop refactored
   - 7 sections: ws→EOF/guard→parse_stmt2→progress guard→trace→semicolons→emit
   - Unconditional parse_stmt2 execution (no nested if-else)
   - Explicit `break` for loop exits

2. string_helpers.hako: StringHelpers.skip_ws simplified
   - Removed `cont` flag and guard counter
   - Direct `loop(j < n)` with `continue/break`

3. vm.rs, vm_fallback.rs: RUST_MIR_DUMP_PATH support
   - Enables offline MIR analysis for debugging

**Progress**:
- ✅ parse_program2: infinite loop fixed
- ✅ StringHelpers.skip_ws: infinite loop fixed
- ⏳ ParserIdentScanBox.scan_ident: next target (bb985 loop)

**Testing**:
- MIR dumps generated successfully (116K+ lines)
- ws_init loop completes
- parse_program2 progresses further
- Still hits infinite loop in scan_ident (Part 2 needed)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-24 18:19:31 +09:00
nyash-codex
6885235145 Factor JSON v0 bridge globals/throw into small helpers 2025-11-24 15:21:49 +09:00
nyash-codex
da1a5558e5 Normalize passes keep spans and clean warnings 2025-11-24 15:02:51 +09:00
nyash-codex
466e636af6 Span trace utilities and runner source hint 2025-11-24 14:17:02 +09:00
nyash-codex
3d5979c78e refactor(joinir): Phase 27.9 - Modular separation of join_ir.rs into directory structure 
Phase 27.9 で join_ir.rs (~1,336行) を以下のモジュール構造に分離：

## 新規ディレクトリ構造:
```
src/mir/join_ir/
├── mod.rs                           # 型定義・共通ユーティリティ (~330行)
└── lowering/
    ├── mod.rs                       # lowering インターフェース
    ├── min_loop.rs                  # lower_min_loop_to_joinir (~140行)
    ├── skip_ws.rs                   # skip_ws lowering 3関数 (~390行)
    └── funcscanner_trim.rs          # trim lowering (~480行)
```

## 技術的変更:
- **型定義統一**: JoinFuncId, JoinInst, JoinModule 等を mod.rs に集約
- **lowering 分離**: 3つの lowering 関数を個別モジュールに移動
- **後方互換性**: pub use で lowering 関数を re-export（既存コード影響なし）
- **削除**: src/mir/join_ir.rs (旧単一ファイル)

## テスト結果:
- **385 passed** (+1 from 384)
- **9 failed** (-1 from 10)
- **ビルド成功**: 0 errors, 18 warnings (変化なし)

## 効果:
- **保守性向上**: 1,336行 → 4ファイル（各300-500行）で可読性向上
- **モジュール境界明確化**: 型定義 vs lowering 実装の責務分離
- **将来の拡張容易**: 新 lowering 関数追加が簡単に

Phase 27.8 で実装した MIR 自動解析 lowering の基盤整備完了。

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-23 16:49:49 +09:00
nyash-codex
2692eafbbf feat(mir): Phase 26-H JoinIR型定義実装完了 - ChatGPT設計 
## 実装内容（Step 1-3 完全達成）

### Step 1: src/mir/join_ir.rs 型定義追加
- **JoinFuncId / JoinContId**: 関数・継続ID型
- **JoinFunction**: 関数（引数 = φノード）
- **JoinInst**: Call/Jump/Ret/Compute 最小命令セット
- **MirLikeInst**: 算術・比較命令ラッパー
- **JoinModule**: 複数関数保持コンテナ
- **単体テスト**: 型サニティチェック追加

### Step 2: テストケース追加
- **apps/tests/joinir_min_loop.hako**: 最小ループ＋breakカナリア
- **src/tests/mir_joinir_min.rs**: 手書きJoinIR構築テスト
  - MIR → JoinIR手動構築で型妥当性確認
  - #[ignore] で手動実行専用化
  - NYASH_JOINIR_EXPERIMENT=1 トグル制御

### Step 3: 環境変数トグル実装
- **NYASH_JOINIR_EXPERIMENT=1**: 実験モード有効化
- **デフォルト挙動**: 既存MIR/LoopForm経路のみ（破壊的変更なし）
- **トグルON時**: JoinIR手書き構築テスト実行

## Phase 26-H スコープ遵守
✅ 型定義のみ（変換ロジックは未実装）
✅ 最小限の命令セット
✅ Debug 出力で妥当性確認
✅ 既存パイプライン無影響

## テスト結果
```
$ NYASH_JOINIR_EXPERIMENT=1 cargo test --release mir_joinir_min_manual_construction -- --ignored --nocapture
[joinir/min] MIR module compiled, 3 functions
[joinir/min] JoinIR module constructed:
[joinir/min] ✅ JoinIR型定義は妥当（Phase 26-H）
test result: ok. 1 passed; 0 failed
```

## JoinIR理論の実証
- **φノード = 関数引数**: `fn loop_step(i, k_exit)`
- **merge = join関数**: 分岐後の合流点
- **ループ = 再帰関数**: `loop_step` 自己呼び出し
- **break = 継続呼び出し**: `k_exit(i)`

## 次フェーズ (Phase 27.x)
- LoopForm v2 → JoinIR 自動変換実装
- break/continue ハンドリング
- Exit PHI の JoinIR 引数化

🌟 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
Co-Authored-By: ChatGPT <noreply@openai.com>
 2025-11-23 04:10:12 +09:00
nyash-codex
7812c3d4c1 feat(phi): Phase 25.1 - BTreeMap移行 (21ファイル、80%決定性達成) 
## 修正内容

### Core MIR/PHI (5ファイル)
- builder.rs: variable_map, value_types, value_origin_newbox
- context.rs: 3つのマップ
- loop_builder.rs: 3箇所
- loop_snapshot_manager.rs: snapshot マップ
- loop_snapshot_merge.rs: 2箇所

### MIR関連 (4ファイル)
- function.rs: FunctionMetadata.value_types
- resolver.rs: CalleeResolverBox
- guard.rs: CalleeGuardBox
- loop_common.rs: apply_increment_before_continue

### JSON Bridge (5ファイル)
- json_v0_bridge/lowering.rs
- json_v0_bridge/lowering/expr.rs
- json_v0_bridge/lowering/if_else.rs
- json_v0_bridge/lowering/merge.rs
- json_v0_bridge/lowering/try_catch.rs
- json_v0_bridge/mod.rs

### Printer & Providers (4ファイル)
- printer.rs, printer_helpers.rs
- host_providers/mir_builder.rs
- backend/mir_interpreter/handlers/extern_provider.rs

### Tests (3ファイル)
- phi_core/conservative.rs
- tests/json_program_loop.rs
- tests/mir_stage1_using_resolver_verify.rs (2テスト有効化)

## テスト結果
- mir_stage1_using_resolver_resolve_with_modules_map_verifies: 80%成功率
- 完全な決定性は未達成 (HashMap 86箇所、HashSet 63箇所が残存)

🐱 Generated with Claude Code
 2025-11-22 05:33:40 +09:00
nyash-codex
63012932eb feat(phase-0): 観測ライン緊急構築完了 - Silent Failure 根絶 
Phase 21.7++ Phase 0: 開発者体験を劇的に向上させる3つの改善

## 🎯 実装内容

### ✅ Phase 0.1: populate_from_toml エラー即座表示
**ファイル**: src/runner/pipeline.rs:57-65

**Before**: TOML parse エラーが silent failure
**After**: エラーを即座に警告表示 + デバッグ方法提示

```
⚠️  [using/workspace] Failed to load TOML modules:
    Error: TOML parse error at line 18...
    → All 'using' aliases will be unavailable
    → Fix TOML syntax errors in workspace modules

    💡 Debug: NYASH_DEBUG_USING=1 for detailed logs
```

**効果**: 今回の StringUtils バグなら即発見できた！

### ✅ Phase 0.2: VM 関数ルックアップ常時提案
**ファイル**: src/backend/mir_interpreter/handlers/calls/global.rs:179-206

**Before**: "Unknown: StringUtils.starts_with" だけ
**After**: 類似関数を自動提案 + デバッグ方法提示

```
Function not found: StringUtils.starts_with

💡 Did you mean:
   - StringUtils.starts_with/2
   - StringUtils.ends_with/2

🔍 Debug: NYASH_DEBUG_FUNCTION_LOOKUP=1 for full lookup trace
```

**効果**: arity 問題を即発見！環境変数不要で親切！

### ✅ Phase 0.3: using not found 詳細化
**ファイル**: src/runner/modes/common_util/resolve/strip.rs:354-389

**Before**: "'StringUtils' not found" だけ
**After**: 類似モジュール提案 + 利用可能数 + 修正方法提示

```
using: 'StringUtil' not found in nyash.toml [using]/[modules]

💡 Did you mean:
   - StringUtils
   - JsonUtils

Available modules: 4 aliases

📝 Suggestions:
   - Add an alias in nyash.toml: [using.aliases] YourModule = "path/to/module"
   - Use the alias: using YourModule as YourModule
   - Dev/test mode: NYASH_PREINCLUDE=1

🔍 Debug: NYASH_DEBUG_USING=1 for detailed logs
```

**効果**: タイポを即発見！TOML エラーとの因果関係も提示！

## 📊 Phase 0 成果まとめ

**工数**: 約2.5時間（予想: 2-3時間）✅
**効果**: Silent Failure 完全根絶 🎉

### Before Phase 0
- TOML エラー: 無言で失敗
- 関数が見つからない: "Unknown" だけ
- using が見つからない: "not found" だけ
- デバッグ方法: 環境変数を知ってる人だけ

### After Phase 0
- TOML エラー: 即座に警告 + 影響範囲説明
- 関数が見つからない: 類似関数提案 + デバッグ方法
- using が見つからない: 類似モジュール提案 + 修正方法 + デバッグ方法
- すべてのエラーが親切 🎊

## ✅ テスト結果

- StringUtils テスト: ✅ PASS
- 既存テスト: ✅ 337 passed（16 failed は元々の失敗）
- ビルド: ✅ SUCCESS
- 退行: ❌ なし

## 🎉 開発者体験の改善

今回のような StringUtils using バグが起きても:
1. **TOML エラー**: 即発見（数秒）
2. **arity 問題**: 提案から即解決（数分）
3. **タイポ**: 提案から即修正（数秒）

**Before**: 数時間のデバッグ
**After**: 数分で解決 🚀

次のステップ: Phase 1（基盤整備）に進む準備完了！
 2025-11-22 02:13:10 +09:00
nyash-codex
f4ae144559 fix(using): StringUtils using resolution - dual root cause fix 
🎯 Phase 21.7++ - using StringUtils as StringUtils 完全動作化！

## Root Cause #1: TOML Parse Error (lang/src/llvm_ir/hako_module.toml)

**Problem:**
```toml
line 18: aot_prep = "boxes/aot_prep.hako"     # scalar
line 19: aot_prep.passes.strlen = "..."       # table - CONFLICT!
```
→ TOML parse error prevented ALL aliases from loading
→ populate_from_toml() returned Err, aliases.len() = 0

**Fix:**
Commented out conflicting line 18:
```toml
# aot_prep = "boxes/aot_prep.hako"  # Commented out: conflicts with aot_prep.passes.* below
aot_prep.passes.strlen = "boxes/aot_prep/passes/strlen.hako"
```

**Result:**
✅ populate_from_toml() succeeds
✅ 4 aliases loaded including StringUtils → string_utils

## Root Cause #2: Missing Arity Suffix (src/backend/mir_interpreter/handlers/calls/global.rs)

**Problem:**
- MIR functions stored as "BoxName.method/arity"
- VM looked up "StringUtils.starts_with" (no arity)
- Function table had "StringUtils.starts_with/2" (with /2)
→ Lookup failed with "Unknown: StringUtils.starts_with"

**Fix:**
Auto-append arity from args.len() if missing:
```rust
let mut canonical = crate::mir::naming::normalize_static_global_name(func_name);

if !canonical.contains('/') {
    canonical = format!("{}/{}", canonical, args.len());
}
```

**Result:**
✅ "StringUtils.starts_with" + args.len()=2 → "StringUtils.starts_with/2"
✅ VM function lookup succeeds

## Debug Infrastructure

**Added comprehensive debug logging:**
1. src/runner/pipeline.rs:36-55 - NYASH_DEBUG_USING=1 for alias loading
2. src/backend/mir_interpreter/handlers/calls/global.rs:17-42 - NYASH_DEBUG_FUNCTION_LOOKUP=1 for VM lookup

## Test Coverage

**src/tests/json_lint_stringutils_min_vm.rs:**
- Rewrote to test arity auto-completion (not using resolution)
- Inlined StringUtils implementation to avoid pipeline dependency
- Tests that VM can call "StringUtils.starts_with" without arity suffix
- ✅ Test passes

**CLI Verification:**
```bash
NYASH_PARSER_STAGE3=1 HAKO_PARSER_STAGE3=1 NYASH_DISABLE_PLUGINS=1 \
  ./target/release/hakorune apps/tests/json_lint_stringutils_min.hako
# Output: OK
# RC: 0
```

## Impact

- ✅ using StringUtils as StringUtils fully functional
- ✅ All using aliases load successfully
- ✅ VM can find functions with/without arity suffix
- ✅ No breaking changes to existing code
- ✅ Debug logging for future troubleshooting

## Files Modified

- lang/src/llvm_ir/hako_module.toml (TOML fix)
- src/runner/pipeline.rs (debug logging)
- src/backend/mir_interpreter/handlers/calls/global.rs (arity fix + logging)
- src/tests/json_lint_stringutils_min_vm.rs (rewrite + enable)
- src/tests/mod.rs (register test)

Co-authored-by: Task Agent <task@anthropic.com>
Co-authored-by: Claude Code <claude@anthropic.com>
 2025-11-22 01:21:38 +09:00
nyash-codex
a13f14cea0 feat(mir): Phase 21.7 Step 1-2 - NamingBox decode & Hotfix 7修正 
## 実装内容

### Step 1: NamingBox decode関数追加 (naming.rs)
- ✅ `decode_static_method(func_name) -> Option<(box, method, arity)>`
- ✅ `is_static_method_name(func_name) -> bool`
- 対称性: encode ⇔ decode のペア実装で一貫性確保

### Step 2: unified_emitter Hotfix 7修正 (Lines 267-304)
- ✅ StaticCompiler box kind判定追加
- ✅ static box method は receiver 追加をスキップ
- ✅ instance method（RuntimeData/UserDefined）のみ receiver 追加
- ✅ トレース: NYASH_STATIC_METHOD_TRACE=1 でログ出力

## 判定ロジック
```rust
if box_kind == CalleeBoxKind::StaticCompiler {
    // "BoxName.method/arity" 形式か確認
    let func_name = format!("{}.{}/{}", box_name, method, args.len());
    if is_static_method_name(&func_name) {
        // static box method → receiver 追加しない
    }
}
```

## 検証
✅ Stage-1 テスト: RC=0 (apps/tests/stage1_skip_ws_repro.hako)
✅ ビルド成功（0 error）

## 次のステップ
- Step 3: methodization実装 (HAKO_MIR_BUILDER_METHODIZE=1)

Co-Authored-By: ChatGPT5 <chatgpt@openai.com>
 2025-11-21 23:52:10 +09:00
nyash-codex
b00cc8d579 refactor(stage1-bridge): モジュール分割 - 275→386行(4ファイル) 
**分割構成**:
- modules.rs (73行): collect_modules_list - nyash.toml解析
- args.rs (106行): build_stage1_args - mode別args構築
- env.rs (82行): configure_stage1_env - 環境変数設定
- mod.rs (125行): maybe_run_stage1_cli_stub - エントリポイント

**効果**:
- 単一責任原則: 各ファイルが明確な責務
- テスタビリティ: 個別関数を単体テスト可能
- 可読性: 275行単一ファイル → 4ファイル(73-125行)
- 保守性: 変更影響範囲が明確

**永続性**:
- static instance化と無関係（削除されない）
- Phase 25.x方針適合（新規モジュールの分割は自然）

Phase: 25.x
 2025-11-21 11:26:28 +09:00
nyash-codex
c344451087 fix(mir-builder): static method arity mismatch根治 - Phase 25.x 
**問題**:
- ParserStmtBox.parse_using/4 に5引数が渡される
- me.method呼び出しで instance/static 判別なし
- static method に誤って receiver 追加

**修正**:
- MeCallPolicyBox: params[0]の型で instance/static 判別
- Instance method: receiver 追加
- Static method: receiver なし
- Arity検証（NYASH_ME_CALL_ARITY_STRICT=1）

**ドキュメント**:
- docs/reference/environment-variables.md 新規作成
- docs/development/architecture/mir-logs-observability.md 更新

**テスト**:
- src/tests/mir_stage1_cli_emit_program_min.rs 追加
- 既存 stage1 テスト全てパス

Phase: 25.x
 2025-11-21 11:16:38 +09:00
nyash-codex
bceb20ed66 refactor(naming): 箱理論 - Entry選択ロジック統一＆NamingBox統合 
Phase 25.4 メンテナンス: Task A延長線上の箱化リファクタリング

## 📦 箱化内容

### 1. Entry選択ロジック統一箱
- 新規作成: `src/runner/modes/common_util/entry_selection.rs`
- 3箇所の重複ロジックを `select_entry_function()` に集約
  - `selfhost/json.rs:48-59` (11行削減)
  - `pyvm.rs:32-43` (11行削減)
  - `pyvm.rs:102-113` (11行削減)
  - `llvm.rs:292` (直接アクセス→統一関数呼び出し)

### 2. NamingBox SSOT 統合
- arity-aware優先フォールバック実装
  1. `Main.main/0` (arity付き、NYASH_BUILD_STATIC_MAIN_ENTRY=1時)
  2. `Main.main` (legacy、arity無し、現行デフォルト)
  3. `main` (top-level、NYASH_ENTRY_ALLOW_TOPLEVEL_MAIN=1時)
  4. `"Main.main"` (デフォルトフォールバック)

## 技術的成果
- **重複削減**: 33行の重複ロジック→1箇所に集約
- **NamingBox統一**: 全Entry選択が `src/mir/naming.rs` 経由
- **将来対応**: arity付き名前に自動対応（互換性維持）

## テスト結果
✅ cargo test mir_static_box_naming: 2 passed
✅ cargo test stage1_cli_entry_ssa_smoke: 2 passed

## 参考
- Phase 25.4-A完了commit: fa9cea51
- 箱理論原則: 重複ロジックを箱化→境界を明確化→一元管理

🎉 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-21 09:33:56 +09:00
nyash-codex
f9d100ce01 chore: Phase 25.1 完了 - LoopForm v2/Stage1 CLI/環境変数削減 + Phase 26-D からの変更 
Phase 25.1 完了成果:
- ✅ LoopForm v2 テスト・ドキュメント・コメント完備
  - 4ケース（A/B/C/D）完全テストカバレッジ
  - 最小再現ケース作成（SSAバグ調査用）
  - SSOT文書作成（loopform_ssot.md）
  - 全ソースに [LoopForm] コメントタグ追加

- ✅ Stage-1 CLI デバッグ環境構築
  - stage1_cli.hako 実装
  - stage1_bridge.rs ブリッジ実装
  - デバッグツール作成（stage1_debug.sh/stage1_minimal.sh）
  - アーキテクチャ改善提案文書

- ✅ 環境変数削減計画策定
  - 25変数の完全調査・分類
  - 6段階削減ロードマップ（25→5、80%削減）
  - 即時削除可能変数特定（NYASH_CONFIG/NYASH_DEBUG）

Phase 26-D からの累積変更:
- PHI実装改善（ExitPhiBuilder/HeaderPhiBuilder等）
- MIRビルダーリファクタリング
- 型伝播・最適化パス改善
- その他約300ファイルの累積変更

🎯 技術的成果:
- SSAバグ根本原因特定（条件分岐内loop変数変更）
- Region+next_iパターン適用完了（UsingCollectorBox等）
- LoopFormパターン文書化・テスト化完了
- セルフホスティング基盤強化

Co-Authored-By: Claude <noreply@anthropic.com>
Co-Authored-By: ChatGPT <noreply@openai.com>
Co-Authored-By: Task Assistant <task@anthropic.com>
 2025-11-21 06:25:17 +09:00
nyash-codex
51359574d9 feat(stage1): Phase 25.1 - Stage1 CLI デバッグ改善 + 環境変数削減計画 
- ✅ Stage1 CLI デバッグログ追加
  - lang/src/runner/stage1_cli.hako: STAGE1_CLI_DEBUG対応
  - 各関数でentry/exit/状態ログ出力
  - SSAバグ調査を容易化

- ✅ Rust bridge 実装
  - src/runner/stage1_bridge.rs: 子プロセス起動・環境変数配線
  - NYASH_ENTRY設定、モジュールリスト生成

- ✅ デバッグヘルパースクリプト
  - tools/stage1_debug.sh: 環境変数自動診断・詳細ログ
  - tools/stage1_minimal.sh: 推奨5変数のみで実行

- ✅ 環境変数削減計画（25個→5個）
  - docs/development/proposals/env-var-reduction-report.md
    - 使用箇所マトリックス、依存関係グラフ
    - 6段階削減ロードマップ（80%削減目標）
  - docs/development/proposals/stage1-architecture-improvement.md
    - 他言語事例調査（Rust/Go/Nim）
    - アーキテクチャ統一案、実装ロードマップ

- ✅ LoopForm v2 設計ドキュメント
  - docs/development/roadmap/phases/phase-25.1/stage1-usingresolver-loopform.md

🎯 成果: Stage1起動の複雑さを可視化、80%削減計画確立
 2025-11-21 06:22:02 +09:00
nyash-codex
26288b5451 refactor(phi): Phase 26-B-3 - loop_builder.rs and json_v0_bridge PhiInputCollector integration 
- loop_builder.rs: Replace LoopSnapshotMergeBox calls with PhiInputCollector for continue-merge PHI generation
- json_v0_bridge/lowering/loop_.rs: Replace LoopSnapshotMergeBox calls with PhiInputCollector for continue_merge_bb PHI generation
- Unified PHI input handling across all loop builders (loopform_builder, loop_builder, json_v0_bridge)
- Tests: mir_loopform_exit_phi all passed (4/4)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-20 18:07:11 +09:00
nyash-codex
c4d25e7773 feat(phi): __pin$変数の完全除外でValueId(313)→(300)に改善！ 
🎯 **Task先生の発見を実装**:
- __pin$ temporary変数をBodyLocalInternalとして強制分類
- Writes収集から__pin$変数を除外（carrier誤判定防止）

📦 **変更ファイル**:
- loop_var_classifier.rs: Priority 0で__pin$変数を自動BodyLocalInternal分類
- loop_builder.rs: Writes収集で__pin$除外
- loop_.rs (JSON): Writes収集で__pin$除外

✅ **テスト結果**: 267 PASS / 1 FAIL（新規ユニットテスト追加）
- test_classify_pin_temporary_variables: PASS ✅
- mir_funcscanner_skip_ws: ValueId(313)→(300)に改善（段階的進捗）

🔍 **ValueId未定義エラー改善履歴**:
- 最初: ValueId(313) at BasicBlockId(201)
- __pin$分類追加: ValueId(301) at BasicBlockId(210)
- Writes除外: ValueId(300) at BasicBlockId(207)
  → 着実に減少中！

📋 **完了ステップ**:
✅ Step 5-1: Writes集合収集（__pin$除外追加）
✅ Step 5-2: ValueId比較ロジック
✅ Step 5-4: φ縮約実装
✅ Step 5-5-A: PHI pred mismatch解決
✅ Step 5-5-B-partial: __pin$変数問題部分解決

🎯 **次のステップ**: ValueId(300)根本原因特定（Continue merge PHI実装検討）
 2025-11-20 14:14:37 +09:00
nyash-codex
2cdef5432a feat(phi): Step 5-1/5-2/5-4実装 - Writes収集+ValueId比較+PHI縮約 
🎯 **実装内容**:
- Step 5-1: Writes集合収集（Snapshot比較で再代入検出）
- Step 5-2: ValueId比較ロジック（preheader_vars保存）
- Step 5-4: φ縮約実装（optimize_same_value()でself-φ撲滅）

📦 **変更ファイル**:
- loopform_builder.rs: preheader_vars追加、seal_phis()にPHI縮約ロジック
- loop_.rs (JSON): Writes収集実装
- loop_builder.rs (AST): Writes収集実装（JSON経路と統一）

✅ **テスト結果**: 266 PASS / 1 FAIL (既知のmir_funcscanner_skip_ws)
🔧 **Box Theory**: 各箱が単一責任を保持、段階的実装完了

📋 **残タスク**:
- Step 5-5: mir_funcscanner_skip_wsのPHI pred mismatch解決
- ValueId(712)の生成箇所特定（body-local PHI疑惑）
 2025-11-20 13:26:57 +09:00
nyash-codex
146b167e49 feat(phi): Option C実装完了 - 箱理論でPHI bug根本修正 + 完全共通化 
🎯 **Option C - Box-First Design**

**新規Box追加（2ファイル）**:
- LocalScopeInspectorBox: 変数定義位置追跡（280行、13テスト）
- LoopVarClassBox: 変数分類（Pinned/Carrier/BodyLocalExit/BodyLocalInternal）（220行、10テスト）

**統合完了（3ファイル）**:
- loop_snapshot_merge.rs: merge_exit_with_classification() でOption C分類適用
- loopform_builder.rs: build_exit_phis() でinspector統合、完全共通化達成
- loop_.rs (JSON Bridge): 重複コード削除、共通化された実装を使用

**技術的成果**:
✅ 266テスト通過（既存機能に影響なし）
✅ BodyLocalInternal変数の正しい分類（exit PHI生成スキップ）
✅ JSON/AST両経路の完全共通化（重複コード根絶）
✅ is_available_in_all() でPHI pred mismatch防止

**残課題**:
- mir_funcscanner_skip_ws: 1テストのみ失敗（別変数で問題継続中）
- 次: __mir__.log() でのトレース + 詳細調査

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-20 12:21:40 +09:00
nyash-codex
2e6e6b61ff feat(phi): Option C実装 - 箱分割設計でPHIバグ根本修正（基本実装） 
## 実装内容

### 新規モジュール（箱理論設計）

1. **LocalScopeInspectorBox** (280行, 13テスト)
   - 各変数がどのブロックで定義されているか追跡
   - is_defined_in_all() で全exit predsでの定義チェック
   - record_snapshot() でスナップショット記録

2. **LoopVarClassBox** (220行, 10テスト)
   - 変数を4種類に分類: Pinned/Carrier/BodyLocalExit/BodyLocalInternal
   - needs_exit_phi() でPHI生成要否判定
   - filter_exit_phi_candidates() で候補フィルタリング

### 既存モジュール修正

3. **loop_snapshot_merge.rs**
   - merge_exit_with_classification() 追加
   - Option Cロジック実装: 全exit predsで定義されていない変数はSKIP
   - デバッグログ追加 (NYASH_OPTION_C_DEBUG)

4. **loopform_builder.rs**
   - build_exit_phis() シグネチャ拡張 (inspector追加)
   - 実際のCFG predecessors使用 (ops.get_block_predecessors)
   - build_exit_phis_for_control() でinspector構築

5. **loop_.rs (JSON bridge)**
   - build_exit_phis() 呼び出し修正
   - header/exit snapshots記録

## 技術的成果

### ✅ 理論的に正しい設計確立
- 変数スコープを厳密に追跡
- CFGベースの正確な判定
- 汎用的で拡張性の高い基盤

### ✅ 部分的動作確認済み
- 多数のループで BodyLocalInternal が正しくSKIPされる
- ログ: "[Option C] → SKIP exit PHI for 'ch'" 確認
- 23個のユニットテスト全PASS

### ⚠️ 残存課題
- header snapshot記録漏れによる一部誤判定
- 次回修正で完全動作見込み

## 設計哲学（箱理論）

各箱が単一責任を持つ：
- LocalScopeInspectorBox: 変数定義位置の追跡のみ
- LoopVarClassBox: 変数分類のみ
- LoopSnapshotMergeBox: PHI入力生成のみ

→ 保守性・再利用性・テスタビリティの向上

Related: #skip_whitespace PHI bug

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-20 11:22:17 +09:00
nyash-codex
25dca4ed48 feat(mir): Phase 26-A-4完了 - is_parameter根本修正（名前ベース→ValueIdベース型安全化） 
## 🎯 Phase 26-A-4: loop_builder.rs修正完了

### ✅ 実装内容

1. **LoopFormOps trait修正** (`src/mir/phi_core/loopform_builder.rs:538`)
   - シグネチャ変更: `is_parameter(&self, name: &str)` → `is_parameter(&self, value_id: ValueId)`
   - Phase 26-A-4コメント追加

2. **MirBuilder実装修正** (`src/mir/loop_builder.rs:1172`)
   - `self.parent_builder.is_value_parameter(value_id)` 使用
   - MirValueKindベースの型安全判定に変更
   - GUARD Bug Prevention コメント追加

3. **JSON v0 Bridge実装** (`src/runner/json_v0_bridge/lowering/loop_.rs:96`)
   - ValueId → 変数名の逆引き実装
   - 既存ヒューリスティック("me", "args")を維持
   - Phase 26-A-4コメント追加

4. **テストMock実装×2** (`src/mir/phi_core/loopform_builder.rs:697, 848`)
   - MockOps: ValueId < params.len() で判定
   - 第2Mock: 常にfalse（パラメータなし）

5. **呼び出し箇所修正×2**
   - `loop_builder.rs:237`: `self.is_parameter(*value)`
   - `loopform_builder.rs:143`: `ops.is_parameter(value)`

### 🏆 技術的成果

#### GUARDバグ完全根絶
```rust
// ❌ 旧実装（名前ベース、脆弱）
fn is_parameter(&self, name: &str) -> bool {
    if name.starts_with("__pin$") { return false; }
    if name == "me" { return true; }
    self.parent_builder.function_param_names.contains(name)
}

// ✅ 新実装（ValueIdベース、型安全）
fn is_parameter(&self, value_id: ValueId) -> bool {
    self.parent_builder.is_value_parameter(value_id)
    // ← MirValueKind::Parameter(_) で型安全判定！
}
```

#### GUARD checkバグ再現防止
- **問題**: ValueId(0) を「常に未初期化」と誤判定
- **解決**: MirValueKind::Parameter(0) で正しく判定
- **効果**: パラメータ s=ValueId(0) も正しく処理可能に

### 📊 テスト結果

```
test result: ok. 241 passed; 1 failed; 27 ignored
```

- ✅ **241テスト合格** - Phase 26-A-3と同じ（回帰なし）
- ❌ **1テスト失敗** - `mir_funcscanner_skip_ws`（既存PHIバグ、無関係）
- ✅ **ビルド成功** - 4 warnings（既存）

### 🔄 修正ファイル一覧

1. `src/mir/loop_builder.rs` - メイン実装（is_parameter実装＋呼び出し）
2. `src/mir/phi_core/loopform_builder.rs` - trait定義＋呼び出し＋Mock×2
3. `src/runner/json_v0_bridge/lowering/loop_.rs` - JSON bridge実装

### 🎯 次のステップ

- Phase 26-A-5: 統合テスト作成
- Phase 26-A: 既存テスト全確認
- ドキュメント更新

## 📚 関連Phase

- Phase 26-A-1: MirValueKind + TypedValueId 実装 ✅
- Phase 26-A-2: MirBuilder統合 ✅
- Phase 26-A-3: パラメータ型自動登録 ✅
- **Phase 26-A-4: is_parameter根本修正 ✅ ← 今回**
 2025-11-20 09:49:13 +09:00
nyash-codex
9bdf2ff069 chore: Phase 25.2関連ドキュメント更新＆レガシーテストアーカイブ整理 
## ドキュメント更新
- CURRENT_TASK.md: Phase 25.2完了記録
- phase-25.1b/e/q/25.2 README更新
- json_v0_bridge/README.md新規追加

## テストファイル整理
- vtable_*テストをtests/archive/に移動（6ファイル）
- json_program_loop.rsテスト追加

## コード整理
- プラグイン（egui/python-compiler）微修正
- benchmarks.rs, instance_v2.rs更新
- MIR関連ファイル微調整

## 全体成果
Phase 25.2完了により：
- LoopSnapshotMergeBox統一管理実装
- ValueId(1283)バグ根本解決
- ~35行コード削減（目標210行の16%）
- 11テスト全部PASS、3実行テストケースPASS
 2025-11-20 03:56:12 +09:00
nyash-codex
525e59bc8d feat(loop-phi): Add body-local variable PHI generation for Rust AST loops 
Phase 25.1c/k: Fix ValueId undefined errors in loops with body-local variables

**Problem:**
- FuncScannerBox.scan_all_boxes/1 and BreakFinderBox._find_loops/2 had ValueId
  undefined errors for variables declared inside loop bodies
- LoopFormBuilder only generated PHIs for preheader variables, missing body-locals
- Example: `local ch = s.substring(i, i+1)` inside loop → undefined on next iteration

**Solution:**
1. **Rust AST path** (src/mir/loop_builder.rs):
   - Detect body-local variables by comparing body_end_vars vs current_vars
   - Generate empty PHI nodes at loop header for body-local variables
   - Seal PHIs with latch + continue snapshot inputs after seal_phis()
   - Added HAKO_LOOP_PHI_TRACE=1 logging for debugging

2. **JSON v0 path** (already fixed in previous session):
   - src/runner/json_v0_bridge/lowering/loop_.rs handles body-locals
   - Uses same strategy but for JSON v0 bridge lowering

**Results:**
- ✅ FuncScannerBox.scan_all_boxes: 41 body-local PHIs generated
- ✅ Main.main (demo harness): 23 body-local PHIs generated
- ⚠️ Still some ValueId undefined errors remaining (exit PHI issue)

**Files changed:**
- src/mir/loop_builder.rs: body-local PHI generation logic
- lang/src/compiler/entry/func_scanner.hako: debug logging
- /tmp/stageb_funcscan_demo.hako: test harness

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 23:12:01 +09:00
nyash-codex
fb256670a1 fix(json_v0): Phase 25.1c/k - loop body local変数のPHI生成を追加 
BreakFinderBox._find_loops/2 等で、loop body 内で新規宣言された
local 変数（header_pos, next_i 等）が loop header に戻った時に
undefined になる SSA バグを修正。

変更内容:
- body_vars から base_vars にない変数を検出
- それらに対する IncompletePhi を header に追加
- backedge_to_cond 判定を拡張（Branch にも対応）
  - break があるループでは latch が Branch 終端になるため
- トレースログ追加（HAKO_LOOP_PHI_TRACE=1）

根本原因:
prepare_loop_variables_with() は preheader の変数のみを対象とし、
loop body 内で新規宣言された変数を PHI に含めていなかった。

修正効果:
- BreakFinderBox._find_loops/2 の ValueId(172) undefined 解決見込み
- FuncScannerBox.scan_all_boxes/1 も同様のパターンで修正される

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 20:33:24 +09:00
nyash-codex
1747ec976c refactor(json_v0_bridge): Phase 25.1p - FunctionDefBuilder箱化＋me予約修正 
【変更内容】
1. FunctionDefBuilder 箱化（SSOT化）
   - インスタンスメソッド判定の一元化
   - パラメータ ValueId 生成の統一
   - 変数マップ初期化の統一

2. ValueId(0) me 予約バグ修正
   - is_instance_method() で box_name != "Main" 判定
   - インスタンスメソッドは me を ValueId(0) に予約
   - variable_map["me"] = ValueId(0) を自動設定

3. コード削減・可読性向上
   - 60行 → 40行（関数定義処理）
   - 重複ロジック削除
   - デバッグログ追加（is_instance表示）

【効果】
- json_v0_bridge 経路の ValueId(0) 未定義エラー解消
- Stage-B compiler で static box メソッドが正しく動作
- 設計の一貫性向上（me の扱いが明確）

【非スコープ】
- Rust MirBuilder 側は未修正（Phase 26で統一予定）
- lower_static_method_as_function は現状維持

関連: Phase 25.1m (静的メソッド修正), Phase 25.1c/k (SSA修正)

🐱 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-19 10:08:04 +09:00
nyash-codex
d3cbc71c9b feat(mir): Phase 25.1f完了 - Conservative PHI + ControlForm観測レイヤー 
🎉 Conservative PHI Box理論による完全SSA構築

**Phase 7-B: Conservative PHI実装**
- 片方branchのみ定義変数に対応（emit_void使用）
- 全変数にPHI生成（Conservative Box理論）
- Stage-1 resolver全テスト緑化（3/3 PASS）

**Phase 25.1f: ControlForm観測レイヤー**
- LoopShape/IfShape/ControlForm構造定義
- Loop/If統一インターフェース実装
- debug_dump/debug_validate機能追加
- NYASH_CONTROL_FORM_TRACE環境変数対応

**主な変更**:
- src/mir/builder/phi.rs: Conservative PHI実装
- src/mir/control_form.rs: ControlForm構造（NEW）
- src/mir/loop_builder.rs: LoopForm v2デフォルト化

**テスト結果**:
✅ mir_stage1_using_resolver_min_fragment_verifies
✅ mir_stage1_using_resolver_full_collect_entries_verifies
✅ mir_parserbox_parse_program2_harness_parses_minimal_source

🤖 Generated with Claude Code
Co-Authored-By: Claude <noreply@anthropic.com>
Co-Authored-By: ChatGPT <chatgpt@openai.com>
 2025-11-18 18:56:35 +09:00
nyash-codex
f74b7d2b04 📦 Hotfix 1 & 2: Parameter ValueId Reservation + Exit PHI Validation (Box-First Theory) 
**箱理論に基づく根治的修正**：

## 🎯 Hotfix 1: Parameter ValueId Reservation (パラメータ ValueId 予約)

### 根本原因
- MirFunction counter が params.len() を考慮していなかった
- local variables が parameter ValueIds を上書き

### 箱理論的解決
1. **LoopFormContext Box**
   - パラメータ予約を明示的に管理
   - 境界をはっきりさせる

2. **MirFunction::new() 改善**
   - `initial_counter = param_count.max(1)` でパラメータ予約
   - Parameters are %0, %1, ..., %N-1

3. **ensure_counter_after() 強化**
   - パラメータ数 + 既存 ValueIds 両方を考慮
   - `min_counter = param_count.max(max_id + 1)`

4. **reserve_parameter_value_ids() 追加**
   - 明示的な予約メソッド（Box-First）

## 🎯 Hotfix 2: Exit PHI Predecessor Validation (Exit PHI 検証)

### 根本原因
- LoopForm builder が存在しないブロックを PHI predecessor に追加
- 「幽霊ブロック」問題

### 箱理論的解決
1. **LoopFormOps.block_exists() 追加**
   - CFG 存在確認メソッド
   - 境界を明確化

2. **build_exit_phis() 検証**
   - 非存在ブロックをスキップ
   - デバッグログ付き

### 実装ファイル
- `src/mir/function.rs`: Parameter reservation
- `src/mir/phi_core/loopform_builder.rs`: Context + validation
- `src/mir/loop_builder.rs`: LoopFormOps impl
- `src/mir/builder/stmts.rs`: Local variable allocation

### 業界標準準拠
- ✅ LLVM IR: Parameters are %0, %1, ...
- ✅ SSA Form: PHI predecessors must exist in CFG
- ✅ Cytron et al. (1991): Parameter reservation principle

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-18 06:39:45 +09:00
nyash-codex
73844dbe04 feat(builder): CalleeBoxKind構造ガードで静的/ランタイムBox混線を根絶 
🎯 箱理論の実践: 「境界を作る」原則による構造レベル分離

## 問題
- StageBArgsBox.resolve_src内のargs.get(i)が
  Stage1UsingResolverBox.getに化ける（静的Box名混入）
- 未定義ValueIdエラー発生（receiver定義なし）

## 解決策（構造ガード）
✅ CalleeBoxKind enum追加
  - StaticCompiler: Stage-B/Stage-1コンパイラBox
  - RuntimeData: MapBox/ArrayBox等ランタイムBox
  - UserDefined: ユーザー定義Box

✅ classify_box_kind(): Box名から種別判定
  - 静的Box群を明示的に列挙（1箇所に集約）
  - ランタイムBox群を明示的に列挙
  - 将来の拡張も容易

✅ apply_static_runtime_guard(): 混線検出・正規化
  - me-call判定（receiver型==box_name → 静的降下に委ねる）
  - 真の混線検出（receiver型≠box_name → 正規化）
  - トレースログで可視化

## 効果
- 修正前: Invalid value ValueId(150/187)
- 修正後: Unknown method 'is_space' (別issue、StringBox実装不足)
- → 静的Box名混入問題を根絶！

## 箱理論原則
- ✅ 境界を作る: Static/Runtime/UserDefinedを構造的に分離
- ✅ Fail-Fast: フォールバックより明示的エラー
- ✅ 箱にする: CalleeBoxKindでBox種類を1箇所に集約

## ファイル
- src/mir/definitions/call_unified.rs: CalleeBoxKind enum
- src/mir/builder/calls/call_unified.rs: classify_box_kind()
- src/mir/builder/calls/emit.rs: apply_static_runtime_guard()
- docs/development/roadmap/phases/phase-25.1d/README.md: 箱化メモ更新

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-17 23:13:57 +09:00
nyash-codex
4b078e6df9 fix(vm): register static boxes in user factory for NewBox support 
**Problem**: NewBox for static boxes (e.g., HakoCli) failed with
"Plugins disabled, cannot create HakoCli" error when NYASH_DISABLE_PLUGINS=1.

**Root cause**: static box declarations were only registered with
VM's register_static_box_decl for singleton persistence, but NOT
included in InlineUserBoxFactory's decls. This caused UnifiedBoxRegistry
to skip User factory and fall through to Plugin factory, which failed
when plugins were disabled.

**Fix**: Include static_box_decls in InlineUserBoxFactory's decls map.
Static boxes remain singletons (VM ensures single instance via
register_static_box_decl), but now they're also advertised by User factory
so NewBox doesn't incorrectly route to Plugin factory.

**Implementation** (src/runner/modes/vm.rs):
1. Add static_box_decls to InlineUserBoxFactory decls after nonstatic_decls
2. nonstatic takes precedence if name conflicts (rare but possible)
3. StaticName -> StaticNameInstance aliases still work as before

**Behavior** (UnifiedBoxRegistry with StrictPluginFirst policy):
- try factory#1 Plugin → fails (NYASH_DISABLE_PLUGINS=1)
- try factory#2 User → succeeds (static box found in decls)
- NewBox creates InstanceBox, VM ensures singleton semantics

**Verification**:
- Test case: /tmp/test_static_newbox.hako
- NewBox TestStatic successfully creates instance via User factory
- Methods callable, return values correct
- No plugin errors with NYASH_DISABLE_PLUGINS=1

**Impact**: static box new instances now work correctly without plugins,
matching Rust layer's design where static boxes are user-defined types
(not plugin types) with singleton semantics.

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-17 02:38:54 +09:00
nyash-codex
eadde8d1dd fix(mir/builder): use function-local ValueId throughout MIR builder 
Phase 25.1b: Complete SSA fix - eliminate all global ValueId usage in function contexts.

Root cause: ~75 locations throughout MIR builder were using global value
generator (self.value_gen.next()) instead of function-local allocator
(f.next_value_id()), causing SSA verification failures and runtime
"use of undefined value" errors.

Solution:
- Added next_value_id() helper that automatically chooses correct allocator
- Fixed 19 files with ~75 occurrences of ValueId allocation
- All function-context allocations now use function-local IDs

Files modified:
- src/mir/builder/utils.rs: Added next_value_id() helper, fixed 8 locations
- src/mir/builder/builder_calls.rs: 17 fixes
- src/mir/builder/ops.rs: 8 fixes
- src/mir/builder/stmts.rs: 7 fixes
- src/mir/builder/emission/constant.rs: 6 fixes
- src/mir/builder/rewrite/*.rs: 10 fixes
- + 13 other files

Verification:
- cargo build --release: SUCCESS
- Simple tests with NYASH_VM_VERIFY_MIR=1: Zero undefined errors
- Multi-parameter static methods: All working

Known remaining: ValueId(22) in Stage-B (separate issue to investigate)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-17 00:48:18 +09:00
nyash-codex
5044f8d807 fix(selfhost): propagate Stage-3 parser flags to child processes 
Phase 25.1b selfhost builder stabilization - prevent "Undefined variable: local" in nested compilations

Changes:
- src/runner/child_env.rs:
  - Add Stage-3 parser flag propagation in apply_core_wrapper_env()
  - Propagate NYASH_PARSER_STAGE3, HAKO_PARSER_STAGE3, NYASH_PARSER_ALLOW_SEMICOLON
  - Ensures child processes (inline compiler, using resolution) support 'local' keyword

Context:
- When selfhost builder uses `using` to load modules, inline compiler spawns child processes
- Without this fix, child processes don't inherit Stage-3 flags → "Undefined variable: local"
- Part of HAKO_SELFHOST_BUILDER_FIRST=1 (no fallback) selfhosting strategy

Note: This is partial fix - inline compiler still needs forced Stage-3 mode (next commit)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-16 17:45:14 +09:00
nyash-codex
fbf4687ea1 fix(bridge): implement env.box_introspect.kind lowering + Stage0 build fixes 
Phase 25.1b type system groundwork - env.* namespace support in Bridge layer

Changes:
- Bridge layer (JSON v0 → MIR):
  - Add 'env' as well-known variable in MapVars::resolve()
  - Implement env.box_introspect.kind(value) → ExternCall lowering
  - Pattern: Method { recv: Method { recv: Var("env"), method: "box_introspect" }, method: "kind" }

- VM/extern fixes:
  - Add Arc::from() conversion for env.box_introspect.kind result
  - Fix MapBox API usage in extern_functions.rs logging

- Build fixes:
  - Comment out missing llvm_legacy/llvm modules in src/backend/mod.rs
  - Comment out missing gui_visual_node_prototype in Cargo.toml

- New files:
  - lang/src/shared/common/box_type_inspector_box.hako (type introspection API)

Context:
- Enables BoxTypeInspectorBox to query runtime Box types via env.box_introspect.kind
- Required for selfhost MirBuilder type-aware lowering (multi-carrier loops, etc.)
- Part of Phase 25.1b "no fallback" selfhosting strategy

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-16 17:19:56 +09:00
nyash-codex
7ca7f646de Phase 25.1b: Step2完了（FuncBodyBasicLowerBox導入） 
Step2実装内容:
- FuncBodyBasicLowerBox導入（defs専用下請けモジュール）
- _try_lower_local_if_return実装（Local+単純if）
- _inline_local_ints実装（軽い正規化）
- minimal lowers統合（Return/BinOp/IfCompare/MethodArray系）

Fail-Fast体制確立:
- MirBuilderBox: defs_onlyでも必ずタグ出力
- [builder/selfhost-first:unsupported:defs_only]
- [builder/selfhost-first:unsupported:no_match]

Phase構造整備:
- Phase 25.1b README新設（Step0-3計画）
- Phase 25.2b README新設（次期計画）
- UsingResolverBox追加（using system対応準備）

スモークテスト:
- stage1_launcher_program_to_mir_canary_vm.sh追加

Next: Step3 LoopForm対応

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-15 22:32:13 +09:00
nyash-codex
6856922374 Phase 25.1a: selfhost builder hotfix (fn rename, docs) 2025-11-15 05:42:32 +09:00
nyash-codex
1f961b3e75 feat(phase-21.8): extend collect_using_and_strip to return imports HashMap 
**Step 6 Complete**: Extract using imports from .hako source in pipeline

Changes:
- Modified collect_using_and_strip() to return (cleaned, prelude_paths, imports)
- Build imports HashMap from seen_aliases (alias -> alias mapping)
- Updated all 6 call sites to handle new 3-tuple return type
- This provides MirBuilder with info about which names are valid static box references

Next: Wire imports through extern_provider to MirBuilder (Step 7)

Related: #phase-21.8 MatI64/IntArrayCore integration
 2025-11-14 16:03:32 +09:00
nyash-codex
938c92160a feat(mir-builder): add using imports support to json_v0_bridge 
Phase 21.8 foundation for MatI64/IntArrayCore integration

Changes:
- Add `imports: HashMap<String, String>` to BridgeEnv
- Extend MapVars::resolve() to check imports and create static box references
- Add BridgeEnv::with_imports() to initialize with using imports map
- Add parse_json_v0_to_module_with_imports() to json_v0_bridge
- Add program_json_to_mir_json_with_imports() to mir_builder.rs
- Maintain backward compatibility via empty HashMap defaults

Next: Wire using extraction from pipeline and test with MatI64

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-14 15:27:42 +09:00
nyash-codex
f1fa182a4b AotPrep collections_hot matmul tuning and bench tweaks 2025-11-14 13:36:20 +09:00
nyash-codex
dda65b94b7 Phase 21.7 normalization: optimization pre-work + bench harness expansion 
- Add opt-in optimizations (defaults OFF)
  - Ret purity verifier: NYASH_VERIFY_RET_PURITY=1
  - strlen FAST enhancement for const handles
  - FAST_INT gate for same-BB SSA optimization
  - length cache for string literals in llvmlite
- Expand bench harness (tools/perf/microbench.sh)
  - Add branch/call/stringchain/arraymap/chip8/kilo cases
  - Auto-calculate ratio vs C reference
  - Document in benchmarks/README.md
- Compiler health improvements
  - Unify PHI insertion to insert_phi_at_head()
  - Add NYASH_LLVM_SKIP_BUILD=1 for build reuse
- Runtime & safety enhancements
  - Clarify Rust/Hako ownership boundaries
  - Strengthen receiver localization (LocalSSA/pin/after-PHIs)
  - Stop excessive PluginInvoke→BoxCall rewrites
- Update CURRENT_TASK.md, docs, and canaries

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-13 16:40:58 +09:00
nyash-codex
9e2fa1e36e Phase 21.6 solidification: chain green (return/binop/loop/call); add Phase 21.7 normalization plan (methodize static boxes). Update CURRENT_TASK.md and docs. 2025-11-11 22:35:45 +09:00
nyash-codex
0d41970313 feat(phase21.5): strlen FAST EXE + loop JSONFrag diagnostics 
## Task A: emit v0 boxcall (bin version) ✅
- Fix: emit_mir_json_for_harness_bin now handles I::Call with Callee::Method
- Added: Proper v0 boxcall emission when NYASH_MIR_UNIFIED_CALL=0
- Location: src/runner/mir_json_emit.rs:641-707
- Test: emit_boxcall_length_canary_vm.sh → PASS

## Task B: strlen FAST EXE (AOT without plugin) ✅
- Fix: FAST lowering now tracks newbox(StringBox) creation
- Added: newbox_string_args fallback in boxcall.py (lines 133-143)
- Added: StringBox tracking in newbox.py (lines 82-91)
- Benefit: EXE can compute string.length() without StringBox plugin
- Test: s3_backend_selector_crate_exe_strlen_fast_canary_vm.sh → PASS (rc=5)

## Task 1: selfhost-first Diagnostic Logging ✅
- Added: HAKO_SELFHOST_TRACE=1 outputs Program JSON stats
- Added: HAKO_SELFHOST_NO_DELEGATE=1 shows detailed failure logs
- Added: [builder/selfhost-first:fail:*] markers + last 80 lines
- Location: tools/hakorune_emit_mir.sh:try_selfhost_builder()

## Task 2: loop JsonFrag Hit Rate Improvement ✅
- Added: FORCE=1 fallback for non-Lt comparison operators
- Added: find_any_local_int_before() fallback when strict fails
- Location: lang/src/mir/builder/internal/lower_loop_simple_box.hako
- Benefit: Higher JSONFrag hit rate under HAKO_MIR_BUILDER_LOOP_FORCE_JSONFRAG=1

## Task 3: crate EXE Failure Diagnostics ✅
- Added: LLVM IR dump on build failure (first 120 lines)
- Added: Build error log capture (last 40 lines)
- Location: tools/smokes/v2/profiles/quick/core/phase2100/stageb_loop_jsonfrag_crate_exe_canary_vm.sh

## Test Results
- emit_boxcall_length: PASS ✅
- strlen_fast (FAST=1): PASS (rc=5) ✅
- loop_jsonfrag: SKIP (diagnostic enhanced) ⚠️

## Implementation Principles
- 既定挙動不変 (Default unchanged)
- Dev toggle guarded (FAST=1, FORCE=1, TRACE=1, NO_DELEGATE=1)
- Minimal diff, easy rollback
- Clear failure diagnostics for future fixes

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-11 05:50:23 +09:00
nyash-codex
b9e9c967fb feat(phase21.5): Fix --emit-mir-json BoxCall emission + EXE staging docs 
## Task 2: BoxCall Emission Fix ✅
- Fix: --emit-mir-json now properly emits boxcall for method calls when NYASH_MIR_UNIFIED_CALL=0
- Root cause: v0 format fallback wasn't inspecting Callee::Method enum
- Implementation: Added proper v0 boxcall emission with dst_type hints
- Location: src/runner/mir_json_emit.rs:329-368
- Preserves: All default behavior, only affects explicit NYASH_MIR_UNIFIED_CALL=0

## Task 4: Documentation Updates ✅
- Added: selfhost_exe_stageb_quick_guide.md (comprehensive usage guide)
- Added: selfhost_exe_stageb_verification_report.md (test results)
- Updated: tools/selfhost_exe_stageb.sh with prerequisite comments
- Documented: EXE test timeout recommendations (--timeout 120)
- Documented: NYASH_EXE_ARGV=1 usage with ensure_ny_main/argv_get
- Added: Phase 2034 emit_boxcall_length canary test

## Implementation Principles
- 既定挙動不変 (Default behavior unchanged)
- 最小差分 (Minimal diff)
- ロールバック容易 (Easy rollback via clear else-if block)
- Dev toggle guarded (NYASH_MIR_UNIFIED_CALL=0 explicit activation)

🤖 Generated with [Claude Code](https://claude.com/claude-code)

Co-Authored-By: Claude <noreply@anthropic.com>
 2025-11-11 03:28:01 +09:00