Merge pull request #32 from johnhuang316/refactor_indx

Refactor indx

Author: johnhuang316

README.md

@@ -44,7 +44,7 @@ The easiest way to get started with any MCP-compatible application:
 
 2. **Restart your application** – `uvx` automatically handles installation and execution
 
-3. **Start using**:
+3. **Start using** (give these prompts to your AI assistant):
    ```
    Set the project path to /Users/dev/my-react-app
    Find all TypeScript files in this project  
@@ -62,13 +62,16 @@ The easiest way to get started with any MCP-compatible application:
 ## Key Features
 
 ### 🔍 **Intelligent Search & Analysis**
-- **SCIP-Powered**: Industry-standard code intelligence format used by major IDEs
+- **Dual-Strategy Architecture**: Specialized tree-sitter parsing for 7 core languages, fallback strategy for 50+ file types
+- **Direct Tree-sitter Integration**: No regex fallbacks for specialized languages - fail fast with clear errors
 - **Advanced Search**: Auto-detects and uses the best available tool (ugrep, ripgrep, ag, or grep)
-- **Universal Understanding**: Single system comprehends all programming languages
+- **Universal File Support**: Comprehensive coverage from advanced AST parsing to basic file indexing
 - **File Analysis**: Deep insights into structure, imports, classes, methods, and complexity metrics
 
 ### 🗂️ **Multi-Language Support**  
-- **50+ File Types**: Java, Python, JavaScript/TypeScript, C/C++, Go, Rust, C#, Swift, Kotlin, Ruby, PHP, and more
+- **7 Languages with Tree-sitter AST Parsing**: Python, JavaScript, TypeScript, Java, Go, Objective-C, Zig
+- **50+ File Types with Fallback Strategy**: C/C++, Rust, Ruby, PHP, and all other programming languages
+- **Document & Config Files**: Markdown, JSON, YAML, XML with appropriate handling
 - **Web Frontend**: Vue, React, Svelte, HTML, CSS, SCSS
 - **Database**: SQL variants, NoSQL, stored procedures, migrations
 - **Configuration**: JSON, YAML, XML, Markdown
@@ -81,36 +84,32 @@ The easiest way to get started with any MCP-compatible application:
 - **Rich Metadata**: Captures symbols, references, definitions, and relationships
 
 ### ⚡ **Performance & Efficiency**
-- **SCIP Indexing**: Fast protobuf-based unified indexing system
+- **Tree-sitter AST Parsing**: Native syntax parsing for accurate symbol extraction
 - **Persistent Caching**: Stores indexes for lightning-fast subsequent access
 - **Smart Filtering**: Intelligent exclusion of build directories and temporary files
 - **Memory Efficient**: Optimized for large codebases
+- **Direct Dependencies**: No fallback mechanisms - fail fast with clear error messages
 
 ## Supported File Types
 
 <details>
 <summary><strong>📁 Programming Languages (Click to expand)</strong></summary>
 
-**System & Low-Level:**
-- C/C++ (`.c`, `.cpp`, `.h`, `.hpp`)
-- Rust (`.rs`)
-- Zig (`.zig`, `.zon`)
-- Go (`.go`)
-
-**Object-Oriented:**
-- Java (`.java`)
-- C# (`.cs`)
-- Kotlin (`.kt`)
-- Scala (`.scala`)
-- Objective-C/C++ (`.m`, `.mm`)
-- Swift (`.swift`)
-
-**Scripting & Dynamic:**
-- Python (`.py`)
-- JavaScript/TypeScript (`.js`, `.ts`, `.jsx`, `.tsx`, `.mjs`, `.cjs`)
-- Ruby (`.rb`)
-- PHP (`.php`)
-- Shell (`.sh`, `.bash`)
+**Languages with Specialized Tree-sitter Strategies:**
+- **Python** (`.py`, `.pyw`) - Full AST analysis with class/method extraction and call tracking
+- **JavaScript** (`.js`, `.jsx`, `.mjs`, `.cjs`) - ES6+ class and function parsing with tree-sitter
+- **TypeScript** (`.ts`, `.tsx`) - Complete type-aware symbol extraction with interfaces
+- **Java** (`.java`) - Full class hierarchy, method signatures, and call relationships
+- **Go** (`.go`) - Struct methods, receiver types, and function analysis
+- **Objective-C** (`.m`, `.mm`) - Class/instance method distinction with +/- notation
+- **Zig** (`.zig`, `.zon`) - Function and struct parsing with tree-sitter AST
+
+**All Other Programming Languages:**
+All other programming languages use the **FallbackParsingStrategy** which provides basic file indexing and metadata extraction. This includes:
+- **System & Low-Level:** C/C++ (`.c`, `.cpp`, `.h`, `.hpp`), Rust (`.rs`)
+- **Object-Oriented:** C# (`.cs`), Kotlin (`.kt`), Scala (`.scala`), Swift (`.swift`)
+- **Scripting & Dynamic:** Ruby (`.rb`), PHP (`.php`), Shell (`.sh`, `.bash`)
+- **And 40+ more file types** - All handled through the fallback strategy for basic indexing
 
 </details>
 
@@ -212,6 +211,7 @@ Then configure:
 
 </details>
 
+
 ## Available Tools
 
 ### 🏗️ **Project Management**

README_ja.md

@@ -44,7 +44,7 @@ Code Index MCPは、AIモデルと複雑なコードベースの橋渡しをす
 
 2. **アプリケーションを再起動** – `uvx`がインストールと実行を自動処理
 
-3. **使用開始**：
+3. **使用開始**（AIアシスタントにこれらのプロンプトを与える）：
    ```
    プロジェクトパスを/Users/dev/my-react-appに設定
    このプロジェクトのすべてのTypeScriptファイルを検索
@@ -62,13 +62,16 @@ Code Index MCPは、AIモデルと複雑なコードベースの橋渡しをす
 ## 主な機能
 
 ### 🔍 **インテリジェント検索・解析**
-- **SCIPパワー**：主要IDEで使用される業界標準コードインテリジェンスフォーマット
+- **二重戦略アーキテクチャ**：7つのコア言語に特化したTree-sitter解析、50+ファイルタイプにフォールバック戦略
+- **直接Tree-sitter統合**：特化言語で正規表現フォールバックなし - 明確なエラーメッセージで高速フェイル
 - **高度な検索**：最適なツール（ugrep、ripgrep、ag、grep）を自動検出・使用
-- **汎用理解**：単一システムですべてのプログラミング言語を理解
+- **汎用ファイルサポート**：高度なAST解析から基本ファイルインデックスまでの包括的カバレッジ
 - **ファイル解析**：構造、インポート、クラス、メソッド、複雑度メトリクスへの深い洞察
 
 ### 🗂️ **多言語サポート**
-- **50+ファイルタイプ**：Java、Python、JavaScript/TypeScript、C/C++、Go、Rust、C#、Swift、Kotlin、Ruby、PHPなど
+- **7言語でTree-sitter AST解析**：Python、JavaScript、TypeScript、Java、Go、Objective-C、Zig
+- **50+ファイルタイプでフォールバック戦略**：C/C++、Rust、Ruby、PHPおよびすべての他のプログラミング言語
+- **文書・設定ファイル**：Markdown、JSON、YAML、XML適切な処理
 - **Webフロントエンド**：Vue、React、Svelte、HTML、CSS、SCSS
 - **データベース**：SQLバリアント、NoSQL、ストアドプロシージャ、マイグレーション
 - **設定ファイル**：JSON、YAML、XML、Markdown
@@ -81,36 +84,32 @@ Code Index MCPは、AIモデルと複雑なコードベースの橋渡しをす
 - **豊富なメタデータ**：シンボル、参照、定義、関連性をキャプチャ
 
 ### ⚡ **パフォーマンス・効率性**
-- **スマートインデックス作成**：ビルドディレクトリをインテリジェントにフィルタリングしながら再帰的スキャン
+- **Tree-sitter AST解析**：正確なシンボル抽出のためのネイティブ構文解析
 - **永続キャッシュ**：超高速な後続アクセスのためのインデックス保存
-- **遅延ロード**：最適化された起動のため必要時のみツール検出
-- **メモリ効率**：大規模コードベース向けのインテリジェントキャッシュ戦略
+- **スマートフィルタリング**：ビルドディレクトリと一時ファイルのインテリジェント除外
+- **メモリ効率**：大規模コードベース向けに最適化
+- **直接依存関係**：フォールバック機構なし - 明確なエラーメッセージで高速フェイル
 
 ## サポートされているファイルタイプ
 
 <details>
 <summary><strong>📁 プログラミング言語（クリックで展開）</strong></summary>
 
-**システム・低レベル言語：**
-- C/C++ (`.c`, `.cpp`, `.h`, `.hpp`)
-- Rust (`.rs`)
-- Zig (`.zig`)
-- Go (`.go`)
-
-**オブジェクト指向言語：**
-- Java (`.java`)
-- C# (`.cs`)
-- Kotlin (`.kt`)
-- Scala (`.scala`)
-- Objective-C/C++ (`.m`, `.mm`)
-- Swift (`.swift`)
-
-**スクリプト・動的言語：**
-- Python (`.py`)
-- JavaScript/TypeScript (`.js`, `.ts`, `.jsx`, `.tsx`, `.mjs`, `.cjs`)
-- Ruby (`.rb`)
-- PHP (`.php`)
-- Shell (`.sh`, `.bash`)
+**特化Tree-sitter戦略言語：**
+- **Python** (`.py`, `.pyw`) - クラス/メソッド抽出と呼び出し追跡を含む完全AST解析
+- **JavaScript** (`.js`, `.jsx`, `.mjs`, `.cjs`) - Tree-sitterを使用したES6+クラスと関数解析
+- **TypeScript** (`.ts`, `.tsx`) - インターフェースを含む完全な型認識シンボル抽出
+- **Java** (`.java`) - 完全なクラス階層、メソッドシグネチャ、呼び出し関係
+- **Go** (`.go`) - 構造体メソッド、レシーバータイプ、関数解析
+- **Objective-C** (`.m`, `.mm`) - +/-記法を使用したクラス/インスタンスメソッド区別
+- **Zig** (`.zig`, `.zon`) - Tree-sitter ASTを使用した関数と構造体解析
+
+**すべての他のプログラミング言語：**
+すべての他のプログラミング言語は**フォールバック解析戦略**を使用し、基本ファイルインデックスとメタデータ抽出を提供します。これには以下が含まれます：
+- **システム・低レベル言語：** C/C++ (`.c`, `.cpp`, `.h`, `.hpp`)、Rust (`.rs`)
+- **オブジェクト指向言語：** C# (`.cs`)、Kotlin (`.kt`)、Scala (`.scala`)、Swift (`.swift`)
+- **スクリプト・動的言語：** Ruby (`.rb`)、PHP (`.php`)、Shell (`.sh`, `.bash`)
+- **および40+ファイルタイプ** - すべてフォールバック戦略による基本インデックス処理
 
 </details>
 
@@ -234,6 +233,7 @@ pip install code-index-mcp
 
 </details>
 
+
 ## 利用可能なツール
 
 ### 🏗️ **プロジェクト管理**

README_zh.md

@@ -44,7 +44,7 @@
 
 2. **重新啟動應用程式** – `uvx` 會自動處理安裝和執行
 
-3. **開始使用**：
+3. **開始使用**（向您的 AI 助理提供這些提示）：
    ```
    設定專案路徑為 /Users/dev/my-react-app
    在這個專案中找到所有 TypeScript 檔案
@@ -62,13 +62,16 @@
 ## 主要特性
 
 ### 🔍 **智慧搜尋與分析**
-- **SCIP 驅動**：業界標準程式碼智能格式，被主流 IDE 採用
+- **雙策略架構**：7 種核心語言使用專業化 Tree-sitter 解析，50+ 種檔案類型使用備用策略
+- **直接 Tree-sitter 整合**：專業化語言無正則表達式備用 - 快速失敗並提供清晰錯誤訊息
 - **進階搜尋**：自動偵測並使用最佳工具（ugrep、ripgrep、ag 或 grep）
-- **通用理解**：單一系統理解所有程式語言
+- **通用檔案支援**：從進階 AST 解析到基本檔案索引的全面覆蓋
 - **檔案分析**：深入了解結構、匯入、類別、方法和複雜度指標
 
 ### 🗂️ **多語言支援**
-- **50+ 種檔案類型**：Java、Python、JavaScript/TypeScript、C/C++、Go、Rust、C#、Swift、Kotlin、Ruby、PHP 等
+- **7 種語言使用 Tree-sitter AST 解析**：Python、JavaScript、TypeScript、Java、Go、Objective-C、Zig
+- **50+ 種檔案類型使用備用策略**：C/C++、Rust、Ruby、PHP 和所有其他程式語言
+- **文件與配置檔案**：Markdown、JSON、YAML、XML 適當處理
 - **網頁前端**：Vue、React、Svelte、HTML、CSS、SCSS
 - **資料庫**：SQL 變體、NoSQL、存儲過程、遷移腳本
 - **配置檔案**：JSON、YAML、XML、Markdown
@@ -81,36 +84,32 @@
 - **豐富元資料**：捕獲符號、引用、定義和關聯性
 
 ### ⚡ **效能與效率**
-- **智慧索引**：遞迴掃描並智慧篩選建構目錄
+- **Tree-sitter AST 解析**：原生語法解析以實現準確的符號提取
 - **持久快取**：儲存索引以實現超快速的後續存取
-- **延遲載入**：僅在需要時偵測工具以優化啟動速度
-- **記憶體高效**：針對大型程式碼庫的智慧快取策略
+- **智慧篩選**：智能排除建構目錄和暫存檔案
+- **記憶體高效**：針對大型程式碼庫優化
+- **直接依賴**：無備用機制 - 快速失敗並提供清晰錯誤訊息
 
 ## 支援的檔案類型
 
 <details>
 <summary><strong>📁 程式語言（點擊展開）</strong></summary>
 
-**系統與低階語言：**
-- C/C++ (`.c`, `.cpp`, `.h`, `.hpp`)
-- Rust (`.rs`)
-- Zig (`.zig`)
-- Go (`.go`)
-
-**物件導向語言：**
-- Java (`.java`)
-- C# (`.cs`)
-- Kotlin (`.kt`)
-- Scala (`.scala`)
-- Objective-C/C++ (`.m`, `.mm`)
-- Swift (`.swift`)
-
-**腳本與動態語言：**
-- Python (`.py`)
-- JavaScript/TypeScript (`.js`, `.ts`, `.jsx`, `.tsx`, `.mjs`, `.cjs`)
-- Ruby (`.rb`)
-- PHP (`.php`)
-- Shell (`.sh`, `.bash`)
+**專業化 Tree-sitter 策略語言：**
+- **Python** (`.py`, `.pyw`) - 完整 AST 分析，包含類別/方法提取和呼叫追蹤
+- **JavaScript** (`.js`, `.jsx`, `.mjs`, `.cjs`) - ES6+ 類別和函數解析使用 Tree-sitter
+- **TypeScript** (`.ts`, `.tsx`) - 完整類型感知符號提取，包含介面
+- **Java** (`.java`) - 完整類別階層、方法簽名和呼叫關係
+- **Go** (`.go`) - 結構方法、接收者類型和函數分析
+- **Objective-C** (`.m`, `.mm`) - 類別/實例方法區分，使用 +/- 標記法
+- **Zig** (`.zig`, `.zon`) - 函數和結構解析使用 Tree-sitter AST
+
+**所有其他程式語言：**
+所有其他程式語言使用 **備用解析策略**，提供基本檔案索引和元資料提取。包括：
+- **系統與低階語言：** C/C++ (`.c`, `.cpp`, `.h`, `.hpp`)、Rust (`.rs`)
+- **物件導向語言：** C# (`.cs`)、Kotlin (`.kt`)、Scala (`.scala`)、Swift (`.swift`)
+- **腳本與動態語言：** Ruby (`.rb`)、PHP (`.php`)、Shell (`.sh`, `.bash`)
+- **以及 40+ 種檔案類型** - 全部通過備用策略處理進行基本索引
 
 </details>
 
@@ -234,6 +233,7 @@ pip install code-index-mcp
 
 </details>
 
+
 ## 可用工具
 
 ### 🏗️ **專案管理**