[feat] CodeLumiaのリポジトリのファイルツリーとコードを表示するStreamlitアプリケーションを追加

## 概要

- `.CodeLumiaignore`と`.SourceSageignore`ファイルを追加し、無視するファイルとディレクトリのパターンを指定
- `CodeLumia.md`ファイルを追加し、リポジトリのファイルツリーとコードを表示するマークダウンファイルを生成
- `Dockerfile`と`docker-compose.yml`を追加し、アプリケーションのDockerイメージとコンテナを定義
- `app.py`ファイルを追加し、以下の機能を実装:
- リポジトリのクローン
- ファイルツリーの取得
- マークダウンファイルの生成
- Streamlitアプリケーションの構築
- `docs/language_map.json`ファイルを追加し、ファイル拡張子と言語のマッピングを定義
- `requirements.txt`ファイルを追加し、必要なPythonパッケージを指定

## 詳細

- `.CodeLumiaignore`と`.SourceSageignore`ファイルを使用して、リポジトリ内の特定のファイルとディレクトリを無視
- `CodeLumia.md`ファイルにリポジトリのファイルツリーとコードを表示
- `Dockerfile`と`docker-compose.yml`を使用して、アプリケーションのDockerイメージとコンテナを定義し、デプロイを容易にする
- `app.py`ファイルでは以下の処理を行う:
- リポジトリをクローンし、ファイルツリーを取得
- マークダウンファイルを生成し、ファイルツリーとコードを表示
- Streamlitアプリケーションを構築し、マークダウンファイルを表示
- マークダウンファイルのダウンロードリンクを提供
- `docs/language_map.json`ファイルを使用して、コードブロックの言語を適切に設定
- `requirements.txt`ファイルにStreamlitパッケージを指定

.CodeLumiaignore

@@ -0,0 +1,170 @@
+# Byte-compiled / optimized / DLL files
+__pycache__/
+*.py[cod]
+*$py.class
+
+# C extensions
+*.so
+
+# Distribution / packaging
+.Python
+build/
+develop-eggs/
+dist/
+downloads/
+eggs/
+.eggs/
+lib/
+lib64/
+parts/
+sdist/
+var/
+wheels/
+share/python-wheels/
+*.egg-info/
+.installed.cfg
+*.egg
+MANIFEST
+
+# PyInstaller
+#  Usually these files are written by a python script from a template
+#  before PyInstaller builds the exe, so as to inject date/other infos into it.
+*.manifest
+*.spec
+
+# Installer logs
+pip-log.txt
+pip-delete-this-directory.txt
+
+# Unit test / coverage reports
+htmlcov/
+.tox/
+.nox/
+.coverage
+.coverage.*
+.cache
+nosetests.xml
+coverage.xml
+*.cover
+*.py,cover
+.hypothesis/
+.pytest_cache/
+cover/
+
+# Translations
+*.mo
+*.pot
+
+# Django stuff:
+*.log
+local_settings.py
+db.sqlite3
+db.sqlite3-journal
+
+# Flask stuff:
+instance/
+.webassets-cache
+
+# Scrapy stuff:
+.scrapy
+
+# Sphinx documentation
+docs/_build/
+
+# PyBuilder
+.pybuilder/
+target/
+
+# Jupyter Notebook
+.ipynb_checkpoints
+
+# IPython
+profile_default/
+ipython_config.py
+
+# pyenv
+#   For a library or package, you might want to ignore these files since the code is
+#   intended to run in multiple environments; otherwise, check them in:
+# .python-version
+
+# pipenv
+#   According to pypa/pipenv#598, it is recommended to include Pipfile.lock in version control.
+#   However, in case of collaboration, if having platform-specific dependencies or dependencies
+#   having no cross-platform support, pipenv may install dependencies that don't work, or not
+#   install all needed dependencies.
+#Pipfile.lock
+
+# poetry
+#   Similar to Pipfile.lock, it is generally recommended to include poetry.lock in version control.
+#   This is especially recommended for binary packages to ensure reproducibility, and is more
+#   commonly ignored for libraries.
+#   https://python-poetry.org/docs/basic-usage/#commit-your-poetrylock-file-to-version-control
+#poetry.lock
+
+# pdm
+#   Similar to Pipfile.lock, it is generally recommended to include pdm.lock in version control.
+#pdm.lock
+#   pdm stores project-wide configurations in .pdm.toml, but it is recommended to not include it
+#   in version control.
+#   https://pdm.fming.dev/#use-with-ide
+.pdm.toml
+
+# PEP 582; used by e.g. github.com/David-OConnor/pyflow and github.com/pdm-project/pdm
+__pypackages__/
+
+# Celery stuff
+celerybeat-schedule
+celerybeat.pid
+
+# SageMath parsed files
+*.sage.py
+
+# Environments
+.env
+.venv
+env/
+venv/
+ENV/
+env.bak/
+venv.bak/
+
+# Spyder project settings
+.spyderproject
+.spyproject
+
+# Rope project settings
+.ropeproject
+
+# mkdocs documentation
+/site
+
+# mypy
+.mypy_cache/
+.dmypy.json
+dmypy.json
+
+# Pyre type checker
+.pyre/
+
+# pytype static type analyzer
+.pytype/
+
+# Cython debug symbols
+cython_debug/
+
+# PyCharm
+#  JetBrains specific template is maintained in a separate JetBrains.gitignore that can
+#  be found at https://github.com/github/gitignore/blob/main/Global/JetBrains.gitignore
+#  and can be added to the global gitignore or merged into this file.  For a more nuclear
+#  option (not recommended) you can uncomment the following to ignore the entire idea folder.
+#.idea/
+
+SourceSageAssets
+
+.git
+.CodeLumiaignore
+.gitattributes
+.gitignore
+LICENSE
+.github
+*.png

.SourceSageignore

@@ -0,0 +1,29 @@
+.git
+__pycache__
+LICENSE
+output.md
+assets
+Style-Bert-VITS2
+output
+streamlit
+SourceSage.md
+data
+.gitignore
+.SourceSageignore
+*.png
+Changelog
+SourceSageAssets
+SourceSageAssetsDemo
+__pycache__
+.pyc
+**/__pycache__/**
+modules\__pycache__
+.svg
+sourcesage.egg-info
+.pytest_cache
+dist
+build
+
+.gitattributes
+.CodeLumiaignore
+tmp

CodeLumia.md

@@ -0,0 +1,65 @@
+# CodeLumia File Tree
+
+```
+CodeLumia/
+    app.py
+    README.md
+    docs/
+        SourceSageDocs.md
+
+```
+
+## app.py
+
+```python
+# sample code 
+
+import streamlit as st
+
+x = st.slider('Select a value')
+st.write(x, 'squared is', x * x)
+```
+
+## README.md
+
+```markdown
+---
+title: CodeLumia
+emoji: 📚
+colorFrom: purple
+colorTo: blue
+sdk: streamlit
+sdk_version: 1.33.0
+app_file: app.py
+pinned: false
+license: mit
+---
+
+
+<p align="center">
+<img src="https://media.githubusercontent.com/media/Sunwood-ai-labs/CodeLumia/main/docs/CodeLumia_icon.png" width="50%">
+<br>
+<h1 align="center">CodeLumia</h1>
+<h3 align="center">
+  ～Learn to Code, Step by Step～
+
+[![Hugging Face Spaces](https://img.shields.io/badge/%F0%9F%A4%97%20Hugging%20Face-Spaces-blue)](https://huggingface.co/spaces/MakiAi/CodeLumia)[![](https://img.shields.io/github/stars/Sunwood-ai-labs/CodeLumia)](https://github.com/Sunwood-ai-labs/CodeLumia)[![](https://img.shields.io/github/last-commit/Sunwood-ai-labs/CodeLumia)](https://github.com/Sunwood-ai-labs/CodeLumia)[![](https://img.shields.io/github/languages/top/Sunwood-ai-labs/CodeLumia)](https://github.com/Sunwood-ai-labs/CodeLumia)
+
+</h3>
+
+</p>
+
+
+```
+
+## docs/SourceSageDocs.md
+
+```markdown
+# SourceSageDocs
+
+	```bash
+	
+	sourcesage --repository CodeLumia --owner Sunwood-ai-labs
+	```
+```
+

Dockerfile

@@ -0,0 +1,16 @@
+FROM python:3.12-slim
+
+WORKDIR /app
+
+RUN apt-get update && \
+    apt-get install -y git && \
+    rm -rf /var/lib/apt/lists/*
+
+COPY requirements.txt .
+RUN pip install --no-cache-dir -r requirements.txt
+
+COPY . .
+
+EXPOSE 8501
+
+CMD ["streamlit", "run", "app.py"]

app.py

@@ -0,0 +1,93 @@
+import os
+import streamlit as st
+import fnmatch
+import shutil
+import time
+import json
+import base64
+
+# .gitignoreのパターンを読み込む
+ignore_patterns = []
+with open(".CodeLumiaignore", "r") as f:
+    for line in f:
+        line = line.strip()
+        if line and not line.startswith("#"):
+            ignore_patterns.append(line)
+
+# tmpフォルダを削除
+if os.path.exists("tmp"):
+    shutil.rmtree("tmp")
+
+# tmpフォルダを作成
+os.makedirs("tmp")
+
+# リポジトリのクローン
+repo_path = "tmp/CodeLumia"
+if os.path.exists(repo_path):
+    shutil.rmtree(repo_path)
+os.system(f"git clone https://github.com/Sunwood-ai-labs/CodeLumia.git {repo_path}")
+
+# 一時的な遅延を追加
+time.sleep(1)
+
+# リポジトリのファイルツリーを取得
+file_tree = ""
+for root, dirs, files in os.walk("tmp/CodeLumia"):
+    # .gitignoreに一致するディレクトリを無視
+    dirs[:] = [d for d in dirs if not any(fnmatch.fnmatch(d, pattern) for pattern in ignore_patterns)]
+    
+    level = root.replace("tmp/CodeLumia", "").count(os.sep)
+    indent = " " * 4 * (level)
+    file_tree += f"{indent}{os.path.basename(root)}/\n"
+    subindent = " " * 4 * (level + 1)
+    for f in files:
+        # .gitignoreに一致するファイルを無視
+        if not any(fnmatch.fnmatch(f, pattern) for pattern in ignore_patterns):
+            file_tree += f"{subindent}{f}\n"
+
+# マークダウンファイルを結合
+markdown_content = f"# CodeLumia File Tree\n\n```\n{file_tree}\n```\n\n"
+
+# 拡張子と言語のマッピングを読み込む
+with open("docs/language_map.json", "r") as f:
+    language_map = json.load(f)
+
+for root, dirs, files in os.walk("tmp/CodeLumia"):
+    print(root)
+    # .gitignoreに一致するディレクトリを無視
+    dirs[:] = [d for d in dirs if not any(fnmatch.fnmatch(d, pattern) for pattern in ignore_patterns)]
+    for file in files:
+        # .gitignoreに一致するファイルを無視
+        if not any(fnmatch.fnmatch(file, pattern) for pattern in ignore_patterns):
+            file_path = os.path.join(root, file)
+            _, file_extension = os.path.splitext(file)
+            language = language_map.get(file_extension, "")
+            with open(file_path, "r", encoding="utf-8", errors="ignore") as f:
+                content = f.read()
+                # コードブロック内のコードブロックの範囲の全行の先頭に2つのスペースを入れる
+                lines = content.split("\n")
+                modified_lines = []
+                inside_code_block = False
+                for line in lines:
+                    if line.startswith("```"):
+                        inside_code_block = not inside_code_block
+                        modified_lines.append("\t" + line)
+                    else:
+                        if inside_code_block:
+                            modified_lines.append("\t" + line)
+                        else:
+                            modified_lines.append(line)
+                content = "\n".join(modified_lines)
+                # コードブロックの中のバッククォートをエスケープ
+                markdown_content += f"## {file_path.replace("tmp/CodeLumia/", "")}\n\n```{language}\n{content}\n```\n\n"
+
+# マークダウンファイルを保存
+with open("CodeLumia.md", "w", encoding="utf-8") as f:
+    f.write(markdown_content)
+
+# Streamlitアプリケーションの構築
+st.title("CodeLumia")
+st.markdown(markdown_content, unsafe_allow_html=True)
+
+# ダウンロードリンクの作成
+st.markdown(f'<a href="data:text/markdown;base64,{base64.b64encode(markdown_content.encode("utf-8")).decode("utf-8")}" download="CodeLumia.md">Download Markdown File</a>', unsafe_allow_html=True)

docker-compose.yml

@@ -0,0 +1,9 @@
+version: '3'
+
+services:
+  app:
+    build: .
+    ports:
+      - "8501:8501"
+    volumes:
+      - .:/app

docs/language_map.json

@@ -0,0 +1,27 @@
+{
+    ".py": "python",
+    ".js": "javascript",
+    ".java": "java",
+    ".c": "c",
+    ".cpp": "cpp",
+    ".cs": "csharp",
+    ".go": "go",
+    ".php": "php",
+    ".rb": "ruby",
+    ".rs": "rust",
+    ".ts": "typescript",
+    ".html": "html",
+    ".css": "css",
+    ".json": "json",
+    ".xml": "xml",
+    ".yml": "yaml",
+    ".yaml": "yaml",
+    ".md": "markdown",
+    ".txt": "plaintext",
+    ".sh": "bash",
+    ".sql": "sql",
+    "Dockerfile": "dockerfile",
+    ".dockerfile": "dockerfile",
+    "docker-compose.yml": "yaml",
+    "docker-compose.yaml": "yaml"
+}

requirements.txt

@@ -0,0 +1 @@
+streamlit