LLM用の高速ウェブサイトパーサーを14メガバイトのRAMで動かす方法
わずか14MBのRAMを使用し、LLM用にクリーンなMarkdownを出力する軽量RustベースのWebスクレイピングツール。
言語
ホーム言語
セクション
わずか14MBのRAMを使用し、LLM用にクリーンなMarkdownを出力する軽量RustベースのWebスクレイピングツール。
pullmdは、WebページをLLMエージェント向けのクリーンなMarkdownに変換します。広告やナビゲーションのノイズを取り除き、コンテンツ構造を保持しながらトークンを節約します。
Log4brainsは設計判断の記録をdocs-as-codeワークフローに変換し、ADR履歴を検索可能でコードベースと同期した状態に保ちます。
Alexandrieは、チームWiki機能、自ホストの独立性、オフラインアクセスを1つのDockerデプロイ可能なナレッジベースに統合した、Markdown編集対応のツールです。
標準的なMarkdownレンダラーはライブトークンストリーム用に作られていません。Markstreamは、AI出力のレンダリング時に発生するちらつき、壊れたコードブロック、固まった数式を解決します。
OpenKnowledgeはローカルMarkdownフォルダをWYSIWYGエディタとMCP経由のAIエージェント統合で開きます。プロプライエタリなデータベース不要、プレーンテキストファイルとGit同期のみ。
Docusaurus and VuePress are popular, but they pull in heavy npm dependencies. Hugo Book offers a lightweight alternative for clean documentation sites.
SätteriはRustベースのMDXパーサー兼コンパイラで、JavaScriptのプラグインインフラを維持しながらドキュメントやコンテンツサイトのビルドを高速化します。
重いWikiにうんざりしていませんか?LeafWikiはGoバイナリ1つで动作するセルフホスト型ナレッジベースです。Markdownファイルをディスクに保存するため、Docker Composeの悪梦とは无縁です。
Academic Pagesは、开发者や研究者、学生がコーディング不要でプロフェッショナルなポートフォリオを作成できる、GitHub Pages対応の無料Jekyllテンプレートです。
GitHubDailyは、開発者の時間を節約し、質の高いツールを発見するのに役立つ、熱心な人々によって手動で選出された最高のオープンソースプロジェクトのキュレーションコレクションです。
Richは、テーブル、プログレスバー、構文ハイライトを使って、つまらないターミナル出力を美しく、カラフルで、インタラクティブな体験に変えるPythonライブラリです。