# 監控

DroneDeploy提供機器捕捉和真實人工智能，為您提供完整的質量、安全和進度的全面理解。它可以幫助監控各種工地，實現全生命週期可視化。

fixa是一個專注於AI語音代理測試與可觀測性的平臺，旨在幫助開發者和企業快速發現並修復語音代理中的問題。通過自動化測試、生產監控和錯誤檢測等功能，確保語音代理的穩定性和可靠性。該平臺由Y Combinator資助，提供簡單透明的定價策略，適合不同規模的企業使用。

RAG-logger是一個為檢索增強生成(Retrieval-Augmented Generation, RAG)應用設計的開源日誌工具。它是一個輕量級的、針對RAG特定日誌需求的開源替代方案，專注於為RAG應用提供全面的日誌記錄功能，包括查詢跟蹤、檢索結果記錄、LLM交互記錄以及逐步性能監控。它採用基於JSON的日誌格式，支持每日日誌組織、自動文件管理和元數據豐富化。RAG-logger以其開源、輕量級和專注於RAG應用的特性，為開發者提供了一個有效的工具來監控和分析RAG應用的性能。

LangWatch是一個專為大型語言模型（LLM）設計的監控、評估和優化平臺。它通過科學的方法來衡量LLM的質量，自動尋找最佳的提示和模型，並提供一個直觀的分析儀表板，幫助AI團隊以10倍的速度交付高質量的產品。LangWatch的主要優點包括減少手動優化過程、提高開發效率、確保產品質量和安全性，以及支持企業級的數據控制和合規性。產品背景信息顯示，LangWatch利用Stanford的DSPy框架，幫助用戶在幾分鐘內而非幾周內找到合適的提示或模型，從而加速產品從概念驗證到生產的轉變。

Arch是一個開源的網關，專為處理提示（prompts）而設計，它利用快速的大型語言模型（LLMs）來處理提示，並與後端系統無縫集成。Arch基於Envoy構建，支持任何應用程序語言，並提供快速部署和透明升級。它提供了包括流量管理、前端/邊緣網關、監控和端到端追蹤在內的多種功能，幫助開發者構建快速、健壯和個性化的GenAI應用。

Vocera是一個由Y Combinator支持的AI語音代理測試與監控平臺，它允許用戶通過模擬各種場景和使用真實音頻來測試和評估AI語音代理的性能。該平臺的主要優點在於能夠快速啟動測試，減少將AI代理投入生產環境的時間，同時提供即時監控和性能分析，確保AI代理在各種對話場景中都能提供無縫的用戶體驗。Vocera適用於需要快速創建和測試AI語音代理的企業和開發者，特別是在合規性要求較高的行業中，如醫療、法律等。

Editor Usage 是一款為macOS設計的菜單欄應用程序，旨在幫助用戶監控和管理他們的Cursor編輯器使用情況。該應用程序能夠追蹤高級、普通和特殊請求的使用情況，並在接近使用限制時提供警告。它允許用戶從菜單欄快速查看剩餘的請求次數，從而確保用戶始終了解他們的使用情況，並避免因超出限制而受到影響。這款應用的主要優點包括詳細的使用監控、可定製的警告設置以及快速便捷的訪問方式。它適合需要管理多個項目或希望即時監控請求使用情況的用戶。

Temperstack是一個企業級的主動式SRE平臺，旨在減少SRE的重複勞動，提高服務的可靠性。它通過自動化服務目錄、警報審計和跨您的監控工具的SLI報告，為從CTO到SRE工程師的團隊提供可見性、主動發現問題並促進協作。Temperstack集成了流行的監控工具，提供統一的命令界面，以實現全面的SRE可見性和行動。

StatusSight 是一款用於即時監控系統狀態的工具，能夠幫助企業及時瞭解其服務的運行狀態。它提供直觀的儀表板，用戶可以輕鬆跟蹤各項指標，確保系統的高可用性與性能。適合各種規模的企業，支持定製化配置，以滿足不同需求。此工具通常以訂閱方式收費，具體定價根據所需功能而定。

Helicone AI是一個為開發者設計的開源平臺，專注於日誌記錄、監控和調試。它具備毫秒級延遲影響、100%日誌覆蓋率和行業領先的查詢時間，是為生產級工作負載設計的。平臺通過Cloudflare Workers實現低延遲和高可靠性，並支持風險無憂的實驗，無需安裝SDK，僅需添加頭部信息即可訪問所有功能。

Evidently AI是一個開源的Python庫，用於監控機器學習模型，支持從RAGs到AI助手的LLM驅動產品的評估。它提供了數據漂移、數據質量和生產ML模型性能的監控，擁有超過2000萬的下載量和5000+的GitHub星標，是機器學習領域中一個值得信賴的監控工具。

Hamming是一個端到端的AI語音代理測試平臺，支持從開發到生產的全流程。它通過自動化語音角色創建成千上萬的併發電話呼叫，以測試和發現語音代理中的bug，顯著提高測試效率。此外，Hamming還提供提示管理、優化器和遊樂場，幫助用戶自動生成優化的提示，並在數據集上測試LLM輸出。Hamming還具備主動監控功能，能夠跟蹤和評分AI應用在生產中的使用情況，並標記需要關注的案例。

Langtrace是一個開源的可觀測性工具，用於收集和分析追蹤和指標，幫助提升大型語言模型（LLM）應用的性能。它支持OpenTelemetry標準追蹤，可自我託管，避免供應商鎖定。Langtrace提供端到端的可觀測性，幫助用戶全面瞭解整個機器學習流程，包括RAG或微調模型。此外，Langtrace還支持建立反饋循環，通過追蹤的LLM交互創建黃金數據集，不斷測試和增強AI應用。

GPT Auth是一個安全的GPT認證和監控平臺。它可以讓GPT開發者簡單快速地為自己的GPT模型添加用戶認證系統,即時監控用戶查詢,從而保護GPT不被非法訪問。該平臺提供簡單易用的無代碼解決方案,使所有層次的開發者都能輕鬆設置強大的安全認證。

Athina AI是一個用於監控和調試LLM（大型語言模型）模型的工具。它可以幫助你發現和修復LLM模型在生產環境中的幻覺和錯誤，並提供詳細的分析和改進建議。Athina AI支持多種LLM模型，可以配置定製化的評估來滿足不同的使用場景。你可以通過Athina AI來檢測錯誤的輸出、分析成本和準確性、調試模型輸出、探索對話內容以及比較不同模型的性能表現等。

Ramen AI是一款現代化的工具集，用於構建、測試和部署基於LLM的內容分類應用。它提供完整的AI工具集，讓您能夠輕鬆構建、評估、部署和監控內容分類。Ramen AI支持靈活的分類管理，可即時進行測試，以獲得快速準確的結果。它還提供多種分類方法，為您選擇最佳的分類方式。您還可以使用Ramen AI的API，將分類應用集成到您的代碼中，甚至可以在Google表格中使用Ramen AI的公式。Ramen AI還提供AI生成的測試數據集，節省手動生成驗證數據集的時間。它還可以監控和報告分類應用的使用情況，幫助您瞭解變化趨勢。Ramen AI適用於各種分類應用場景，包括醫療、金融、零售、法律、客服、教育和研究等。

MLJAR提供出色的數據科學工具和學習材料，幫助用戶理解和利用他們的數據。產品功能包括自動化機器學習、將筆記本轉換為交互式網絡應用、使用LLMs生成Python圖表、構建自己的SaaS以及服務器和網站監控。MLJAR的優勢在於提供XAI能力、公平的機器學習、模型解釋、公平度指標、以及快速檢測異常並及時通知。定價方面，MLJAR提供了多種產品比較和決策樹、隨機森林、Xgboost、LightGBM、CatBoost等算法的比較。定位於數據科學工具領域。

Llog是一個協作監控LLM應用程序的終端到終端平臺，為團隊提供洞察力，瞭解他們的LLM應用程序在生產後的情況。團隊成員可以在一個協作空間中審查日誌、標記重要事項並分配任務。無論團隊規模多大，都可以在任何價格層級下享受無限的席位支持。通過直接觀察用戶交互，全面瞭解終端用戶的行為，並永遠不再擔心LLM實際上在說什麼。使用我們簡單的格式，進行幾個API請求，即可立即在我們的平臺上查看結果。

Vellum 是一個開發平臺，用於構建 LLM 應用。它提供了快速工程、語義搜索、版本控制、測試和監控等工具，兼容所有主要的 LLM 提供商。Vellum 可以幫助您將 LLM 功能帶入生產環境，支持迅速開發和部署 LLM 模型，同時提供質量測試和性能監控等功能。定價和定位請參考官方網站。

Autoblocks是一個協作式的雲工作空間，為產品團隊快速迭代GenAI產品提供了所需的所有工具。通過Autoblocks，您可以原型和測試應用程序流水線，跟蹤用戶交互並瞭解用戶體驗的影響，評估和可視化用戶結果，無縫集成到任何代碼庫和技術堆棧。

Senuto是一個SEO數據分析工具集,提供給SEO從業者使用。它可以追蹤關鍵詞排名變化,進行競爭對手分析,發現長尾關鍵詞機會,生成SEO報告等。該工具提供免費試用,定價合理,定位為SEO人員的必備工具。

Humanloop是一個用於構建和監控以大語言模型為基礎的生產級應用的協作平臺。它提供了一套完整的工具集,可以幫助開發者更快速地將AI從原型開發到生產環境,同時保證系統的可靠性。主要功能包括:提示工程,可以迭代和版本化提示,提高命中率;模型管理,支持各種模型並進行跟蹤;內容評估,收集反饋並進行定量分析;以及合作平臺,讓非技術人員也可以參與到AI應用開發中。典型應用場景有構建聊天機器人、自動化客戶支持以及生成營銷內容等。Humanloop已經受到了成千上萬開發者的青睞,被多家知名企業所使用。

Middleware是一個雲原生監控平臺，提供完整的應用和基礎設施可觀測性，以便您能夠大規模監控和診斷問題。它包括基礎設施監控、日誌監控、應用性能監控、數據庫監控、合成監控、無服務器監控、容器監控和即時用戶監控等功能。通過使用Middleware，您可以輕鬆識別、理解和解決雲基礎架構中的問題。

icetana是一款自學習的人工智能軟件，可在大型監控網絡中檢測異常或有趣的事件。它通過連接到現有系統，學習環境中的正常情況，並顯示不尋常的事件。icetana不斷提升智能，減少監控屏幕上的疲勞，提供更重要的事件和潛在風險。它可以幫助安全團隊在事件發生前識別和處理問題，提高預防率，減少安全漏洞。

AI-Proctor是一款在線考試監控系統，通過插件與桌面應用程序的配合，實現考生瀏覽器與監考教師的通信和全屏模式切換功能。該系統具備智能監控、全面功能點列表、多種使用場景等特點。

Safe Kids AI for Email是一款保護Gmail賬戶免受仇恨、欺凌和負面語言的插件。我們使用機器學習來標記可能有害的郵件。此外，當孩子們寫不友善的郵件時，我們會暫停並讓他們反思自己的選擇，以便他們做出更好的決定。此插件在瀏覽器上本地運行，不會影響隱私。

Browse AI是一款無需編碼的工具，可以在2分鐘內訓練一個機器人來抓取任何網站的數據。您可以使用簡單的點-and-click界面設置網頁抓取自動化任務，將數據下載為電子表格或與Google表格同步，定時運行任務並監控數據變化。您還可以使用Zapier集成或REST API和Webhooks將數據流入任何其他軟件，甚至可以將任何網站轉化為API。Browse AI可幫助您節省大量時間和精力，提高工作效率。

OpenCopilot 是一個使構建自己的 AI 合作伙伴變得直觀、快速和可靠的工具。無需具備前期 AI 經驗，您可以輕鬆地將 AI 合作伙伴嵌入到產品中。無論是開發工具、SaaS 還是內部工具，每個公司和產品都可以擁有自己的 AI 合作伙伴。OpenCopilot 提供監控、評估系統、易於部署的開箱即用功能，並使用開源構建模塊。現在就開始您的第一個 AI 合作伙伴吧！

Toyon是一款金融數據即時分析工具，提供即時股票和貨幣市場的相關數據和指標，幫助用戶追蹤市場趨勢和做出投資決策。該工具還提供即時的新聞和輿情分析，幫助用戶瞭解市場動態和事件對股票價格的影響。Toyon還支持自定義跟蹤和監控，用戶可以根據自己的需求設置感興趣的股票和貨幣，獲取即時的數據和分析報告。定價根據不同的用戶類型和功能進行區分。Toyon是一個全面的金融數據分析工具，適用於個人投資者和專業交易員。

Vigilocity是一種智能安全監控和預防解決方案，幫助企業即時監測並預防網絡攻擊和數據洩露。其主要功能包括即時警報通知、行為分析、安全事件追蹤和風險評估。Vigilocity能夠幫助企業提高網絡安全性，降低風險，保護品牌和聲譽。定價和定位信息請聯繫官方網站獲取。