一個智能代理框架，可執行廣泛的複雜計算機任務。
它能夠自我學習和改進，處理各種作業系統級任務。
包括但不限於文件管理、數據處理、環境設置、多媒體操作、網頁瀏覽、代碼編寫、第三方應用交互、自動化測試等。
該項目由上海人工智慧實驗室、華南師範大學、普林斯頓大學和香港大學的研究人員聯合開發。
作業系統Copilot為Linux和MacOS提供了通用接口，集成了常見的作業系統操作實踐，例如Python代碼解釋器、bash終端、滑鼠/鍵盤控制和API調用。
研究人員基於作業系統-Copilot框架創建的實例或具體代理：星期五代理
FRIDAY可以從圖片，視頻或文本中學習，並可以執行一系列計算機任務，例如在Excel中繪圖或創建網站。最重要的是，FRIDAY能夠通過做任務來學習新技能，就像人類通過不斷的嘗試和實踐變得更好一樣。
星期五代理的主要功能：
1.自學和改進：FridAY可以通過自學不斷積累新的技能和知識，使其能夠處理更多未知任務和應用。這包括學習如何更有效地使用軟體應用程式、執行特定任務的最佳實踐等。
2.廣泛的任務執行：FRIDAY被設計成一個通用代理，能夠執行各種計算機任務，包括數據分析、文件管理、自動編程任務、多媒體編輯、網頁瀏覽和信息檢索。
3.作業系統級交互：星期五可以與作業系統內的各種元素交互，例如文件系統、終端、第三方應用程式等，來控制和管理這些元素。
4.第三方應用程式的集成和控制：使用作業系統-Copilot框架，FRIDAY可以與各種第三方應用程式進行集成和控制，例如辦公軟體（Microsoft Office、Google Docs）、編程環境（IDE）、社交媒體平台等。
5.自動化複雜的工作流程：星期五可以自動化複雜的工作流程，例如從執行數據收集和處理到生成報告的整個流程，大大提高了工作效率。
6.創建自定義任務和工作流程：用戶可以自定義FRIDAY代理來執行特定的任務和工作流程，代理可以學習這些自定義操作並隨著時間的推移提高執行效率。
7.高度的適應性和靈活性：FRIDAY通過其自我學習能力，可以適應各種新場景和需求，靈活處理各種計算機任務。
8.提高生產力和效率：通過自動化日常任務和複雜工作流程，FRIDAY旨在顯著提高用戶生產力和工作效率。
9.通過這些功能，FRIDAY代理展示了作業系統-Copilot框架的強大潛力，為用戶提供了高度靈活、自我學習和改進的通用計算機代理，旨在處理各種計算機相關任務，從而解放用戶的雙手，提高工作效率。
星期五代理可以與作業系統一起工作以：
- 自動化日常任務：例如設置工作環境、自動組織文件、備份數據等。
- 數據處理和分析：在Excel等應用程式中自動計算、生成圖表等。
- 多媒體內容創建：例如，在PowerPoint中自動創建演示文稿或編輯視頻。
- Web瀏覽和信息檢索：自動化Web搜索以快速總結和收集特定信息。
- 編程和腳本執行：自動生成代碼片段或執行特定腳本以完成任務。
- 第三方應用程式交互：與郵件客戶端、日曆和社交媒體等第三方應用程式交互，以執行發送電子郵件和更新事件等任務。
- 自我學習和改進：通過自我指導學習新技能和應用，不斷提高任務的效率和準確性。
項目和演示：https://os-copilot.github.io
論文：https://arxiv.org/abs/2402.07456
GitHub：https://github.com/OS-Copilot/FR
視頻：