跳到正文
2024年6月24日週一
  1. Hugging Face Blog63

    Florence-2 微調教程:Microsoft 視覺語言模型的 DocVQA 實作

    Hugging Face Blog 示範以 DocVQA 微調 Microsoft 的 Florence-2,使其適配視覺問答任務。訓練 7 個 epochs 後,驗證集 Levenshtein 相似度由 0 升至 57.0。文中提供凍結視覺編碼器、batch size 6 的低資源方案,並記錄以 8 張 H100、batch size 64 微調全模型需時 70 分鐘。

    推薦理由:文章以 DocVQA 示範 Florence-2 微調,並列出驗證集表現及不同 GPU 配置,可供評估下游任務適配與訓練資源。

2024年5月21日週二
2024年5月12日週日
  1. Beren Millidge 研究博客(RSS)46

    現今開放 LLM 的無條件分佈

    對多款現今開放 LLM 的無條件分佈進行比較,發現部分模型會輸出數學或編碼問答,顯示預訓練可能包含指令或評測類資料。Llama3 8B、Phi3 和 Olmo-v1.7 的輸出呈現這類模式,但 Mistral base、Gemma 和 JetMoE 等例子顯示,無條件分佈未必能可靠反映訓練方式。

2023年10月25日週三
2023年5月24日週三
2023年4月14日週五
2023年1月23日週一
2020年9月22日週二
2019年7月22日週一
  1. OpenAI News88

    Microsoft 向 OpenAI 投資 $1 billion,並合作建設 AGI 平台

    Microsoft 向 OpenAI 投資 $1 billion,並合作在 Microsoft Azure 建設可擴展至 AGI 的硬件與軟件平台。雙方將共同開發新的 Azure AI 超級計算技術,Microsoft 亦會成為 OpenAI 的獨家雲端供應商。雙方還將共同進一步擴展 Microsoft Azure 支援大規模 AI 系統的能力。

    推薦理由:這項合作涵蓋投資、Azure AI 超級計算技術開發與獨家雲端供應,呈現 OpenAI 建設 AGI 平台所涉及的資金、技術與雲端合作安排。

2016年11月15日週二

最多提供 50 頁,更早的內容請使用搜尋或主題頁。