使用Scikit-LLM進行文本摘要

要點

• Scikit-LLM橋接傳統機器學習與大語言模型，提供零樣本和少樣本分類及文本摘要功能。
• 自定義HuggingFaceSummarizer類繼承自BaseEstimator和TransformerMixin，可加載預訓練摘要模型並生成摘要。
• 通過流水線將摘要、TF-IDF向量化和邏輯迴歸分類器串聯，實現數據預處理與模型訓練一體化。
• 示例中使用輕量級模型distilbart-cnn-12-6，摘要質量有限但可自由替換為更強模型。