郝信華 iPAS AI應用規劃師 學習筆記
自然語言處理與應用
86
免費公開
房間資訊
自然語言處理與應用介紹
Top 5
1
One-Hot Encoding (獨熱編碼)
2
編碼器-解碼器架構 (Encoder-Decoder Architecture)
3
遞迴神經網路 (Recurrent Neural Network, RNN)
4
槽位填充 (Slot Filling)
5
大型語言模型 (Large Language Model, LLM) 的幻覺 (Hallucination)
1
One-Hot Encoding (獨熱編碼)
2
編碼器-解碼器架構 (Encoder-Decoder Architecture)
3
遞迴神經網路 (Recurrent Neural Network, RNN)
4
槽位填充 (Slot Filling)
5
大型語言模型 (Large Language Model, LLM) 的幻覺 (Hallucination)
全部
NLP基本概念與定義
核心文本前處理技術
NLP模型與演算法
詞彙表達與語意理解
主要NLP應用場景
序列模型與架構
NLP系統評估與挑戰
NLP工具與整合應用
全部
NLP基本概念與定義
核心文本前處理技術
NLP模型與演算法
詞彙表達與語意理解
主要NLP應用場景
序列模型與架構
NLP系統評估與挑戰
NLP工具與整合應用
全部類型
免費與付費
最新發佈
最新發佈
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo 和 BERT 提供的嵌入,與傳統的靜態詞嵌入(如 Word2Vec)的主要區別
ELMo 和 BERT 提供的嵌入與傳統的靜態詞嵌入(如 Word2Vec)的主要區別在於它們是否為上下文相關 (contextual)。 靜態詞嵌入 (Static Embeddings) 代表模型: Word2Vec、GloVe、FastText 主要特點: 單一詞彙,單一向量: 每個詞
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
傳統
1
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo 和 BERT 提供的嵌入,與傳統的靜態詞嵌入(如 Word2Vec)的主要區別
ELMo 和 BERT 提供的嵌入與傳統的靜態詞嵌入(如 Word2Vec)的主要區別在於它們是否為上下文相關 (contextual)。 靜態詞嵌入 (Static Embeddings) 代表模型: Word2Vec、GloVe、FastText 主要特點: 單一詞彙,單一向量: 每個詞
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
傳統
1
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo(Embeddings from Language Models)
ELMo(Embeddings from Language Models)是一種在自然語言處理(NLP)中使用的深度學習詞嵌入模型,於2018年由Allen Institute for AI及華盛頓大學提出。與傳統靜態詞向量(如Word2Vec、GloVe)不同,ELMo產生的是**「上下文相關的詞
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo(Embeddings from Language Models)
ELMo(Embeddings from Language Models)是一種在自然語言處理(NLP)中使用的深度學習詞嵌入模型,於2018年由Allen Institute for AI及華盛頓大學提出。與傳統靜態詞向量(如Word2Vec、GloVe)不同,ELMo產生的是**「上下文相關的詞
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
iPAS AI應用規劃師學習筆記
2025/08/26
困惑度(Perplexity,簡稱PPL)
困惑度(Perplexity,簡稱PPL)是自然語言處理(NLP)及大型語言模型中常用來衡量模型預測能力的指標。 它的意義在於衡量模型在對一句話或一組語料作預測時的「困惑程度」或「不確定性」: 困惑度越低,表示模型對文本的預測能力越強,能較準確地猜出下一個字詞。 困惑度越高,代表模型在預測時感到
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
語言
1
iPAS AI應用規劃師學習筆記
2025/08/26
困惑度(Perplexity,簡稱PPL)
困惑度(Perplexity,簡稱PPL)是自然語言處理(NLP)及大型語言模型中常用來衡量模型預測能力的指標。 它的意義在於衡量模型在對一句話或一組語料作預測時的「困惑程度」或「不確定性」: 困惑度越低,表示模型對文本的預測能力越強,能較準確地猜出下一個字詞。 困惑度越高,代表模型在預測時感到
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
語言
1
iPAS AI應用規劃師學習筆記
2025/08/26
One-Hot Encoding (獨熱編碼)
One-Hot Encoding (獨熱編碼) 核心定義 One-Hot Encoding 是一種將類別型資料 (Categorical Data) 轉換為機器學習模型能夠理解的數值格式的過程。它將每個類別都轉換成一個新的二元(0 或 1)特徵欄位。 它的核心思想是:在
含 AI 應用內容
#
自然語言處理技術與應用
#
機器學習
#
替代方案
1
iPAS AI應用規劃師學習筆記
2025/08/26
One-Hot Encoding (獨熱編碼)
One-Hot Encoding (獨熱編碼) 核心定義 One-Hot Encoding 是一種將類別型資料 (Categorical Data) 轉換為機器學習模型能夠理解的數值格式的過程。它將每個類別都轉換成一個新的二元(0 或 1)特徵欄位。 它的核心思想是:在
含 AI 應用內容
#
自然語言處理技術與應用
#
機器學習
#
替代方案
1
iPAS AI應用規劃師學習筆記
2025/05/27
聊天機器人 (Chatbot)
聊天機器人(Chatbot)是一種基於程式的軟體應用程式或智慧代理,旨在模擬人類的對話,讓用戶能夠透過文字、語音或其他形式的互動來進行交流。聊天機器人的目標是理解使用者的輸入,並根據預定的規則、知識庫或機器學習模型提供相應的回應或完成特定的任務。 聊天機器人的主要目標: 模擬人類對話:使用者感覺
含 AI 應用內容
#
自然語言處理技術與應用
#
聊天機器人
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
聊天機器人 (Chatbot)
聊天機器人(Chatbot)是一種基於程式的軟體應用程式或智慧代理,旨在模擬人類的對話,讓用戶能夠透過文字、語音或其他形式的互動來進行交流。聊天機器人的目標是理解使用者的輸入,並根據預定的規則、知識庫或機器學習模型提供相應的回應或完成特定的任務。 聊天機器人的主要目標: 模擬人類對話:使用者感覺
含 AI 應用內容
#
自然語言處理技術與應用
#
聊天機器人
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
問答系統 (Question Answering, QA)
問答系統(Question Answering,QA)是自然語言處理(NLP)領域的一個重要,指的是一種能夠接收以自然語言提出的問題,並從給定的知識來源(例如文本集合、知識圖譜、資料庫等)中自動查找並提供準確答案的用戶系統。問答系統的目標是讓電腦能夠像與人交流一樣,直接提出問題並獲得簡潔明了的答案,
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
自然
iPAS AI應用規劃師學習筆記
2025/05/27
問答系統 (Question Answering, QA)
問答系統(Question Answering,QA)是自然語言處理(NLP)領域的一個重要,指的是一種能夠接收以自然語言提出的問題,並從給定的知識來源(例如文本集合、知識圖譜、資料庫等)中自動查找並提供準確答案的用戶系統。問答系統的目標是讓電腦能夠像與人交流一樣,直接提出問題並獲得簡潔明了的答案,
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
自然
iPAS AI應用規劃師學習筆記
2025/05/27
機器翻譯 (Machine Translation, MT)
翻譯(Machine Translation,MT)是自然語言處理(NLP)的一個核心領域,是指利用電腦程式將文字或機器語言從一種自然自動翻譯產生另一種自然語言的過程。其目標是打破語言障礙,實現跨語言的訊息交流。 機器翻譯的目標: 自動化翻譯過程:用電腦取代人工翻譯,提高效率和速度。 保持語意
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
翻譯
iPAS AI應用規劃師學習筆記
2025/05/27
機器翻譯 (Machine Translation, MT)
翻譯(Machine Translation,MT)是自然語言處理(NLP)的一個核心領域,是指利用電腦程式將文字或機器語言從一種自然自動翻譯產生另一種自然語言的過程。其目標是打破語言障礙,實現跨語言的訊息交流。 機器翻譯的目標: 自動化翻譯過程:用電腦取代人工翻譯,提高效率和速度。 保持語意
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
翻譯
iPAS AI應用規劃師學習筆記
2025/05/27
情感分析 (Sentiment Analysis)
識別和提取文字資料中表達的情緒、或觀點。目標通常是判斷文本是表達正面(正面)、負面(負面)還是中性(中性)的情緒。 情緒分析的目標: 判斷文本的情感傾向:確定作者或說話者對特定主題、產品、服務、事件或個人的態度是正面的、負面的還是中立的。 提升情緒強度:除了情緒之外,還可以分析情緒的強度,例如
含 AI 應用內容
#
自然語言處理技術與應用
#
情感
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
情感分析 (Sentiment Analysis)
識別和提取文字資料中表達的情緒、或觀點。目標通常是判斷文本是表達正面(正面)、負面(負面)還是中性(中性)的情緒。 情緒分析的目標: 判斷文本的情感傾向:確定作者或說話者對特定主題、產品、服務、事件或個人的態度是正面的、負面的還是中立的。 提升情緒強度:除了情緒之外,還可以分析情緒的強度,例如
含 AI 應用內容
#
自然語言處理技術與應用
#
情感
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
詞向量 / 詞嵌入 (Word Embedding)
詞向量(Word Embedding),也稱詞嵌入,是自然語言處理(NLP)中非常重要的詞彙表示方法。將詞彙表中的每一個詞彙映射到一個低維、實數向量空間中,使得語意上的詞彙相似在這個向量空間中的位置也互相接近。 詞的重要性: 將符號表示轉換為數值表示:傳統的詞彙表示方法(例如one-hot編碼)
含 AI 應用內容
#
模型
#
空間
#
學習
iPAS AI應用規劃師學習筆記
2025/05/27
詞向量 / 詞嵌入 (Word Embedding)
詞向量(Word Embedding),也稱詞嵌入,是自然語言處理(NLP)中非常重要的詞彙表示方法。將詞彙表中的每一個詞彙映射到一個低維、實數向量空間中,使得語意上的詞彙相似在這個向量空間中的位置也互相接近。 詞的重要性: 將符號表示轉換為數值表示:傳統的詞彙表示方法(例如one-hot編碼)
含 AI 應用內容
#
模型
#
空間
#
學習
iPAS AI應用規劃師學習筆記
2025/05/27
條件隨機場 (Conditional Random Field, CRF)
條件隨機場(Conditional Random Field,CRF)是一種判別的式機率模型,常用於序列標籤(Sequence Labeling)和格式化預測(Structured Prediction)任務中。它可以用於預測序列中每個元素的標籤,同時考慮到相鄰元素之間的依賴關係。 核心概念:
含 AI 應用內容
#
標籤
#
條件
#
模型
iPAS AI應用規劃師學習筆記
2025/05/27
條件隨機場 (Conditional Random Field, CRF)
條件隨機場(Conditional Random Field,CRF)是一種判別的式機率模型,常用於序列標籤(Sequence Labeling)和格式化預測(Structured Prediction)任務中。它可以用於預測序列中每個元素的標籤,同時考慮到相鄰元素之間的依賴關係。 核心概念:
含 AI 應用內容
#
標籤
#
條件
#
模型
iPAS AI應用規劃師學習筆記
2025/05/27
詞性標註 (Part-of-Speech Tagging, POS Tagging)
詞性標註(詞性標註,詞性標註)是自然語言處理(NLP)中的一個基礎任務,指的是為文本中的每個詞彙(通常是斷詞後的結果)分配一個對應的詞性標籤(詞性標註)的過程。這些詞性標籤標註了詞性在句子中所扮演的文法角色。 詞性的種類: 不同的詞性標註系統可以使用不同種類和數量的標籤,但常見的詞性包括: 名
含 AI 應用內容
#
自然語言處理技術與應用
#
標籤
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
詞性標註 (Part-of-Speech Tagging, POS Tagging)
詞性標註(詞性標註,詞性標註)是自然語言處理(NLP)中的一個基礎任務,指的是為文本中的每個詞彙(通常是斷詞後的結果)分配一個對應的詞性標籤(詞性標註)的過程。這些詞性標籤標註了詞性在句子中所扮演的文法角色。 詞性的種類: 不同的詞性標註系統可以使用不同種類和數量的標籤,但常見的詞性包括: 名
含 AI 應用內容
#
自然語言處理技術與應用
#
標籤
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
詞形還原 (Lemmatization)
詞形還原(Lemmatization)是自然語言處理(NLP)中的一個文本正規化的過程。它的目的是一個詞彙的不同形態(屈折形式)還原到其詞典中基本的形式,稱為詞元(引理)或詞幹(基本形式)。 詞形還原的目的: 統一詞彙表示:不同的詞形可能有相同的基本意義。例如,「running」、「ran」和「
含 AI 應用內容
#
自然語言處理技術與應用
#
中文
#
統一
iPAS AI應用規劃師學習筆記
2025/05/27
詞形還原 (Lemmatization)
詞形還原(Lemmatization)是自然語言處理(NLP)中的一個文本正規化的過程。它的目的是一個詞彙的不同形態(屈折形式)還原到其詞典中基本的形式,稱為詞元(引理)或詞幹(基本形式)。 詞形還原的目的: 統一詞彙表示:不同的詞形可能有相同的基本意義。例如,「running」、「ran」和「
含 AI 應用內容
#
自然語言處理技術與應用
#
中文
#
統一
iPAS AI應用規劃師學習筆記
2025/05/27
斷詞 (Tokenization)
斷詞(標記化)是自然處理(NLP)中的一個基本步驟,指的是一段語言文字(例如句子、段落或整個文件),切掉較小的單元,稱為單字(標記)的過程。這些術語通常是句子中的單字、標記點符號、數字或其他有意義的符號。 斷詞的重要性: 機器理解的基礎:電腦很難直接理解人類的原始文本。斷詞將文本分割成語言模型可
含 AI 應用內容
#
自然語言處理技術與應用
iPAS AI應用規劃師學習筆記
2025/05/27
斷詞 (Tokenization)
斷詞(標記化)是自然處理(NLP)中的一個基本步驟,指的是一段語言文字(例如句子、段落或整個文件),切掉較小的單元,稱為單字(標記)的過程。這些術語通常是句子中的單字、標記點符號、數字或其他有意義的符號。 斷詞的重要性: 機器理解的基礎:電腦很難直接理解人類的原始文本。斷詞將文本分割成語言模型可
含 AI 應用內容
#
自然語言處理技術與應用
iPAS AI應用規劃師學習筆記
2025/05/27
NLP 層次結構
自然語言處理(NLP)的層次結構通常指的是語言分析的不同層面,從溝通的組成部分到更複雜的理解和應用。以下是一個常見的 NLP 層次結構的: 1. 詞彙層(Lexical Level): 焦點:單一詞彙及其特性。 目標:分析字的形態(morphology,例如字根、導出、字尾)、詞性(part-
含 AI 應用內容
#
自然語言處理技術與應用
#
結構
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
NLP 層次結構
自然語言處理(NLP)的層次結構通常指的是語言分析的不同層面,從溝通的組成部分到更複雜的理解和應用。以下是一個常見的 NLP 層次結構的: 1. 詞彙層(Lexical Level): 焦點:單一詞彙及其特性。 目標:分析字的形態(morphology,例如字根、導出、字尾)、詞性(part-
含 AI 應用內容
#
自然語言處理技術與應用
#
結構
#
語言
iPAS AI應用規劃師學習筆記
2025/05/25
計算語言學 (Computational Linguistics)
「計算語言學 (Computational Linguistics)」是一個跨學科領域,它結合了計算機科學和語言學,旨在使用計算方法來研究和處理人類語言。其核心目標是開發理論基礎和計算技術,以理解和生成自然語言,使其能夠被電腦處理和理解。 你可以將計算語言學想像成利用電腦來分析、理解和生成人類使用
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
人類
1
iPAS AI應用規劃師學習筆記
2025/05/25
計算語言學 (Computational Linguistics)
「計算語言學 (Computational Linguistics)」是一個跨學科領域,它結合了計算機科學和語言學,旨在使用計算方法來研究和處理人類語言。其核心目標是開發理論基礎和計算技術,以理解和生成自然語言,使其能夠被電腦處理和理解。 你可以將計算語言學想像成利用電腦來分析、理解和生成人類使用
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
人類
1
iPAS AI應用規劃師學習筆記
2025/05/25
文本風格轉換 (Text Style Transfer)
「文本風格轉換 (Text Style Transfer)」是自然語言處理 (NLP) 領域的一個研究方向,旨在將一段文本從一種風格轉換成另一種風格,同時保持其原有的內容或意義不變。 你可以將文本風格轉換想像成一位作家將同一段故事用不同的寫作風格來表達,例如,將一篇正式的新聞報導改寫成輕鬆幽默的風
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
文本風格轉換 (Text Style Transfer)
「文本風格轉換 (Text Style Transfer)」是自然語言處理 (NLP) 領域的一個研究方向,旨在將一段文本從一種風格轉換成另一種風格,同時保持其原有的內容或意義不變。 你可以將文本風格轉換想像成一位作家將同一段故事用不同的寫作風格來表達,例如,將一篇正式的新聞報導改寫成輕鬆幽默的風
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
語料庫 (Corpus / Corpora)
「語料庫 (Corpus / Corpora)」是自然語言處理 (NLP) 領域中的一個核心概念,指的是一個結構化的、較大的文本集合,通常用於進行語言研究、模型訓練和評估。單數形式是「語料 (Corpus)」,複數形式是「語料庫 (Corpora)」。 你可以將語料庫想像成一個大型的圖書館或檔案館
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
1
iPAS AI應用規劃師學習筆記
2025/05/25
語料庫 (Corpus / Corpora)
「語料庫 (Corpus / Corpora)」是自然語言處理 (NLP) 領域中的一個核心概念,指的是一個結構化的、較大的文本集合,通常用於進行語言研究、模型訓練和評估。單數形式是「語料 (Corpus)」,複數形式是「語料庫 (Corpora)」。 你可以將語料庫想像成一個大型的圖書館或檔案館
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
1
iPAS AI應用規劃師學習筆記
2025/05/25
句子向量 / 句子嵌入 (Sentence Embedding)
「句子向量 (Sentence Embedding)」或「句子嵌入」是自然語言處理 (NLP) 中將整個句子表示為一個稠密的低維向量的技術。它旨在捕捉句子的整體語義信息,使得語義上相似的句子在向量空間中也更接近。 你可以將句子向量想像成將一個完整的句子壓縮成一個數字列表,這個列表能夠代表句子的含義
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
句子向量 / 句子嵌入 (Sentence Embedding)
「句子向量 (Sentence Embedding)」或「句子嵌入」是自然語言處理 (NLP) 中將整個句子表示為一個稠密的低維向量的技術。它旨在捕捉句子的整體語義信息,使得語義上相似的句子在向量空間中也更接近。 你可以將句子向量想像成將一個完整的句子壓縮成一個數字列表,這個列表能夠代表句子的含義
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
字符級模型 (Character-level Models)
「字符級模型 (Character-level Models)」是自然語言處理 (NLP) 中處理文本數據的一種方法。與常見的詞語級模型 (Word-level Models) 不同,字符級模型直接將文本視為一個字符序列進行處理,而不是將文本首先分割成詞語。 你可以將詞語級模型想像成以單詞為單位來
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
字符級模型 (Character-level Models)
「字符級模型 (Character-level Models)」是自然語言處理 (NLP) 中處理文本數據的一種方法。與常見的詞語級模型 (Word-level Models) 不同,字符級模型直接將文本視為一個字符序列進行處理,而不是將文本首先分割成詞語。 你可以將詞語級模型想像成以單詞為單位來
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
知識圖譜 (Knowledge Graph, KG)
「知識圖譜 (Knowledge Graph, KG)」是一種用於表示現實世界中實體(例如,人、地點、事物、概念)及其相互關係的結構化知識庫。它以圖的形式組織信息,其中節點 (Nodes) 代表實體,邊 (Edges) 代表實體之間的關係,並且邊通常帶有標籤 (Labels) 來描述關係的類型。
含 AI 應用內容
#
自然語言處理技術與應用
#
Google
#
結構
iPAS AI應用規劃師學習筆記
2025/05/25
知識圖譜 (Knowledge Graph, KG)
「知識圖譜 (Knowledge Graph, KG)」是一種用於表示現實世界中實體(例如,人、地點、事物、概念)及其相互關係的結構化知識庫。它以圖的形式組織信息,其中節點 (Nodes) 代表實體,邊 (Edges) 代表實體之間的關係,並且邊通常帶有標籤 (Labels) 來描述關係的類型。
含 AI 應用內容
#
自然語言處理技術與應用
#
Google
#
結構
加入
Top 5
1
One-Hot Encoding (獨熱編碼)
2
編碼器-解碼器架構 (Encoder-Decoder Architecture)
3
遞迴神經網路 (Recurrent Neural Network, RNN)
4
槽位填充 (Slot Filling)
5
大型語言模型 (Large Language Model, LLM) 的幻覺 (Hallucination)
1
One-Hot Encoding (獨熱編碼)
2
編碼器-解碼器架構 (Encoder-Decoder Architecture)
3
遞迴神經網路 (Recurrent Neural Network, RNN)
4
槽位填充 (Slot Filling)
5
大型語言模型 (Large Language Model, LLM) 的幻覺 (Hallucination)
全部
NLP基本概念與定義
核心文本前處理技術
NLP模型與演算法
詞彙表達與語意理解
主要NLP應用場景
序列模型與架構
NLP系統評估與挑戰
NLP工具與整合應用
全部
NLP基本概念與定義
核心文本前處理技術
NLP模型與演算法
詞彙表達與語意理解
主要NLP應用場景
序列模型與架構
NLP系統評估與挑戰
NLP工具與整合應用
全部類型
免費與付費
最新發佈
最新發佈
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo 和 BERT 提供的嵌入,與傳統的靜態詞嵌入(如 Word2Vec)的主要區別
ELMo 和 BERT 提供的嵌入與傳統的靜態詞嵌入(如 Word2Vec)的主要區別在於它們是否為上下文相關 (contextual)。 靜態詞嵌入 (Static Embeddings) 代表模型: Word2Vec、GloVe、FastText 主要特點: 單一詞彙,單一向量: 每個詞
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
傳統
1
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo 和 BERT 提供的嵌入,與傳統的靜態詞嵌入(如 Word2Vec)的主要區別
ELMo 和 BERT 提供的嵌入與傳統的靜態詞嵌入(如 Word2Vec)的主要區別在於它們是否為上下文相關 (contextual)。 靜態詞嵌入 (Static Embeddings) 代表模型: Word2Vec、GloVe、FastText 主要特點: 單一詞彙,單一向量: 每個詞
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
傳統
1
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo(Embeddings from Language Models)
ELMo(Embeddings from Language Models)是一種在自然語言處理(NLP)中使用的深度學習詞嵌入模型,於2018年由Allen Institute for AI及華盛頓大學提出。與傳統靜態詞向量(如Word2Vec、GloVe)不同,ELMo產生的是**「上下文相關的詞
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
iPAS AI應用規劃師學習筆記
2025/08/26
ELMo(Embeddings from Language Models)
ELMo(Embeddings from Language Models)是一種在自然語言處理(NLP)中使用的深度學習詞嵌入模型,於2018年由Allen Institute for AI及華盛頓大學提出。與傳統靜態詞向量(如Word2Vec、GloVe)不同,ELMo產生的是**「上下文相關的詞
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
iPAS AI應用規劃師學習筆記
2025/08/26
困惑度(Perplexity,簡稱PPL)
困惑度(Perplexity,簡稱PPL)是自然語言處理(NLP)及大型語言模型中常用來衡量模型預測能力的指標。 它的意義在於衡量模型在對一句話或一組語料作預測時的「困惑程度」或「不確定性」: 困惑度越低,表示模型對文本的預測能力越強,能較準確地猜出下一個字詞。 困惑度越高,代表模型在預測時感到
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
語言
1
iPAS AI應用規劃師學習筆記
2025/08/26
困惑度(Perplexity,簡稱PPL)
困惑度(Perplexity,簡稱PPL)是自然語言處理(NLP)及大型語言模型中常用來衡量模型預測能力的指標。 它的意義在於衡量模型在對一句話或一組語料作預測時的「困惑程度」或「不確定性」: 困惑度越低,表示模型對文本的預測能力越強,能較準確地猜出下一個字詞。 困惑度越高,代表模型在預測時感到
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
語言
1
iPAS AI應用規劃師學習筆記
2025/08/26
One-Hot Encoding (獨熱編碼)
One-Hot Encoding (獨熱編碼) 核心定義 One-Hot Encoding 是一種將類別型資料 (Categorical Data) 轉換為機器學習模型能夠理解的數值格式的過程。它將每個類別都轉換成一個新的二元(0 或 1)特徵欄位。 它的核心思想是:在
含 AI 應用內容
#
自然語言處理技術與應用
#
機器學習
#
替代方案
1
iPAS AI應用規劃師學習筆記
2025/08/26
One-Hot Encoding (獨熱編碼)
One-Hot Encoding (獨熱編碼) 核心定義 One-Hot Encoding 是一種將類別型資料 (Categorical Data) 轉換為機器學習模型能夠理解的數值格式的過程。它將每個類別都轉換成一個新的二元(0 或 1)特徵欄位。 它的核心思想是:在
含 AI 應用內容
#
自然語言處理技術與應用
#
機器學習
#
替代方案
1
iPAS AI應用規劃師學習筆記
2025/05/27
聊天機器人 (Chatbot)
聊天機器人(Chatbot)是一種基於程式的軟體應用程式或智慧代理,旨在模擬人類的對話,讓用戶能夠透過文字、語音或其他形式的互動來進行交流。聊天機器人的目標是理解使用者的輸入,並根據預定的規則、知識庫或機器學習模型提供相應的回應或完成特定的任務。 聊天機器人的主要目標: 模擬人類對話:使用者感覺
含 AI 應用內容
#
自然語言處理技術與應用
#
聊天機器人
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
聊天機器人 (Chatbot)
聊天機器人(Chatbot)是一種基於程式的軟體應用程式或智慧代理,旨在模擬人類的對話,讓用戶能夠透過文字、語音或其他形式的互動來進行交流。聊天機器人的目標是理解使用者的輸入,並根據預定的規則、知識庫或機器學習模型提供相應的回應或完成特定的任務。 聊天機器人的主要目標: 模擬人類對話:使用者感覺
含 AI 應用內容
#
自然語言處理技術與應用
#
聊天機器人
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
問答系統 (Question Answering, QA)
問答系統(Question Answering,QA)是自然語言處理(NLP)領域的一個重要,指的是一種能夠接收以自然語言提出的問題,並從給定的知識來源(例如文本集合、知識圖譜、資料庫等)中自動查找並提供準確答案的用戶系統。問答系統的目標是讓電腦能夠像與人交流一樣,直接提出問題並獲得簡潔明了的答案,
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
自然
iPAS AI應用規劃師學習筆記
2025/05/27
問答系統 (Question Answering, QA)
問答系統(Question Answering,QA)是自然語言處理(NLP)領域的一個重要,指的是一種能夠接收以自然語言提出的問題,並從給定的知識來源(例如文本集合、知識圖譜、資料庫等)中自動查找並提供準確答案的用戶系統。問答系統的目標是讓電腦能夠像與人交流一樣,直接提出問題並獲得簡潔明了的答案,
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
自然
iPAS AI應用規劃師學習筆記
2025/05/27
機器翻譯 (Machine Translation, MT)
翻譯(Machine Translation,MT)是自然語言處理(NLP)的一個核心領域,是指利用電腦程式將文字或機器語言從一種自然自動翻譯產生另一種自然語言的過程。其目標是打破語言障礙,實現跨語言的訊息交流。 機器翻譯的目標: 自動化翻譯過程:用電腦取代人工翻譯,提高效率和速度。 保持語意
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
翻譯
iPAS AI應用規劃師學習筆記
2025/05/27
機器翻譯 (Machine Translation, MT)
翻譯(Machine Translation,MT)是自然語言處理(NLP)的一個核心領域,是指利用電腦程式將文字或機器語言從一種自然自動翻譯產生另一種自然語言的過程。其目標是打破語言障礙,實現跨語言的訊息交流。 機器翻譯的目標: 自動化翻譯過程:用電腦取代人工翻譯,提高效率和速度。 保持語意
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
翻譯
iPAS AI應用規劃師學習筆記
2025/05/27
情感分析 (Sentiment Analysis)
識別和提取文字資料中表達的情緒、或觀點。目標通常是判斷文本是表達正面(正面)、負面(負面)還是中性(中性)的情緒。 情緒分析的目標: 判斷文本的情感傾向:確定作者或說話者對特定主題、產品、服務、事件或個人的態度是正面的、負面的還是中立的。 提升情緒強度:除了情緒之外,還可以分析情緒的強度,例如
含 AI 應用內容
#
自然語言處理技術與應用
#
情感
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
情感分析 (Sentiment Analysis)
識別和提取文字資料中表達的情緒、或觀點。目標通常是判斷文本是表達正面(正面)、負面(負面)還是中性(中性)的情緒。 情緒分析的目標: 判斷文本的情感傾向:確定作者或說話者對特定主題、產品、服務、事件或個人的態度是正面的、負面的還是中立的。 提升情緒強度:除了情緒之外,還可以分析情緒的強度,例如
含 AI 應用內容
#
自然語言處理技術與應用
#
情感
#
機器學習
iPAS AI應用規劃師學習筆記
2025/05/27
詞向量 / 詞嵌入 (Word Embedding)
詞向量(Word Embedding),也稱詞嵌入,是自然語言處理(NLP)中非常重要的詞彙表示方法。將詞彙表中的每一個詞彙映射到一個低維、實數向量空間中,使得語意上的詞彙相似在這個向量空間中的位置也互相接近。 詞的重要性: 將符號表示轉換為數值表示:傳統的詞彙表示方法(例如one-hot編碼)
含 AI 應用內容
#
模型
#
空間
#
學習
iPAS AI應用規劃師學習筆記
2025/05/27
詞向量 / 詞嵌入 (Word Embedding)
詞向量(Word Embedding),也稱詞嵌入,是自然語言處理(NLP)中非常重要的詞彙表示方法。將詞彙表中的每一個詞彙映射到一個低維、實數向量空間中,使得語意上的詞彙相似在這個向量空間中的位置也互相接近。 詞的重要性: 將符號表示轉換為數值表示:傳統的詞彙表示方法(例如one-hot編碼)
含 AI 應用內容
#
模型
#
空間
#
學習
iPAS AI應用規劃師學習筆記
2025/05/27
條件隨機場 (Conditional Random Field, CRF)
條件隨機場(Conditional Random Field,CRF)是一種判別的式機率模型,常用於序列標籤(Sequence Labeling)和格式化預測(Structured Prediction)任務中。它可以用於預測序列中每個元素的標籤,同時考慮到相鄰元素之間的依賴關係。 核心概念:
含 AI 應用內容
#
標籤
#
條件
#
模型
iPAS AI應用規劃師學習筆記
2025/05/27
條件隨機場 (Conditional Random Field, CRF)
條件隨機場(Conditional Random Field,CRF)是一種判別的式機率模型,常用於序列標籤(Sequence Labeling)和格式化預測(Structured Prediction)任務中。它可以用於預測序列中每個元素的標籤,同時考慮到相鄰元素之間的依賴關係。 核心概念:
含 AI 應用內容
#
標籤
#
條件
#
模型
iPAS AI應用規劃師學習筆記
2025/05/27
詞性標註 (Part-of-Speech Tagging, POS Tagging)
詞性標註(詞性標註,詞性標註)是自然語言處理(NLP)中的一個基礎任務,指的是為文本中的每個詞彙(通常是斷詞後的結果)分配一個對應的詞性標籤(詞性標註)的過程。這些詞性標籤標註了詞性在句子中所扮演的文法角色。 詞性的種類: 不同的詞性標註系統可以使用不同種類和數量的標籤,但常見的詞性包括: 名
含 AI 應用內容
#
自然語言處理技術與應用
#
標籤
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
詞性標註 (Part-of-Speech Tagging, POS Tagging)
詞性標註(詞性標註,詞性標註)是自然語言處理(NLP)中的一個基礎任務,指的是為文本中的每個詞彙(通常是斷詞後的結果)分配一個對應的詞性標籤(詞性標註)的過程。這些詞性標籤標註了詞性在句子中所扮演的文法角色。 詞性的種類: 不同的詞性標註系統可以使用不同種類和數量的標籤,但常見的詞性包括: 名
含 AI 應用內容
#
自然語言處理技術與應用
#
標籤
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
詞形還原 (Lemmatization)
詞形還原(Lemmatization)是自然語言處理(NLP)中的一個文本正規化的過程。它的目的是一個詞彙的不同形態(屈折形式)還原到其詞典中基本的形式,稱為詞元(引理)或詞幹(基本形式)。 詞形還原的目的: 統一詞彙表示:不同的詞形可能有相同的基本意義。例如,「running」、「ran」和「
含 AI 應用內容
#
自然語言處理技術與應用
#
中文
#
統一
iPAS AI應用規劃師學習筆記
2025/05/27
詞形還原 (Lemmatization)
詞形還原(Lemmatization)是自然語言處理(NLP)中的一個文本正規化的過程。它的目的是一個詞彙的不同形態(屈折形式)還原到其詞典中基本的形式,稱為詞元(引理)或詞幹(基本形式)。 詞形還原的目的: 統一詞彙表示:不同的詞形可能有相同的基本意義。例如,「running」、「ran」和「
含 AI 應用內容
#
自然語言處理技術與應用
#
中文
#
統一
iPAS AI應用規劃師學習筆記
2025/05/27
斷詞 (Tokenization)
斷詞(標記化)是自然處理(NLP)中的一個基本步驟,指的是一段語言文字(例如句子、段落或整個文件),切掉較小的單元,稱為單字(標記)的過程。這些術語通常是句子中的單字、標記點符號、數字或其他有意義的符號。 斷詞的重要性: 機器理解的基礎:電腦很難直接理解人類的原始文本。斷詞將文本分割成語言模型可
含 AI 應用內容
#
自然語言處理技術與應用
iPAS AI應用規劃師學習筆記
2025/05/27
斷詞 (Tokenization)
斷詞(標記化)是自然處理(NLP)中的一個基本步驟,指的是一段語言文字(例如句子、段落或整個文件),切掉較小的單元,稱為單字(標記)的過程。這些術語通常是句子中的單字、標記點符號、數字或其他有意義的符號。 斷詞的重要性: 機器理解的基礎:電腦很難直接理解人類的原始文本。斷詞將文本分割成語言模型可
含 AI 應用內容
#
自然語言處理技術與應用
iPAS AI應用規劃師學習筆記
2025/05/27
NLP 層次結構
自然語言處理(NLP)的層次結構通常指的是語言分析的不同層面,從溝通的組成部分到更複雜的理解和應用。以下是一個常見的 NLP 層次結構的: 1. 詞彙層(Lexical Level): 焦點:單一詞彙及其特性。 目標:分析字的形態(morphology,例如字根、導出、字尾)、詞性(part-
含 AI 應用內容
#
自然語言處理技術與應用
#
結構
#
語言
iPAS AI應用規劃師學習筆記
2025/05/27
NLP 層次結構
自然語言處理(NLP)的層次結構通常指的是語言分析的不同層面,從溝通的組成部分到更複雜的理解和應用。以下是一個常見的 NLP 層次結構的: 1. 詞彙層(Lexical Level): 焦點:單一詞彙及其特性。 目標:分析字的形態(morphology,例如字根、導出、字尾)、詞性(part-
含 AI 應用內容
#
自然語言處理技術與應用
#
結構
#
語言
iPAS AI應用規劃師學習筆記
2025/05/25
計算語言學 (Computational Linguistics)
「計算語言學 (Computational Linguistics)」是一個跨學科領域,它結合了計算機科學和語言學,旨在使用計算方法來研究和處理人類語言。其核心目標是開發理論基礎和計算技術,以理解和生成自然語言,使其能夠被電腦處理和理解。 你可以將計算語言學想像成利用電腦來分析、理解和生成人類使用
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
人類
1
iPAS AI應用規劃師學習筆記
2025/05/25
計算語言學 (Computational Linguistics)
「計算語言學 (Computational Linguistics)」是一個跨學科領域,它結合了計算機科學和語言學,旨在使用計算方法來研究和處理人類語言。其核心目標是開發理論基礎和計算技術,以理解和生成自然語言,使其能夠被電腦處理和理解。 你可以將計算語言學想像成利用電腦來分析、理解和生成人類使用
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
人類
1
iPAS AI應用規劃師學習筆記
2025/05/25
文本風格轉換 (Text Style Transfer)
「文本風格轉換 (Text Style Transfer)」是自然語言處理 (NLP) 領域的一個研究方向,旨在將一段文本從一種風格轉換成另一種風格,同時保持其原有的內容或意義不變。 你可以將文本風格轉換想像成一位作家將同一段故事用不同的寫作風格來表達,例如,將一篇正式的新聞報導改寫成輕鬆幽默的風
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
文本風格轉換 (Text Style Transfer)
「文本風格轉換 (Text Style Transfer)」是自然語言處理 (NLP) 領域的一個研究方向,旨在將一段文本從一種風格轉換成另一種風格,同時保持其原有的內容或意義不變。 你可以將文本風格轉換想像成一位作家將同一段故事用不同的寫作風格來表達,例如,將一篇正式的新聞報導改寫成輕鬆幽默的風
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
語料庫 (Corpus / Corpora)
「語料庫 (Corpus / Corpora)」是自然語言處理 (NLP) 領域中的一個核心概念,指的是一個結構化的、較大的文本集合,通常用於進行語言研究、模型訓練和評估。單數形式是「語料 (Corpus)」,複數形式是「語料庫 (Corpora)」。 你可以將語料庫想像成一個大型的圖書館或檔案館
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
1
iPAS AI應用規劃師學習筆記
2025/05/25
語料庫 (Corpus / Corpora)
「語料庫 (Corpus / Corpora)」是自然語言處理 (NLP) 領域中的一個核心概念,指的是一個結構化的、較大的文本集合,通常用於進行語言研究、模型訓練和評估。單數形式是「語料 (Corpus)」,複數形式是「語料庫 (Corpora)」。 你可以將語料庫想像成一個大型的圖書館或檔案館
含 AI 應用內容
#
自然語言處理技術與應用
#
語言
#
模型
1
iPAS AI應用規劃師學習筆記
2025/05/25
句子向量 / 句子嵌入 (Sentence Embedding)
「句子向量 (Sentence Embedding)」或「句子嵌入」是自然語言處理 (NLP) 中將整個句子表示為一個稠密的低維向量的技術。它旨在捕捉句子的整體語義信息,使得語義上相似的句子在向量空間中也更接近。 你可以將句子向量想像成將一個完整的句子壓縮成一個數字列表,這個列表能夠代表句子的含義
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
句子向量 / 句子嵌入 (Sentence Embedding)
「句子向量 (Sentence Embedding)」或「句子嵌入」是自然語言處理 (NLP) 中將整個句子表示為一個稠密的低維向量的技術。它旨在捕捉句子的整體語義信息,使得語義上相似的句子在向量空間中也更接近。 你可以將句子向量想像成將一個完整的句子壓縮成一個數字列表,這個列表能夠代表句子的含義
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
字符級模型 (Character-level Models)
「字符級模型 (Character-level Models)」是自然語言處理 (NLP) 中處理文本數據的一種方法。與常見的詞語級模型 (Word-level Models) 不同,字符級模型直接將文本視為一個字符序列進行處理,而不是將文本首先分割成詞語。 你可以將詞語級模型想像成以單詞為單位來
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
字符級模型 (Character-level Models)
「字符級模型 (Character-level Models)」是自然語言處理 (NLP) 中處理文本數據的一種方法。與常見的詞語級模型 (Word-level Models) 不同,字符級模型直接將文本視為一個字符序列進行處理,而不是將文本首先分割成詞語。 你可以將詞語級模型想像成以單詞為單位來
含 AI 應用內容
#
自然語言處理技術與應用
#
模型
#
生成
iPAS AI應用規劃師學習筆記
2025/05/25
知識圖譜 (Knowledge Graph, KG)
「知識圖譜 (Knowledge Graph, KG)」是一種用於表示現實世界中實體(例如,人、地點、事物、概念)及其相互關係的結構化知識庫。它以圖的形式組織信息,其中節點 (Nodes) 代表實體,邊 (Edges) 代表實體之間的關係,並且邊通常帶有標籤 (Labels) 來描述關係的類型。
含 AI 應用內容
#
自然語言處理技術與應用
#
Google
#
結構
iPAS AI應用規劃師學習筆記
2025/05/25
知識圖譜 (Knowledge Graph, KG)
「知識圖譜 (Knowledge Graph, KG)」是一種用於表示現實世界中實體(例如,人、地點、事物、概念)及其相互關係的結構化知識庫。它以圖的形式組織信息,其中節點 (Nodes) 代表實體,邊 (Edges) 代表實體之間的關係,並且邊通常帶有標籤 (Labels) 來描述關係的類型。
含 AI 應用內容
#
自然語言處理技術與應用
#
Google
#
結構