如題

近期整天泡在notebooklm裡面

研究要怎麼正確使用此AI工具


目前感想：我覺得notebooklm 超難用
（歡迎打臉


前陣子有發文詢問notebooklm怎麼用
得到結論是 別用他來推論
要用他來挖資料或是產大綱
因為此軟體是主打沒有幻覺


我實驗之後沒幻覺並非真的沒幻覺，要挖到我要的資料，超級無敵困難
（可能相較沒有 但還是有幻覺 且難以辨別



以下為我的實驗心得：

來源：
某家公司10年的年報（共10個pdf檔案）

目標：
我希望可以抓出10年年報 的 生產量
（年報裡的文字：生產量值

成功條件：
10年的生產量值數字都要正確

正確 = 每一年數字都跟年報寫的一模一樣
失敗1 = 沒有資料
失敗2 = 產出部分資料，但有產出的都對
失敗3 = 產出完整資料，但數字錯誤



中文版：

1.找出銷售量值 = 失敗1

2.在（五）營運概況裡 找生產量值 = 失敗1

3.找在（五）營運概況的 （六）..生產量值 = 失敗2

4.將3的prompt產出答案後，再打「我看2023年明明有 」= 成功

（這邊成功 = 沒意義
如果我需要人工確認每個數字是否正確，那我用這個幹嘛

5. 清空資料後，重新執行一次4. = 失敗2
（我不敢相信這個結果是失敗



英文版：

上面1. 翻英文= 失敗2

上面2. 翻英文 = 失敗2

上面3. 翻英文 = 失敗3

上面4. 翻英文 = 失敗3

（翻英文=把1.2.3.丟進chatgpt翻英文


（過程中也問chatgpt叫他幫我改prompt
10幾版 都失敗
（每一版都是執行1.2.3.4.的流程





最神奇的是：
實驗過程中，同樣的prompt打兩次
竟然會發生從失敗2跳到成功

（同樣來源，同樣prompt，得出的結果竟然不一樣）

過去成功的prompt 清空資料重打一次，竟然無法成功




實驗下來感想：

1.
與其問notebooklm 叫他找資料，我不如丟檔案到chatgpt grok 叫他幫我找文件中的生產量
值
（grok跑出數字全對


2.
使用限定來源的notebooklm
同樣prompt下兩次 兩次答案不一樣
（是一個字都沒動 連貼兩次


3.
主打沒幻覺的notebooklm
使用英文問，產出有對有錯（錯誤程度5%
用中文問，得到答案幾乎都不全

（錯誤程度5%
代表我要全部確認後才能抓出那5%
我寧願他是100%資料錯 我可以換prompt解決


4.
成功經驗之後，清空資料後，同樣來源跟prompt，再跑一次，跑出來結果是失敗



實驗中，有那麼一刻覺得是不是我不會用
（直到同樣來源，我連打兩次prompt 跑出結果不同 我直接傻眼



希望有notebooklm高手 可以直接回一篇
或是直接在留言板

在跟我同樣來源下（公司年報為公開資訊
使用你的prompt 多次 且成功抓到特定數字

或是直接噴我 是不是不會用
並直接秀一波 你怎麼依賴notebooklm 為你省時間


期待高手分享一波