如題
近期整天泡在notebooklm裡面
研究要怎麼正確使用此AI工具
目前感想:我覺得notebooklm不好用
(歡迎打臉
前陣子有發文詢問notebooklm怎麼用
得到結論是別用他來推論
要用他來挖資料或是產大綱
因為此軟體是主打沒有幻覺
我實驗之後沒幻覺並非真的沒幻覺,要挖到我要的資料,超級無敵困難
(可能相較沒有但還是有幻覺且難以辨別
以下為我的實驗心得:
來源:
某家公司10年的年報(共10個pdf檔案)
目標:
我希望可以抓出10年年報的生產量
(年報裡的文字:生產量值
成功條件:
10年的生產量值數字都要正確
正確=每一年數字都跟年報寫的一模一樣
失敗1=沒有資料
失敗2=產出部分資料,但有產出的都對
失敗3=產出完整資料,但數字錯誤
中文版:
1.找出銷售量值=失敗1
2.在(五)營運概況裡找生產量值=失敗1
3.找在(五)營運概況的(六)..生產量值=失敗2
4.將3的prompt產出答案後,再打「我看2023年明明有」=成功
(這邊成功=沒意義
如果我需要人工確認每個數字是否正確,那我用這個幹嘛
5.清空資料後,重新執行一次4.= 失敗2
(我不敢相信這個結果是失敗
英文版:
上面1.翻英文=失敗2
上面2.翻英文=失敗2
上面3.翻英文=失敗3
上面4.翻英文=失敗3
(翻英文=把1.2.3.丟進chatgpt翻英文
(過程中也問chatgpt叫他幫我改prompt
10幾版都失敗
(每一版都是執行1.2.3.4.的流程
最神奇的是:
實驗過程中,同樣的prompt打兩次
竟然會發生從失敗2跳到成功
(同樣來源,同樣prompt,得出的結果竟然不一樣)
過去成功的prompt清空資料重打一次,竟然無法成功
實驗下來感想:
1.
與其問notebooklm叫他找資料,我不如丟檔案到chatgpt grok叫他幫我找文件中的生產量值
(grok跑出數字全對
2.
使用限定來源的notebooklm
同樣prompt下兩次兩次答案不一樣
(是一個字都沒動連貼兩次
3.
主打沒幻覺的notebooklm
使用英文問,產出有對有錯(錯誤程度5%
用中文問,得到答案幾乎都不全
(錯誤程度5%
代表我要全部確認後才能抓出那5%
我寧願他是100%資料錯我可以換prompt解決
4.
成功經驗之後,清空資料後,同樣來源跟prompt,再跑一次,跑出來結果是失敗
實驗中,有那麼一刻覺得是不是我不會用
(直到同樣來源,我連打兩次prompt跑出結果不同我直接傻眼
希望有notebooklm高手可以直接回一篇
或是直接在留言板
在跟我同樣來源下(公司年報為公開資訊
使用你的prompt多次且成功抓到特定數字
或是直接噴我是不是不會用
並直接秀一波你怎麼依賴notebooklm為你省時間
期待高手分享一波
----
Sent from BePTT on my iPhone17,3
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 27.247.133.24 (臺灣)
※ 文章網址: https://webptt.cc/bbs/Stock/M.1757216004.A.523.html
推文 (47)
推
staytuned74
AI 幻覺無解
09/07 12:03
→
staytuned74
LM已經是這代最強的文件解析文件
09/07 12:04
→
staytuned74
其他自己用LangChain 套用各種模型也不會比lm強
09/07 12:05
→
staytuned74
真的要精確一點就是一次一份或少量文件,越多文件
09/07 12:05
推
Obama19
AI就是hype 空鴻海
09/07 12:05
→
staytuned74
LLM解析越差
09/07 12:05
→
tc22
教師節日期格式不同也會弄錯
09/07 12:09
推
staytuned74
坊間一堆課程或教學用n8n 套的解析文件更差勁,特
09/07 12:09
→
staytuned74
別是用向量資料庫等都很差
09/07 12:09
→
staytuned74
Lm他們自己有know how 所以才沒開api出來
09/07 12:10
推
sdbb
股板好溫暖
09/07 12:10
噓
sunch0426
前幾天8 卦板,昨天手機板有人回了,今天還在股板p
09/07 12:11
→
sunch0426
o同篇文章
09/07 12:11
推
macetyl
Lm 是拿來當podcast 的
09/07 12:23
→
helixc
貼了三次看起來很失望
09/07 12:25
推
bunjie
真是不死心XD 用別的工具吧
09/07 12:26
噓
s960908
要po幾篇 怎麼到哪都有
09/07 12:27
噓
necrophagist
怎麼好像看過同篇文章.. 我都拿來讀paper 速讀一遍
09/07 12:35
→
necrophagist
後把不清楚的地方整理成問題問它
09/07 12:35
→
necrophagist
它的回應也都會cite引用段落 對於讀三四十頁的那種
09/07 12:37
→
necrophagist
大型review方便的很
09/07 12:37
推
dosiris
你是繳多少年費了
09/07 12:53
→
kivan00
1.不要用 2.回饋缺陷苦等他變能用 3.自己搞模型
09/07 12:54
噓
mike0608
到處貼耶
09/07 12:57
噓
D600dust
這是求助的態度喔?到處洗板?
09/07 13:10
→
D600dust
問你prompt怎麼寫又不回,是要大家通靈喔?
09/07 13:11
推
abc0922001
垃圾進垃圾出,懂?
09/07 13:31
推
chia0303
這問題很好
09/07 13:33
推
falcon11
你hen棒
09/07 13:40
噓
luluking
關我屁事
09/07 13:44
噓
CCben
到處洗文洗版,別人問又不回覆,公關公司帳號嗎?
09/07 13:44
推
imreader
嚴格要求它列出在一頁。只能這樣了
09/07 14:02
推
guanting886
原因我知道但我不想講浪費時間寫給問問仔 哈哈
09/07 14:08
噓
biolive40
原因我知道但我不想浪費時間寫給問問仔
09/07 14:21
噓
onenineone
洗文?
09/07 14:46
噓
Ptt911
他是整理與索引工具,不是分析工具,先搞清楚用途
09/07 14:46
噓
andy79323
尼不如用關鍵字餵狗
09/07 14:52
噓
g5637128
關我屁事
09/07 15:04
推
hughfox
我是覺得notebooklm對表格解析有些差
09/07 18:06
推
nfsong
推
09/07 19:21
→
nfsong
感謝大大 幫助notebooklm
09/07 19:22
→
nfsong
東西是好東西 需要進步就是了
09/07 19:22
推
qwerasdft
你要別人測試 也要把測資放上來吧
09/07 20:36
→
ninggo
只是個玩具 別用工具的角度看待
09/07 22:07
噓
RedLover1009
你連prompt都沒貼,你確定你真的會使用嗎?
09/08 00:33
→
RedLover1009
難用的可能是你的腦,不一定是AI
09/08 00:33
推
freeloop
感謝你的心得!
09/08 07:22