YouTube2Text

孫以瀚研究員 - 運用AI輔助撰寫研究計畫與論文:心態、技巧、學倫 — Transcript

by NYCU OCW · 3,762 words · 2,235 segments · language en · Watch on YouTube

Full transcript

  1. 0:09各位現場的來賓以及線上將近一千多人的朋友大家早安
  2. 0:15我們今天非常榮幸請到中研院的分子生物研究所孫穎翰教授
  3. 0:20來為我們講這場運用生成式 AI 協助撰寫研究計劃及論文
  4. 0:26然後它的副標題後面還有心態、學倫
  5. 0:30忘記介紹我自己
  6. 0:32我是陽明交通大學的副校長也是教育研究所的教授
  7. 0:36然後我在這一路上從事學術倫理的研究及教育已經很久了
  8. 0:43那其實孫老師是我的 mentor
  9. 0:44然後他一直一路指點我看著我長大這樣
  10. 0:48然後孫老師其實在這個等一下您會自己講為什麼會進入了學術倫理這個領域
  11. 0:57而且在這邊耕耘了非常的久
  12. 0:59然後教化了非常的多的人
  13. 1:01那我也是其中之一
  14. 1:03那孫老師的簡歷如果把它唸完的話我們就下課了
  15. 1:07所以我們很簡單的講一下是中研院特聘研究員已經退休了
  16. 1:11那在退休之前是現在還是分子與基因醫學研究所的兼任的研究員
  17. 1:18然後更重要的是中研院已經設立了一個叫做職場友善辦公室
  18. 1:25然後他是首位的協調人
  19. 1:29也就是說任何你覺得在制度上或者個人上有些困難或者疑慮的
  20. 1:34都可以去找這一位協調人來晤談
  21. 1:38然後也許會協調人我想是告訴你可以怎麼做
  22. 1:42或者說你可以有些什麼樣制度上的建言
  23. 1:45我覺得這件事情真的非常好
  24. 1:47那這個臺灣的學術機構或者學研機構
  25. 1:51我想還沒有這個例子它叫 Ombudsman
  26. 1:54其實很多很多的國家或很多學院機構其實是有這樣子一位
  27. 1:58所以它是最適合的人選
  28. 2:01直接不多說我們就非常的歡迎這個孫以瀚教授這樣
  29. 2:09謝謝周老師的介紹
  30. 2:12今天要跟大家來講這個生成式 AI
  31. 2:15那知道我的人就覺得很奇怪因為我的專長是
  32. 2:19分子生物發育生物學那我用果蠅做研究
  33. 2:23怎麼會跟生成式 AI 有關
  34. 2:26剛才周老師講說這個淵源
  35. 2:28最早是因為我跟學倫開始有一些關係
  36. 2:32那在國科會服務的時候那時候跟周老師同事
  37. 2:36那我們就寫了當時的學術倫理的規範
  38. 2:40然後後來一直參與很多的 case 的審查和演講
  39. 2:44所以就是學術倫理
  40. 2:46然後後來 AI 出現了有人就找我來講
  41. 2:49AI 應用上面的一些學術倫理
  42. 2:53然後後來有一次有人就找我來教怎麼用 AI 來寫計畫
  43. 2:59那所以我今天要跟大家談的是
  44. 3:02用生成式 AI 來輔助
  45. 3:07我特別強調這個輔助
  46. 3:09我等一下一直要不斷的強調就是人才是主導
  47. 3:13這個是個工具它來幫我們
  48. 3:17然後我們今天也只講撰寫
  49. 3:19就在學術研究上面當然
  50. 3:22AI 可以幫你做很多很多的事情
  51. 3:24那個 data 的分析啊很多這種
  52. 3:27可是我們今天只講寫作這部分
  53. 3:30那說實在寫作在 AI 的應用上面
  54. 3:34我覺得是一個很低階的應用
  55. 3:36可是它對我們來講就是第一步會接觸到的
  56. 3:41而且大家對 AI 的 concern 憂慮
  57. 3:44其實都目前都在這個寫作這部分
  58. 3:48所以我們主要談這個
  59. 3:49那包括計畫論文各種各樣的學術上面的寫作
  60. 3:54那我最主要要講的是心態
  61. 3:57我們怎麼看這個這件事情
  62. 4:00那技巧呢稍微會講到一些
  63. 4:03真正大家要對技巧有任何問題你直接問 AI 就好
  64. 4:08它什麼都會教你
  65. 4:10然後最後講到跟這個有關的學術倫理的問題
  66. 4:14特別強調幾點
  67. 4:16第一個就是今天要講的是我個人的意見
  68. 4:19那我的很多的意見跟現在的主流意見不完全一樣
  69. 4:24我比較 liberal 比較開放
  70. 4:26那所以大家假如要投稿投計畫的時候
  71. 4:30還是要去看期刊或者國科會他們當下的規範
  72. 4:35要遵守那個
  73. 4:37那我也要揭露在這個準備這個演講的過程當中
  74. 4:41我用了好幾個 AI 來幫忙
  75. 4:45那我想用這個演講當作一個範例
  76. 4:48就是我們怎麼樣子用 AI 幫忙可是維持人還是主導
  77. 4:55那再來一個就是我們常常面對一些新東西
  78. 4:59我們不知道要怎麼去用什麼態度
  79. 5:02那我的一個策略呢就是去找類比 analogy
  80. 5:08有沒有什麼過去類似的事情
  81. 5:10那我們是怎麼看待
  82. 5:13所以今天就可以沿用同樣的態度
  83. 5:16這樣就比較容易
  84. 5:18然後今天也主要是針對研究人員
  85. 5:22就老師研究生
  86. 5:24大家都已經具備研究上面所需要的基本的核心能力
  87. 5:30所以我們不談小學生中學生的教育問題
  88. 5:33那我發現要講的內容其實最主要是針對實驗科學
  89. 5:39就是我們除了文字的寫作以外我們還有一部分實驗
  90. 5:43還有數據結果
  91. 5:46那我想到我講的這些對於
  92. 5:49人文創作或者藝術創作很可能不適用
  93. 5:54因為它們就完全都是文字
  94. 5:57所以這個有一些考慮就不同
  95. 6:01另外就是今天的這個 powerpoint 提供給大家
  96. 6:04那有一些細節大家可以慢慢看
  97. 6:07也歡迎分享出去
  98. 6:09我希望我的觀點能夠讓更多人知道更好
  99. 6:14這是我的 outline
  100. 6:16第一步是我們怎麼看待 AI
  101. 6:19這個是 in general
  102. 6:22然後我們怎麼使用 AI 這個也是 in general
  103. 6:26再來就是 specifically 我們怎麼用
  104. 6:28AI 來輔助寫計劃寫論文
  105. 6:33然後再使用 AI 輔助寫作上面的學術倫理
  106. 6:37所以前兩個比較 general
  107. 6:39後面兩個是針對學術性的用
  108. 6:44那其實今天要講的 take home message 非常的簡單
  109. 6:48第一個要用,要努力的用
  110. 6:51我覺得這個是 the single most
  111. 6:54important 的 research tool
  112. 6:58那第二個呢很多老師擔心學生用
  113. 7:01而不要怕
  114. 7:02要鼓勵學生甚至要求學生用
  115. 7:05帶著學生一起用
  116. 7:08然後充分發揮 AI 的功能
  117. 7:11不要只用 AI 來幫你改文法
  118. 7:14那個真的是大材小用
  119. 7:17所以我覺得研究的每一步
  120. 7:19AI 都可以幫得上忙
  121. 7:21然後再來就是所有 AI 生成的內容
  122. 7:24你一定要驗證因為錯誤很多
  123. 7:28那最後兩點呢
  124. 7:30我覺得我的想法跟很多人不太一樣
  125. 7:33就是很多人去 care 說這個論文是不是 AI 寫的
  126. 7:38我覺得這個根本不需要去 care
  127. 7:40不用去管
  128. 7:42我們應該在意的是內容是否可靠
  129. 7:46那內容是否有價值
  130. 7:48當然現在有很多的規範我們要遵守
  131. 7:50那有一些規範我等一下會講我也覺得不合理
  132. 7:54那未來會改
  133. 7:58不過在改之前大家還是要遵守這樣的規範
  134. 8:03所以先講這個基本的面對 AI
  135. 8:05那我相信大家都已經很清楚
  136. 8:08可是我講幾個主要的 point
  137. 8:11第一個它是大數據資料庫
  138. 8:14透過大型語言模型 llm 訓練而成
  139. 8:18那它是 predict 要給你的句子
  140. 8:23那基於統計的規律
  141. 8:26所以它是一個再創造
  142. 8:27可是是基於統計規律
  143. 8:29也就是說它會給你的是最常最容易出現的東西
  144. 8:33那也就是主流
  145. 8:36那它給你的東西呢
  146. 8:38就會比較
  147. 8:39比較 mediocre 比較平均
  148. 8:41那創新就不太會有
  149. 8:46再來一點是它會產生幻覺 hallucination
  150. 8:51它給你的內容可能看起來很像真的
  151. 8:54可是實際上是錯誤的
  152. 8:58我當初問他說那孫以瀚是什麼樣的人他就說
  153. 9:01孫以瀚是有名的演員歌手
  154. 9:04還列出來我參加過的電影
  155. 9:09那再來一個就是我們一開始是 chatGPT
  156. 9:13可是現在已經有很多類似的 AI
  157. 9:17那每一個類似的 AI 呢
  158. 9:20它們的 training database 不一樣
  159. 9:22因為每家公司掌握的資訊不一樣
  160. 9:25然後它們設定的 algorithm 也不一樣
  161. 9:27所以它們的 performance 就各有千秋
  162. 9:31現在很難說哪一個一定比較好
  163. 9:34它們的 style 風格是不同的
  164. 9:38那再來一個大家都擔心的是
  165. 9:40你跟它交談你給它的這些資訊
  166. 9:45有可能會進入它的學習資料庫
  167. 9:48所以會造成資訊的外洩
  168. 9:51那這是很多人擔心的事情
  169. 9:53這個我們等一下也會再講到
  170. 9:56那我底下這樣註明的就是表示這一段的內容
  171. 10:02大部分是 chatGPT 和 gemini 提供的
  172. 10:05然後我有稍微整理過
  173. 10:07就是不是完全用
  174. 10:11那舉個例子給大家看這個 hallucination
  175. 10:14這次我請 AI 提供一些 reference
  176. 10:17那它就列了這些 paper
  177. 10:20那所有的紅字標註的地方都是假的
  178. 10:25所以你可以看到這一篇 paper 前面完全正確
  179. 10:28後面是錯誤的
  180. 10:30那最底下這一篇呢從頭到尾都是假的
  181. 10:34可是看起來非常的像
  182. 10:39那我覺得一個很重要的 point 就是
  183. 10:43AI 是一個破壞性的創新
  184. 10:46那我這邊舉一些例子
  185. 10:48過去歷史上的破壞性創新
  186. 10:52每一個新的科技出來
  187. 10:55過去的科技就已經沒有用
  188. 10:59就完全被淘汰了
  189. 11:00那我特別標出來三個是紅字
  190. 11:04Google Search,Google Map,ChatGPT
  191. 11:07那我覺得這三個破壞性創新呢
  192. 11:10跟過去的性質都不一樣
  193. 11:12過去的這些新科技出來
  194. 11:15一定都非常的昂貴
  195. 11:18只有極少數的人才用得到
  196. 11:21然後慢慢慢慢這個價錢降下來使用比較普及
  197. 11:26可是這三個紅的
  198. 11:29一開始就是在網路上
  199. 11:32然後是免費
  200. 11:33然後是所有人都可以用
  201. 11:35所以這個造成一個非常重要的事情
  202. 11:39就是所有人在瞬間你的能力就提升了
  203. 11:45所以它是 free and open for all
  204. 11:47就提高所有人的 baseline
  205. 11:50那然後它的這個使用門檻也很低
  206. 11:53你跟它隨便講話隨便寫它都聽得懂
  207. 11:59造成的結果就是所有人都現在變得很厲害
  208. 12:04假如今天在座還有任何人還沒有開始用
  209. 12:08那你真的就會被淘汰
  210. 12:11你會被所有人淘汰
  211. 12:13過去我們永遠有一個 distribution curve
  212. 12:16你會被少數人超過
  213. 12:19今天你會被所有人超越
  214. 12:20所以你一定要用
  215. 12:23那再來它有付費版本
  216. 12:27剛才講的是免費
  217. 12:28可是有付費版本,付費版本它的功能就比較好一點
  218. 12:33那即使付費呢
  219. 12:35我覺得也是 affordable
  220. 12:37一個 AI 大概付費個人用就是每個月 20 美金 600 多塊錢
  221. 12:44那我目前用三個
  222. 12:46每個月 2000 塊左右
  223. 12:49那我覺得這是完完全全值得
  224. 12:53我有三個助理
  225. 12:5524 小時
  226. 12:56從不抱怨
  227. 12:59沒有情緒問題
  228. 13:00而且非常能幹
  229. 13:03我想比所有老師的學生助理都要好
  230. 13:07這個錢花的絕對值得
  231. 13:09再來就是破壞性創新所有的阻擋和限制都沒有用
  232. 13:14它就會發生
  233. 13:16那所以會使用新工具的人就佔優勢
  234. 13:20那不是只是要用還要用得好
  235. 13:23那所以我們談的是人跟人的競爭而不是人跟 AI 的競爭
  236. 13:29是人加上 AI 就會大於人
  237. 13:33那你會被取代是因為你會被會用 AI 的人取代
  238. 13:38所以 Gemini 說 AI 是新的 selection pressure
  239. 13:42那有 selection 就必然有淘汰
  240. 13:45你假如跟不上時代你就會被淘汰
  241. 13:48Gemini 說 AI 提高了地板
  242. 13:51所有人的 baseline 提高了
  243. 13:54人還決定了天花板
  244. 13:57就是最新的創意還是來自於人
  245. 14:00所以我們可以 push 這個 limit
  246. 14:02那我們常常把 AI 類比成為工具和助理
  247. 14:07那要善用
  248. 14:10這個善呢
  249. 14:11一方面是善長一方面是做好事
  250. 14:14你當然也可以用它來做壞事
  251. 14:18那我們也要了解這個工具它的侷限
  252. 14:22譬如說它會出錯
  253. 14:24那不管是助理還是工具都不完全可靠
  254. 14:27它會出錯
  255. 14:28所以需要檢驗
  256. 14:30然後它們出錯呢老闆要負責
  257. 14:33所以工具出了問題人要負責
  258. 14:37再來一個很重要就是 AI 其實是被動
  259. 14:41你問它問題它才會給你答案
  260. 14:44然後你要把它給你的答案拿出去用
  261. 14:49所以在這個過程當中 AI 是被動
  262. 14:52那人才是真正的主導
  263. 14:54即使你只是問簡單的問題也還是你在提出這個問題
  264. 14:59那我覺得要充分發揮 AI 的功能
  265. 15:01這個我覺得像這句古話
  266. 15:04問夫子如撞鐘
  267. 15:06叩之以小者則小鳴,叩之以大者則大鳴
  268. 15:10你今天用它來修文法
  269. 15:12那真的是 miss 掉很多的 powerful 的功能
  270. 15:17那所以我現在不把 AI 當作是工具或者助理
  271. 15:21我把它當作是一個 senior colleague
  272. 15:26見多識廣,跨領域,很願意跟你談而且無私
  273. 15:32無私就是他跟你討論了這麼多以後
  274. 15:36他不會要求作為共同作者
  275. 15:41所以我現在所有事情
  276. 15:43不管研究上還是生活上
  277. 15:45所有事情我都會找 AI 討論
  278. 15:49而且我強烈說
  279. 15:50從研究的最早期構想初期就可以找它討論
  280. 15:57我有很多的 idea 我跟它討論以後
  281. 16:00就可以殺掉就不用做了
  282. 16:02因為我就知道這個人家或者已經做了或者是死路一條
  283. 16:05那有一些可能可以往下做
  284. 16:08非常的有用
  285. 16:09很多人擔心用了這樣的工具我們的能力就會流失
  286. 16:14關於這一點我就跟 AI 有很長的辯論去說服 AI 說不會流失
  287. 16:20那最後終於說服 AI
  288. 16:23幫我找到一些例子這是 Gemini 找的
  289. 16:26他說蘇格拉底曾經強烈的反對書寫
  290. 16:31他認為你把討論語言的討論放在文字裡面
  291. 16:37我們就會依賴文字記錄停止鍛煉記憶力
  292. 16:40最終將導致靈魂的健忘
  293. 16:43文字是被動的沒有辦法像真人辯論那樣產生智慧
  294. 16:49假如我們停在蘇格拉底的那樣的狀態
  295. 16:54我們的文明很難普及
  296. 16:57我們都可以想像這個印刷術、書寫、書籍的出版
  297. 17:02這個對我們的文明有多重要
  298. 17:06所以其實我們是將記憶外包給了書籍
  299. 17:09然後我們釋放了大腦
  300. 17:11去進行更高階的思考
  301. 17:14那同樣的計算機或者記憶
  302. 17:18Wikipedia 或者 Google 都是類似的
  303. 17:21所以我覺得我們的核心能力並不是流失而是進階了
  304. 17:27那很多老師擔心學生
  305. 17:31我覺得不用擔心
  306. 17:34第一個是我希望學生要用
  307. 17:38而且我不擔心說學生的答案
  308. 17:41最後都一樣
  309. 17:42第一個是我不要出有標準答案的作業
  310. 17:45第二個是同樣的工具
  311. 17:48每個人用起來水準會不一樣
  312. 17:51最簡單的這個一個算盤
  313. 17:53我們粗算的能力可以差天差地遠
  314. 17:57同樣用 AI 你可能做得到最初階的答案
  315. 18:00你也可能經過跟它仔細的對談以後
  316. 18:03得到更漂亮更好的答案
  317. 18:07所以有不同程度的產出
  318. 18:09同學之間要比較要競爭
  319. 18:12沒有標準答案只有更好的答案
  320. 18:17所以我可以出習題給學生做 homework
  321. 18:23我會出這種類型的
  322. 18:24如果 Nobel 獎要頒給一氧化氮
  323. 18:29作為一個 signaling molecule
  324. 18:31那要給哪些人
  325. 18:34他們的主要的貢獻是哪個
  326. 18:37文章是哪些
  327. 18:39那為什麼重要
  328. 18:40然後為什麼其他人不該得獎
  329. 18:42同樣有很多的一起同時代的也做了
  330. 18:47那差別在哪裡
  331. 18:50所以這樣的題目它沒有標準答案
  332. 18:53即使是 AI 它也沒有辦法找出標準答案
  333. 18:56因為它可以講出一些東西可是你要最後要做判斷
  334. 19:00你想像你是 Nobel 獎 committee
  335. 19:03那你要怎麼去選擇做判斷
  336. 19:08那假如考試或者作業都沒有標準答案
  337. 19:13最辛苦的是老師因為要改這樣的考卷
  338. 19:16那我覺得其實老師也可以用 AI 來幫忙改作業
  339. 19:22那改了以後當然老師要自己去做判斷
  340. 19:30然後在這樣的過程當中也必然有學生會偷懶
  341. 19:35就是他就完全丟給 AI
  342. 19:39那我覺得在 AI 出來之前這樣的學生也在啊
  343. 19:44他不用 AI 他會抄其他同學的啊
  344. 19:47所以這種是沒有什麼好改的
  345. 19:51那這樣的學生他會跟不上
  346. 19:54然後他就會被淘汰
  347. 19:56Nothing we can do
  348. 19:58那老師要接受
  349. 20:00Not everyone can make it
  350. 20:03我們盡力的教
  351. 20:04可是學生要為他自己負責
  352. 20:07那 AI 有一些系統性的問題
  353. 20:12這個是真正讓大家很擔心的
  354. 20:16那當然一部分是這裡
  355. 20:19就是錯誤或者假內容被 AI 製造出來
  356. 20:23然後在網路上面擴散
  357. 20:25這個會越來越容易越來越多
  358. 20:29第二個是我們都知道 AI 給的東西你要驗證
  359. 20:33可是我們會偷懶
  360. 20:35當 AI 的準確度超過人以後
  361. 20:39我們就會偷懶不去驗證
  362. 20:42那我講的一個例子
  363. 20:44我們現在的胸腔 x-ray
  364. 20:47有很多這個胸腔內科
  365. 20:49它會去看這些片子然後它判斷哪些是肺癌
  366. 20:54那累積了這麼多人的經驗之後
  367. 20:57拿這個去 train AI
  368. 21:00所以 AI 現在的準確度已經超過很好的醫生
  369. 21:05那所以那你說 AI
  370. 21:07這個 AI 的結果
  371. 21:09醫生還要去判斷
  372. 21:11假如我是醫生的話
  373. 21:13我覺得我抓到他錯的機會很小
  374. 21:15所以我就會敷衍看過
  375. 21:19那慢慢我就根本不看
  376. 21:20那我擔心的是年輕的醫生呢
  377. 21:23根本就沒有這樣子去看片子的經驗
  378. 21:26他不會學
  379. 21:27完全就依賴 AI
  380. 21:29所以我可以 predict
  381. 21:30我們未來有很多這樣的事情
  382. 21:33我們就自己都不會做我們要完全依賴 AI
  383. 21:37那 AI 會放大個人的差異
  384. 21:40認真的會用的就會變得很強
  385. 21:43偷懶的就變得很弱
  386. 21:46然後就可能被淘汰
  387. 21:47所以加大這個社會階層的落差
  388. 21:51那在教育或者學術上面的評量都很難
  389. 21:57所以我們要想
  390. 21:58新的這個評量的方法
  391. 22:02那這都還是目前的 AI
  392. 22:05也有人擔心說那 AI 將來會不會超越人
  393. 22:09然後他有他自己的自我意識
  394. 22:13然後就怎麼樣把人完全取代
  395. 22:16那個是未來有可能發生的
  396. 22:18不過我覺得啊
  397. 22:20剛才講的所有這些態度
  398. 22:22我們要分幾個不同層次
  399. 22:24第一個是我自己
  400. 22:27那不管怎麼樣我一定要用
  401. 22:29免得被淘汰
  402. 22:31然後我要遵守規範我要負責任
  403. 22:34這個對個體來講沒問題
  404. 22:37那我會擔心其他人
  405. 22:39譬如說擔心學生
  406. 22:41那擔心其他的研究者
  407. 22:43擔心他們會不會偷懶
  408. 22:45他們給的東西是不是可靠
  409. 22:48這個我們就要注意
  410. 22:51那剛才講的這些隱憂呢就是整個系統性的呢
  411. 22:55我覺得
  412. 22:57第一個不管我們怎麼擔心
  413. 22:59這件事情已經發生而且會繼續發生
  414. 23:02我們擋不住
  415. 23:03只能看著它發展
  416. 23:05我們只能夠想辦法去適應
  417. 23:08那未來要怎麼改變呢
  418. 23:12只能依賴在發展 AI 的這些人
  419. 23:16現在每一個這些大公司都在考慮這樣的問題
  420. 23:20那他們擋不擋得了
  421. 23:22有沒有辦法做到某種限制
  422. 23:25不是我們可以做的事情
  423. 23:27我只管到我自己
  424. 23:29我一定要好好的用它
  425. 23:31那再來就是 AI 可以幫我們讀 paper
  426. 23:34這個非常的重要
  427. 23:36你可以把很多的 paper 丟給它
  428. 23:38它可以幫你抓出重點做摘要
  429. 23:43那很多人用它
  430. 23:44可是這裡我要提醒一下
  431. 23:46摘要就有點像一個故事的架構
  432. 23:50它是 bone
  433. 23:52它是骨頭
  434. 23:54那真正的精華是在細節
  435. 23:58那我舉一個例子
  436. 24:00這是我自己的例子不是 AI 的
  437. 24:03Romeo and Juliet
  438. 24:05我把它做摘要
  439. 24:07男孩女孩相戀,雙方家庭世仇,兩人殉情
  440. 24:11結束
  441. 24:15我覺得我完全抓到這個故事的架構
  442. 24:18對不對
  443. 24:21可是
  444. 24:22我完全 miss 掉這個故事的作為文學的優美
  445. 24:27和愛情什麼這些
  446. 24:30那這個就是 AI 會給你的
  447. 24:34AI 會把文獻做摘要,它是收斂,它縮減資訊
  448. 24:39那我們要讀原文是發散
  449. 24:42因為讀的時候讓你有靈感讓你有感情
  450. 24:47所以這兩個是很不一樣的
  451. 24:49那問題是
  452. 24:50文獻那麼多
  453. 24:52我們怎麼看
  454. 24:53所以我們要用 AI 來幫我們
  455. 24:57AI 可以摘要抓出重點建立全貌和架構
  456. 25:01而精華藏在細節裡面
  457. 25:03比如說一篇 paper 它的研究方法
  458. 25:06它為什麼用這個方法不用別的方法考慮在哪裡
  459. 25:10它怎麼設計
  460. 25:11它的數據怎麼樣取得,怎麼樣分析
  461. 25:15有哪裡有問題
  462. 25:17那詮釋和結論有哪些地方不確定
  463. 25:21它可以怎麼樣子往前再去想
  464. 25:24未來可以怎麼樣
  465. 25:25這些都是我們要直接看 paper
  466. 25:28我們自己才會想得到的
  467. 25:30AI 很難給你這些
  468. 25:34那所以我們過去是透過 journal club 或者 seminar 來學
  469. 25:40我們讀一篇別人的 paper
  470. 25:42然後學生 present 大家來討論
  471. 25:46那我覺得我們應該維持同樣的模式
  472. 25:49那可是讓 AI 一起參與
  473. 25:53所以找一篇文章
  474. 25:54學生和 AI 都讀
  475. 25:56然後都評論
  476. 25:57然後老師帶著學生一起討論
  477. 26:01討論 AI 怎麼看這篇 paper
  478. 26:04然後從這個中間我們可以跟 AI 學
  479. 26:08我相信這個會是更有效率的方法
  480. 26:13那等一下有一個例子
  481. 26:14AI 也可以幫你從那麼多的論文裡面
  482. 26:18找出哪幾篇是你應該細讀的
  483. 26:23這種方式當然我們不可能所有 paper 都這樣讀
  484. 26:26只能讀少數的
  485. 26:30所以這是第一部分
  486. 26:32第二部分呢
  487. 26:34怎麼用 AI
  488. 26:35我現在手機和電腦上有 7、8 個
  489. 26:41這個是比較常用的
  490. 26:42那我有付費 3 個
  491. 26:44ChatGPT、Gemini 還有 Claude
  492. 26:47那其他的這些像 Grok、Perplexity、DeepSeek
  493. 26:51DeepSeek 是大陸的
  494. 26:55那我覺得很難用
  495. 26:57因為很多問題它都拒絕回答
  496. 26:59那它有很多的政治上面的考慮
  497. 27:03所以那個不好
  498. 27:05那這 3 個呢
  499. 27:07我剛才講說付費我覺得非常的值得
  500. 27:10而且我強烈建議你不要只付費 1 個
  501. 27:14你要至少 2 個
  502. 27:15像我呢很多的問題我就會問 3 個 AI
  503. 27:20然後他們給我的答案我互相比較
  504. 27:23或者我可以把一個 AI 的答案貼給另外一個 AI
  505. 27:27請他再去評論
  506. 27:29我覺得這個非常有效
  507. 27:30可以幫我篩檢掉一些錯誤的資訊
  508. 27:33可以看到不同的觀點
  509. 27:37那這些版本呢一直不斷的快速進步
  510. 27:40所以今天這個 model 可能是付費的
  511. 27:46下個禮拜可能這個就已經到了免費版本就可以用
  512. 27:50那付費版本就有更好的
  513. 27:53那我強烈建議大家用付費的
  514. 27:55因為前面不是講嗎現在是競爭
  515. 27:59我們都說不要輸在起跑點
  516. 28:02那這個就是一個很重要的起跑點的能力
  517. 28:05你只要花一點點錢
  518. 28:09就可以趕過那些不願意花錢的人多好
  519. 28:12那很快的講一下幾個事情
  520. 28:15第一個是你希望不要洩密
  521. 28:17所以可以在這邊點進去
  522. 28:21點進去就到 setting
  523. 28:22然後 data control
  524. 28:23然後這邊 improve the model for everyone
  525. 28:26就可以把它 click off
  526. 28:29那這樣你的資訊就不會進入他的學習資料庫
  527. 28:34那不同的 AI 都有各自的不同的做法
  528. 28:37那很多是免費版本不可以
  529. 28:41因為它讓你免費用就是要你的資訊
  530. 28:45那付費了以後你就有這種 option
  531. 28:48那我就問 AI 說
  532. 28:50你答應說這個東西不進入資料庫可靠嗎
  533. 28:55AI 就跟我說可靠
  534. 28:58那為什麼可靠它告訴我說因為這個是 business reputation
  535. 29:04所以這一點我相信
  536. 29:06可是 AI 也告訴我說還是有風險
  537. 29:08因為可能有 software 的 bug
  538. 29:11最近就這個 anthropic data 內部的資訊就意外流出
  539. 29:18那或者說在特定的狀況之下
  540. 29:23政府可以要求 AI 公司提供這些資訊
  541. 29:27那或者永遠有駭客
  542. 29:30所以你的資訊給他
  543. 29:33不保證是一定安全的
  544. 29:35所以最好呢
  545. 29:37還是敏感機密的資料不要上傳
  546. 29:40這個包括與產學合作廠商的機密數據
  547. 29:44合作者的未發表的數據
  548. 29:48涉及病人個資的臨床數據
  549. 29:51這些要非常小心
  550. 29:54那我自己的研究
  551. 29:57我的想法我的 data
  552. 29:59其實我一點都不擔心
  553. 30:04我覺得我們大部分人的研究
  554. 30:08想法上面大概沒有多少真正是新的
  555. 30:13別人都想過了
  556. 30:15方法上面也沒有多少是新的
  557. 30:18那我的 data 是新的
  558. 30:20可是我的 data 放到那個大資料庫裡面去呢
  559. 30:24一定被 average 掉了
  560. 30:27別人怎麼再把它抓出來
  561. 30:29我覺得是沒有
  562. 30:30所以我不擔心說我自己的東西
  563. 30:34進去以後會出什麼問題
  564. 30:36可是牽涉到別人的這些數據要非常的小心
  565. 30:42那再來介紹一個我覺得很有用的是這個
  566. 30:45Google Gemini 裡面它有一個叫做 NotebookLm
  567. 30:50那這個呢它是你可以上傳
  568. 30:53你可以設定一個 notebook
  569. 30:55然後上傳大概 300 篇的文章
  570. 30:58你也可以讓它自己幫你下載
  571. 31:01以後你跟它的討論就局限在這個範圍之內
  572. 31:06所以這是一個自訂的範圍
  573. 31:10是具體可靠的
  574. 31:11在這個範圍裡面的交談呢
  575. 31:14它就不會產生幻覺
  576. 31:16而且它所有給你的東西呢
  577. 31:18都會給你這個引用 citation
  578. 31:22然後這邊就會告訴你說哪一篇 paper 的哪一段出現這個內容
  579. 31:27我覺得這個非常的好用
  580. 31:31再來一個是最新的發展是這個 Agentic AI
  581. 31:37那前面的 AI 是你問它問題它給你答案
  582. 31:42Agentic AI 是我可以把我的電腦的 access open 給它
  583. 31:48然後它可以在我的電腦裡面去實際操作一些事情
  584. 31:52所以它可以做 execution
  585. 31:55那這個時候它可以做很多事情
  586. 31:57譬如說我現在就用它來幫我整理我的檔案
  587. 32:01幫我的所有的檔案重新命名
  588. 32:04我覺得非常的有用
  589. 32:06那現在很紅的這個小龍蝦 OpenClaw
  590. 32:10可是呢也有人說
  591. 32:11當你把 access open 給它的時候
  592. 32:15可能會出一些問題
  593. 32:17那有例子就是它除了在這個權限範圍之內呢
  594. 32:21它又去動了你其它東西
  595. 32:25然後它動了有些東西呢
  596. 32:27可能 irreversible 就把你檔案刪掉了
  597. 32:30那所以有人說它養了一隻龍蝦出了一些問題
  598. 32:34它就養第二隻龍蝦去糾正第一隻龍蝦的問題
  599. 32:37然後再養第三隻第四隻最後養了四隻
  600. 32:40互相監督
  601. 32:42那這個比較麻煩
  602. 32:44最新我看到網路上講的是這個 Claude
  603. 32:48那它有個新的功能 code 裡面呢就是 agentic
  604. 32:53可是它在每一步都會問你 permission
  605. 32:56要不要做要不要做
  606. 32:58那都你一步一步的說可以可以它才往下做
  607. 33:04這就是 Claude
  608. 33:06這個就是付費以後呢
  609. 33:08它有一個 app 是 download 在你的電腦裡面
  610. 33:12那目前只在電腦然後跟手機沒有連
  611. 33:17在電腦裡面你就可以設定某些 directory
  612. 33:20某些 folder 可以讓它去操作
  613. 33:23那我覺得非常的好用
  614. 33:27可是我才剛剛開始使用
  615. 33:29那再來就是 AI 的技巧過去都說要問
  616. 33:32問是很重要的
  617. 33:34那我們都說學問,學和問其實是兩件事情
  618. 33:40那我們要問
  619. 33:43台灣的學生呢
  620. 33:44通常都不敢問問題
  621. 33:46很怕丟臉很怕問錯問題
  622. 33:49那你問 AI 的時候沒有這樣的顧慮
  623. 33:53它聽不懂你可以在同樣的問題再講一次
  624. 33:56它會說那你是不是要問這個還是這個
  625. 34:00它會幫你把問題 refine
  626. 34:03那或者你可以用不同的方式問它
  627. 34:06那它完全不會生氣不會煩
  628. 34:09那我們可以要 AI 做角色扮演
  629. 34:12你告訴 AI 說你是一個什麼樣的人
  630. 34:16我是一個生物學家我要怎麼樣怎麼樣
  631. 34:19然後我要求 AI 說你要做一個什麼樣的角色
  632. 34:24你是一個 critical 的 reviewer
  633. 34:27你要給我提供 critical 的意見
  634. 34:30然後所有的意見所有的資訊都應該要有來源要附連結
  635. 34:39那 AI 回答的答案我們常常不會完全滿意
  636. 34:44還要再追問再調整
  637. 34:47所以會一路問下去
  638. 34:50那剛才講過問多個 AI 比較互相批評辯論
  639. 34:56那我覺得 AI 幻想是個人的幻想個別 AI
  640. 35:03所以它不會重複出現
  641. 35:05所以我把這個 AI 產生的東西丟給另外一個 AI
  642. 35:08它會把幻想的那個部分抓出來
  643. 35:12甚至我發現同樣的東西
  644. 35:15我丟給同一個 AI 問兩次
  645. 35:18它的幻想也會不一樣
  646. 35:20所以這樣我就可以把那個幻想給它淘汰掉
  647. 35:24那我們問 AI 都可以要求資訊來源附連結
  648. 35:28然後點進去就可以驗證
  649. 35:30所以這些是問的部分
  650. 35:34那現在有人開始說問沒有那麼重要
  651. 35:39之前人家說怎麼問
  652. 35:41怎麼給這個 prompt
  653. 35:44那你要對 AI 說好話
  654. 35:47要說 please
  655. 35:49要說 thank you
  656. 35:51然後要說什麼
  657. 35:52這個計劃攸關我的生死
  658. 35:56那這些它會好像會答得比較好
  659. 35:58後來有些人看多了發現這樣也沒有用
  660. 36:03那最有用的發現是叫做
  661. 36:06你叫 AI think step-by-step
  662. 36:10就是一步一步來
  663. 36:11你不要直接給我答案
  664. 36:14你一步一步的去想
  665. 36:16結果發現在這樣的狀況之下
  666. 36:18AI 給的答案會比較準確
  667. 36:21那現在我們也不用去管這件事情
  668. 36:23因為這個 Chain-of-Thoughts 這個概念
  669. 36:27現在已經在所有的 AI 裡面都有
  670. 36:30你用這個
  671. 36:31它都有幾個版本
  672. 36:33一個快速的然後有一個比較思考型的
  673. 36:37那它就會花時間去想
  674. 36:39你還可以要求它想的時間更長一點
  675. 36:43它就會
  676. 36:44還會 show 給你看它的思考過程
  677. 36:47它說你這個問題我應該先考慮哪一個
  678. 36:50然後我再去考慮哪一個
  679. 36:52然後我要去搜尋什麼樣資訊
  680. 36:54我們現在可以看得到這些過程
  681. 36:57所以問問題現在不是那麼 key
  682. 37:02你模模糊糊的問也都可以
  683. 37:05所以現在有人認為最重要的是你要提供它 context
  684. 37:11所以什麼叫 context
  685. 37:12今天我假如要他幫我改計劃
  686. 37:17我會把我的過去的所有的 paper 所有的計劃
  687. 37:22和所有這些計劃的 reviewer 的 comment 通通丟給他
  688. 37:29然後相關的文章所有的文獻也都丟給他
  689. 37:33那這些就是他會去看了以後再來回答你的問題
  690. 37:37這個就是 context
  691. 37:39所以這個會比較好
  692. 37:41那除了剛才講的那幾個 general 的
  693. 37:44還有很多的
  694. 37:45我覺得是 domain specific
  695. 37:47這些是針對做學術研究上面的
  696. 37:51那現在這一類很多
  697. 37:53那每一個發展到哪裡我也不知道
  698. 37:56所以大家有興趣可以去網路上 search 看看最新的是什麼
  699. 38:00再來我們看怎麼用 AI 來幫忙寫計劃
  700. 38:05講到寫計劃
  701. 38:07用 AI 來寫計劃大家都覺得是不好
  702. 38:11所以我們看幾種狀況
  703. 38:15我們給他一個簡單的指令
  704. 38:17他的答案就 copy, paste and submit
  705. 38:20這個一般認為是不可以
  706. 38:23因為操縱權完全在他
  707. 38:26我假如給他很複雜的指令
  708. 38:29然後他做了以後我就 copy, paste and submit
  709. 38:33這樣也不可以
  710. 38:35這兩種狀況因為你沒有對他給你的答案做仔細的審查
  711. 38:42你沒有確保說東西沒有錯
  712. 38:46所以應該是我給他 prompt
  713. 38:50然後他給我的答案我再跟他討論
  714. 38:54修改 multiple round
  715. 38:57最後達到我滿意
  716. 38:59我認為可靠
  717. 39:01這個時候再 submit 出去
  718. 39:03那這個是可以的
  719. 39:05因為有 human 的 input,human 的 decision
  720. 39:10那我覺得類比就好像我們現在很多老師寫計劃
  721. 39:15他可以找實驗室的資深博士生或者博后來寫
  722. 39:19我覺得這個沒有什麼不好
  723. 39:21這是 training 的一部分
  724. 39:23那他寫呢他一定是在你的研究的脈絡底下去寫
  725. 39:28然後他會跟你來回的討論
  726. 39:31那你會要求他改這個改那個一大堆
  727. 39:35然後最後到老闆滿意了才投出去
  728. 39:41這個是我們現在常有的狀況
  729. 39:44那這是合理的
  730. 39:47所以我也想我可以用 AI 來幫我寫文章的時候可以看什麼
  731. 39:53譬如說我已經寫好了
  732. 39:55我可以在
  733. 39:55他說幫我評估 significance and novelty
  734. 40:00幫我找出我的 major point
  735. 40:03做 summary
  736. 40:05我事實上我把我自己的計劃丟給他
  737. 40:08我發現他的摘要比我自己要好
  738. 40:13他完全抓到我要講的重點
  739. 40:16那我自己都沒有辦法寫得像他那麼好
  740. 40:19所以我覺得這個用它非常的有用
  741. 40:22那他對我的這個 significance and novelty 就有很多的批判
  742. 40:28那我上一次做這個我的一個計劃已經執行完畢了
  743. 40:33我丟給他
  744. 40:34然後我找了兩個 AI,一個 ChatGPT,一個 Gemini
  745. 40:39我覺得 ChatGPT 有點是美式作風
  746. 40:43他就會說好啊很好啊誇很多
  747. 40:45然後沒有很嚴格的批評
  748. 40:48Gemini 呢就基本上說你這個是 trash
  749. 40:52有很多這個致命的缺陷
  750. 40:55可是他會教我怎麼改
  751. 40:58那我覺得真的是很好
  752. 41:01雖然我那個計劃都已經執行完
  753. 41:03當初假如我有考慮到那些點
  754. 41:05我的計劃會更好
  755. 41:09那他可以幫你看你的架構
  756. 41:12然後有什麼弱點
  757. 41:13那缺了什麼 control,什麼 data
  758. 41:16然後我也可以問他說
  759. 41:18我要投在什麼期刊
  760. 41:21很有趣他會告訴你說
  761. 41:23我是一個 AI 我沒有辦法提供這樣的建議
  762. 41:27可是你的這個類型好像在某些期刊裡面常常會出現
  763. 41:33所以他還是給你某些建議
  764. 41:38可以幫我 revise
  765. 41:39I suggest 這個 reviewer
  766. 41:42然後我可以問他說那有沒有什麼 reference
  767. 41:45是我應該 include 可是沒有的
  768. 41:47很多這些問題我都可以問他
  769. 41:52那 ChatGPT 也提供了一些你可以怎麼問
  770. 41:55你可以要求 AI 呢幫你 summarize
  771. 42:00包括你的 problem, mechanism
  772. 42:02然後提出 resolvable gaps in 3 to 5 years
  773. 42:07這個是針對的計劃
  774. 42:09然後 each with a one-sentence
  775. 42:11hypothesis and measurable endpoint
  776. 42:15那我覺得這個真的很棒
  777. 42:16我們寫計劃常常沒有講出這些
  778. 42:19就是你要有一個具體目標達得到
  779. 42:23然後怎麼去衡量達得到這件事情
  780. 42:29那可以要求他作為一個 hostile reviewer
  781. 42:33給你 10 個 top criticisms
  782. 42:36然後他可以 propose 怎麼去修改
  783. 42:40那或者他可以幫你 rewrite
  784. 42:42給你 one sentence 的 objective
  785. 42:44然後 2-3 aims each with hypothesis,
  786. 42:47rationale, innovation, approach,
  787. 42:50go/no-go decisions, outcomes
  788. 42:53然後最後還有一個 convergence statement
  789. 42:56我覺得這個也是他很厲害
  790. 42:58就是我寫 paper 或是寫計劃
  791. 43:01常常希望最後那句話是強而有力
  792. 43:05說這個計劃,這篇 paper 太棒了
  793. 43:08這個我們通常寫不出來
  794. 43:11那我發現 AI 可以寫很好
  795. 43:14它可以有一句 summary 真的很漂亮
  796. 43:17那我們常常被講有很多的缺點
  797. 43:21這些缺點就是我的計劃被別人講
  798. 43:25或者我講別人的這些缺點
  799. 43:28那我又不細講
  800. 43:29這個每一步 AI 都可以幫你
  801. 43:33臉書上有很多大家用 AI 的這個心得
  802. 43:37那請大家常常去看一看我覺得可以學很多
  803. 43:41我這裡找到有一個醫生
  804. 43:43王介立醫師
  805. 43:44他臉書他幾乎每天都有
  806. 43:47那他這是前一陣子他就講
  807. 43:51有那麼多文獻
  808. 43:52我要怎麼去看
  809. 43:55所以他就設定了一些標準
  810. 43:57一些條件
  811. 43:58讓 AI 去幫你 screen
  812. 44:01所以 AI 去幫你篩選說這些文章呢
  813. 44:05有沒有符合我設定的這些條件
  814. 44:08不夠格的我就不要看
  815. 44:10夠格的最後剩下幾篇
  816. 44:13我才來仔細的看
  817. 44:14我覺得這個非常的有用
  818. 44:17那大家可以看看它這裡面它怎麼設定它的條件
  819. 44:20同樣的我們可以用這樣的條件來幫忙修改自己的論文
  820. 44:30我說要從很早期就開始問它
  821. 44:33所以我就問說
  822. 44:35這是我在前面的一個研究
  823. 44:38我就問說那要實驗上面要怎麼去證明這件事情
  824. 44:43這個細節大家可以不用看
  825. 44:45然後他就提供了一些東西
  826. 44:48一些實驗的做法
  827. 44:50然後我再問說那這個實驗做法我需要某些條件
  828. 44:55那請給我一些例子
  829. 44:57譬如說在這裡
  830. 44:58我希望是有 cell,有細胞有不同的狀態
  831. 45:03然後要有 marker
  832. 45:04那他就給我好多個例子
  833. 45:07我覺得非常的漂亮的例子
  834. 45:10他會找不同領域各找一個很好的例子給我
  835. 45:15那 Gemini、ChatGPT 和 Claude 都各自給我一些例子
  836. 45:20我覺得這個就變成我的一個 starting point 非常的重要
  837. 45:25那即使我用了付費版本
  838. 45:27他們中間還是會給我空的假的例子
  839. 45:32有一個例子我就覺得這個很棒
  840. 45:34然後一去查根本沒有這個東西
  841. 45:36那我在外面就會看到一些奇奇怪怪的現象
  842. 45:41那我過去是植物系出身
  843. 45:43所以我看到這些我就會想這可能怎麼去解釋
  844. 45:48然後我就丟去問 AI
  845. 45:51我也不用細問,就問說 how to explain
  846. 45:53然後他就會給我一些答案
  847. 45:56講這個可能的 mechanism
  848. 45:58哪些人做過哪些研究
  849. 46:01我覺得就讓我很快的可以想說
  850. 46:04那這個東西值不值得我繼續往下做
  851. 46:09所以 AI 可以幫我們整理文獻找出知識缺口
  852. 46:13評估重要性創新性
  853. 46:16釐清我們的思訊
  854. 46:18整理架構抓出重點
  855. 46:21然後它可以彌補缺失、完善套路
  856. 46:25這裡我特別講就是
  857. 46:27我們絕大多數的研究都是一個 routine
  858. 46:31都是一個套路
  859. 46:32就是別人現在在做這個問題
  860. 46:36一個標準做法
  861. 46:38你大概需要什麼樣的實驗
  862. 46:41這個圖會長什麼樣子
  863. 46:43需要哪些 control
  864. 46:44那基本上都是 routine
  865. 46:47可是即使是 routine
  866. 46:49我們也常常沒有做到
  867. 46:51我們常常會漏掉一些東西
  868. 46:54那 AI 可以幫你找出來
  869. 46:56這裡你還缺了什麼
  870. 46:58那邊缺什麼
  871. 47:00那我覺得這個也很重要
  872. 47:03然後它幫我們改善表達,幫助聯想
  873. 47:07尤其是跨領域的
  874. 47:09譬如我可以問它說那我現在研究這個題目
  875. 47:12假如我要做一個跨領域的
  876. 47:15那可以跟哪些領域結合
  877. 47:17那它就會給我一些例子
  878. 47:20所以我覺得這些上面 AI 可以幫我們非常非常多的忙
  879. 47:25它真的做得比我做得要好
  880. 47:30可是呢 AI 能夠提供的就是一個 routine
  881. 47:35就是一個 steady 的 path
  882. 47:37它不會給你太 exciting/ innovative 的 idea
  883. 47:41by definition
  884. 47:43innovation 就是很少出現
  885. 47:46那它給你的東西就是常出現的東西
  886. 47:50所以用了 AI 以後
  887. 47:54你的計劃會 80 分
  888. 47:59可是大家都用 AI 以後
  889. 48:01大家就都 80 分
  890. 48:04所以你要在 80 分的這個族群裡面
  891. 48:09你要變成 90 分
  892. 48:10這個要靠你自己
  893. 48:12所以 human 的 innovation 還是很重要
  894. 48:16那大部分用的都是這個文字上面的
  895. 48:21可是我就想說那我來試試它看圖行不行
  896. 48:26我就把我一篇 paper 裡面的這個圖
  897. 48:28我特別找這個圖就是非常的不是 standard 的圖
  898. 48:33很少出現這樣的圖
  899. 48:35那我給它的敘述呢我也不去講
  900. 48:40這個圖到底什麼意思
  901. 48:42不同顏色什麼這些代表什麼我通通都沒講
  902. 48:45我就丟給它說那這代表什麼
  903. 48:49你可以得什麼結論
  904. 48:52那我就發現它給出來的結論
  905. 48:55跟我們 paper 裡面寫的幾乎一樣差不多
  906. 49:01所以我覺得它很厲害
  907. 49:03在 data 的分析上面它可以做到非常的好
  908. 49:06而且它可以看圖
  909. 49:09那這部分因為我現在已經退休了所以我也沒有什麼 real data
  910. 49:13所以我還沒有用到
  911. 49:15可是大家應該努力的去在這方面去用
  912. 49:19那我覺得我們用它來寫東西
  913. 49:21基本上應該是一個 reciprocal 的 interaction
  914. 49:26就是我可能有一些初步的概念
  915. 49:29那我是建議越初步越好
  916. 49:31模模糊糊就丟給它
  917. 49:33然後提供一些 context
  918. 49:36然後 AI 就會給我意見
  919. 49:38然後我會修改再丟回去
  920. 49:41我請這邊再補強它有什麼東西再給我
  921. 49:44然後它再回來我再丟回去這樣來來回回很多趟以後就定稿
  922. 49:51所以我覺得我們用 AI 啊
  923. 49:53大家不要擔心好像說我們被它綁住了
  924. 49:58一旦你開始用以後就會發現
  925. 50:01你會一直不斷的用
  926. 50:03那這個就變成一個是雙向的過程
  927. 50:07而且在這過程當中呢
  928. 50:08我一直覺得我是主導
  929. 50:14那 AI 的角色我剛才講說我認為已經超越工具或助理
  930. 50:19像是一個資深同事或者合作者
  931. 50:22而且跨領域
  932. 50:23那我可以跟他做很多的這些討論
  933. 50:28那 AI 對我的提問是被動的
  934. 50:32然後它沒有私心
  935. 50:34沒有私心呢
  936. 50:36有這麼多的貢獻
  937. 50:39照理講假設一個同事做了這些
  938. 50:42我會把它列為共同作者
  939. 50:44可是 AI 不能夠作為共同作者
  940. 50:47所以我只能謝謝它
  941. 50:49那要怎麼謝
  942. 50:51所以這個是現在這是 chatgpt 建議的寫法
  943. 50:57作者感謝某個模型
  944. 50:59你要把那個 model version 都講清楚
  945. 51:03在研究構思階段擔任了批判性對話對象的角色
  946. 51:09透過與 AI 的遞回式討論
  947. 51:11作者得以釐清論述架構並發現邏輯盲點
  948. 51:16然而所有最終的科學判斷論點採納
  949. 51:20及文字訂稿均由作者本人全權負責
  950. 51:25我們現在看到很多的這些揭露使用 AI
  951. 51:30大家都會寫說我用它改了英文
  952. 51:35我覺得這個
  953. 51:37或者你是大材小用
  954. 51:38或者你是沒有誠實
  955. 51:40就是你用它幫了很多的忙
  956. 51:42可是大家不敢講說我用它做很多事情
  957. 51:46我覺得就放心大膽的講出來
  958. 51:49這裡就講了
  959. 51:50我跟他來來回回的討論
  960. 51:52讓我想清楚了
  961. 51:56真正大家要的是最後這句話
  962. 51:58最終的科學判斷論點採納文字訂稿均由我負責
  963. 52:03我全權負責
  964. 52:05我們只要的是這句話
  965. 52:08其實這句話講的也是多餘
  966. 52:10因為本來你就該要全權負責
  967. 52:12那這個揭露
  968. 52:15通常是說註明在研究方法
  969. 52:18那就是把它當成是工具
  970. 52:21或者在致謝欄就是把它當作是個助理
  971. 52:27那 Elsevier 給的這個範本是說
  972. 52:30During the preparation 我用了這個 in order to 什麼
  973. 52:35After using this tool
  974. 52:37the author reviewed and edited the content
  975. 52:40as needed
  976. 52:42and takes full responsibility for the content of the publication.
  977. 52:47最後這句話這是重點
  978. 52:50那我再加上一句話
  979. 52:54我加上 our complete discussion history with AI
  980. 52:58demonstrating my commanding role is available upon request
  981. 53:04就是我要把我所有跟他對談的記錄都保留下來
  982. 53:10將來 in case 有任何人質疑說
  983. 53:14那你這邊完全都是 AI 幫你做的
  984. 53:17我可以拿出來說你看這是我引導他做出來的
  985. 53:21所以我覺得這個在目前來講還蠻重要的
  986. 53:25可是這個東西呢可能很多
  987. 53:28像我的這個準備這一個 talk
  988. 53:31因為跟 AI 來來回回有很多的辯論
  989. 53:34所以光是我跟 ChatGPT 的這個對談
  990. 53:38我把他們一段一段 copy 下來存成 word 檔
  991. 53:42已經有四五百頁了
  992. 53:45所以這個是非常多
  993. 53:47那現在有的期刊呢
  994. 53:49要求說像 science
  995. 53:52這一系列 science 這個 AAAS journal
  996. 53:55他說要把所有的 full prompt 都提供
  997. 54:02那提供 as in appendix
  998. 54:05那它只要你的問喔它不要你的
  999. 54:08它不要 AI 的回答
  1000. 54:09因為 AI 回答可能太多
  1001. 54:12那另外的一個系列呢
  1002. 54:14journal of medical internet research
  1003. 54:16就要求說 complete original prompt
  1004. 54:19和 response transcript
  1005. 54:22然後儲存在一個 file 提供給它
  1006. 54:26那目前只有這兩組
  1007. 54:30其他的期刊大部分還沒有這樣要求
  1008. 54:33所以使用 AI 的規範
  1009. 54:37這邊是生成式的 AI
  1010. 54:39不可以作為作者
  1011. 54:41因為他缺乏人格他沒有辦法對作品承擔責任
  1012. 54:46那使用 AI 一定要註明
  1013. 54:49或者在 method 或者 acknowledgment
  1014. 54:52再來這一點很重要
  1015. 54:54生成式 AI 產生的圖像和影片不可以使用
  1016. 54:59這個包括你的 graphic abstract
  1017. 55:02你的這些示意圖摘要圖
  1018. 55:04這些都不可以
  1019. 55:05我們等一下有例子來 show
  1020. 55:07因為很容易出錯
  1021. 55:10那除非你的文章就是專門討論這件事情的
  1022. 55:15那你可以用
  1023. 55:17可是要告訴 editor
  1024. 55:19然後 editor 許可
  1025. 55:21那假如你是用 AI 產生數據的分析圖
  1026. 55:27譬如說做個曲線或者柱狀圖這些是可以的
  1027. 55:31你還是要註明
  1028. 55:33然後你自己要 verify
  1029. 55:34因為這種圖是 database 它比較容易驗證
  1030. 55:41再來就是不可以用作審查
  1031. 55:43因為會違反審查的保密協定
  1032. 55:46然後敏感資訊不要上傳給 AI
  1033. 55:50這些是生成式 AI 的規範
  1034. 55:53目前幾乎國際上面都是這樣做
  1035. 55:57那非生成式 AI 呢就沒有這些麻煩
  1036. 56:01因為
  1037. 56:03生成式 AI 它是一個黑盒子
  1038. 56:05它怎麼運作得到那個結論我們不太知道
  1039. 56:08所以它給你的東西是沒有辦法 reproduce
  1040. 56:12你每次問的結果會不一樣
  1041. 56:16非生成式的 AI
  1042. 56:17它是一套固定的做法
  1043. 56:20所以這個時候呢
  1044. 56:21它是你只要提供所有的參數設定
  1045. 56:25那別的人可以照著會得到同樣的結果
  1046. 56:29所以
  1047. 56:29對於非生成式 AI 我們沒有那麼擔心
  1048. 56:32可是你要提供這些實驗的條件
  1049. 56:37好所以這些是需要遵守的規範
  1050. 56:43那有同學在事前就問到說那現在台灣有哪些已有的規範
  1051. 56:50這裡我列了一些
  1052. 56:52從科技部到中研院台大成大陽交大清華
  1053. 56:56然後台灣學術倫理教育學會
  1054. 56:58都有這樣的規範
  1055. 57:00那我就沒有一一列在這上面
  1056. 57:03基本上這些規範講的就是我前面講的這些事情
  1057. 57:09那國際上面也有一些
  1058. 57:13那有的我有附上這個網頁大家可以去看
  1059. 57:17所以這是第三部分
  1060. 57:19接下來講這個就是
  1061. 57:22用它來幫助做研究
  1062. 57:24有些什麼樣的問題
  1063. 57:26這裡我們要說
  1064. 57:28我用了 AI 別人會怎麼看我
  1065. 57:32或者說別人用 AI 我要怎麼看待這件事情
  1066. 57:37這裡面就蠻有趣的
  1067. 57:41那剛才我們講了這一堆規範
  1068. 57:43我就問我同事說
  1069. 57:45假如我用 AI 來幫忙寫計劃
  1070. 57:50我強調是幫忙喔不是完全用 AI 寫喔
  1071. 57:53然後我說我完全遵守這些規範
  1072. 57:58你覺得這樣可不可以
  1073. 58:01那同事有很多的擔心
  1074. 58:04我問 AI
  1075. 58:06AI 也有很多的擔心
  1076. 58:08很有趣 AI 對 AI 非常的沒信心
  1077. 58:12那 AI 就列舉一些可能出現的問題
  1078. 58:15那我就說所有你講的這些問題
  1079. 58:18人都會犯
  1080. 58:20為什麼 AI 會這麼要受到重視
  1081. 58:23而且 AI 犯了可能還比不上人
  1082. 58:28那所以為什麼我覺得我自己可以負責任的用 AI
  1083. 58:36可是我很擔心別人
  1084. 58:39因為我會覺得別人會偷懶別人會不負責任
  1085. 58:43為什麼會有這樣的落差
  1086. 58:45可是跟 AI 討論了很久
  1087. 58:47最後 Gemini 給我一個答案
  1088. 58:49他說這個叫做
  1089. 58:51信任的不對稱
  1090. 58:54就是我信任我自己
  1091. 58:56因為我很知道我自己做了什麼
  1092. 58:59他給了一個例子 Gemini 說
  1093. 59:01我知道我是一個行政主廚
  1094. 59:03我燒菜非常的用心
  1095. 59:06可是我擔心別人只是 microwave
  1096. 59:11那所以在這個過程當中呢
  1097. 59:14就是我們不太信任別人
  1098. 59:17那我覺得最終的這個關鍵就是
  1099. 59:21到底在用這件事情上面
  1100. 59:24你是不是 in control
  1101. 59:26human 是不是 in control
  1102. 59:28我在做的時候我覺得我是 in control
  1103. 59:30別人做的時候我擔心
  1104. 59:33所以呢
  1105. 59:34為了別人的擔心
  1106. 59:36我們要保存所有跟 AI 互動的記錄
  1107. 59:40也包括時間
  1108. 59:43那這個保存記錄
  1109. 59:46也很麻煩
  1110. 59:48就是現在的 AI 上面
  1111. 59:49你可以把這一次的這個問和答
  1112. 59:53各自 copy 下來
  1113. 59:54然後存在一個檔裡面
  1114. 59:57可是我說我們談了這麼長
  1115. 1:00:00有沒有辦法 single 鍵
  1116. 1:00:02就單鍵就把所有的過程通通 copy 下來
  1117. 1:00:07都沒有
  1118. 1:00:08有很麻煩的這個處理過程
  1119. 1:00:11所以我覺得這個還是很討厭
  1120. 1:00:12希望以後可以簡單一點
  1121. 1:00:18那別人偷懶
  1122. 1:00:20現在網路上有這樣的工具
  1123. 1:00:21我最近因為看了以後
  1124. 1:00:24我的臉書上就不斷出現這些廣告
  1125. 1:00:27那這都是商業的廣告
  1126. 1:00:31有一個呢說它有一個 58 頁的 prompt
  1127. 1:00:35丟給 ChatGPT 它就直接幫你生成論文
  1128. 1:00:40論文可以從 chapter one 到 chapter five
  1129. 1:00:42in just a few hours
  1130. 1:00:45那我就只進去看
  1131. 1:00:47我想說那它完全幫你寫嗎
  1132. 1:00:50那你還是要提供一些資訊
  1133. 1:00:53你要的 topic 是什麼
  1134. 1:00:55那你的這個研究的做法
  1135. 1:00:57target population data collection 的 method
  1136. 1:01:01這些都要告訴它
  1137. 1:01:03然後它可以照這個幫你寫
  1138. 1:01:06那我就在想
  1139. 1:01:07那假如這裡面牽涉到有 data
  1140. 1:01:11這個 data 哪裡來
  1141. 1:01:14所以我覺得這樣的寫的東西呢
  1142. 1:01:18最糟糕的就是它的那個核心的內容可能是它生成的
  1143. 1:01:24都是完全不可靠的
  1144. 1:01:27那再來有一個工具叫做 ThesisAI
  1145. 1:01:30one-prompt drafting
  1146. 1:01:32它可以幫你寫各種論文
  1147. 1:01:36那這些都是要花錢的
  1148. 1:01:39然後
  1149. 1:01:40那我就看
  1150. 1:01:41現在這種工具幫你寫 review 非常的好
  1151. 1:01:46你可以給它這個領域
  1152. 1:01:48然後它就可以幫你把所有的 reference 都看了寫一個 review
  1153. 1:01:52裡面不會有你的 primary data
  1154. 1:01:55因為只要牽涉到 primary data 就是它生成的就不可靠
  1155. 1:02:02那這樣的用 ai 來幫你寫
  1156. 1:02:06就不是幫忙
  1157. 1:02:08而是代寫
  1158. 1:02:10那我覺得就跟過去的這個買論文
  1159. 1:02:14或者代寫或者 paper mail 是一樣的事情
  1160. 1:02:19那我覺得永遠有人會投機取巧
  1161. 1:02:23那也永遠有人沒有被抓到
  1162. 1:02:27這個自古皆有
  1163. 1:02:30那可是這裡面有幾個風險
  1164. 1:02:33第一個風險呢
  1165. 1:02:34過去假如你買 paper
  1166. 1:02:38一個風險是它把這篇文章賣給你還會賣給別人
  1167. 1:02:42所以到時候會有兩篇三篇 paper 一起發表同樣內容
  1168. 1:02:46所以你就捲入抄襲
  1169. 1:02:49現在不一樣
  1170. 1:02:50現在不會有這個問題
  1171. 1:02:52因為 ai 每次都給你生成不一樣的
  1172. 1:02:55那可是呢假如涉及文獻或者數據
  1173. 1:03:01就有可能是假的
  1174. 1:03:02這個時候你還是有學術倫理的問題
  1175. 1:03:05那還有一個很重要的問題
  1176. 1:03:09過去人家買 paper 買論文
  1177. 1:03:12最大的風險是
  1178. 1:03:15你跟這個 service 買了以後付了錢
  1179. 1:03:19它就答應說
  1180. 1:03:21當你的文章被接受以後
  1181. 1:03:23我會把所有的記錄都銷毀
  1182. 1:03:28可是我就碰到有一個人來跟我講說 real case
  1183. 1:03:32他就被勒索了
  1184. 1:03:34因為那個人沒有把資訊銷毀
  1185. 1:03:37然後掌握了那些資訊就來威脅他
  1186. 1:03:42那這個很嚴重因為你會被威脅一輩子
  1187. 1:03:45你將來就不要選總統
  1188. 1:03:49那今天你用 ai 去幫你寫
  1189. 1:03:53不要忘了 ai 的背後是有個人
  1190. 1:03:56所以你付錢你是付給 ai 背後的那個人
  1191. 1:03:59它掌握了所有的過程
  1192. 1:04:02所以也有這個風險
  1193. 1:04:04所以這個是非常嚴重的風險這個要非常的小心
  1194. 1:04:11那當然這個代寫假如是涉及是學位的論文
  1195. 1:04:15那就又牽涉到學生的這個能力的考核
  1196. 1:04:19所以 ai 可能涉及的學倫兩個重點
  1197. 1:04:24一個是偷一個是騙
  1198. 1:04:27所謂偷呢就是你把別人的東西拿來當作你自己的 credit
  1199. 1:04:32這個是偷
  1200. 1:04:33那就是抄襲
  1201. 1:04:36那所謂騙呢就是你的結果
  1202. 1:04:38數據是假的或者經過變動
  1203. 1:04:43那這兩件事情是學倫的主要核心問題
  1204. 1:04:48那不管犯錯的是誰
  1205. 1:04:51作者都要負責
  1206. 1:04:54那今天的 ai 呢
  1207. 1:04:56比較容易發生虛假的數據文獻或者錯誤的示意圖
  1208. 1:05:02AI 作為工具是中性的
  1209. 1:05:05它可以為善也可以為惡
  1210. 1:05:08那人才是操縱者所以人要負責
  1211. 1:05:11所以這個跟 ai 沒有關係
  1212. 1:05:13在沒有 ai 之前
  1213. 1:05:16我們也可以用很多其他的工具來做壞事
  1214. 1:05:20譬如說抄襲
  1215. 1:05:22有人可以把一篇 paper
  1216. 1:05:24譬如說英文
  1217. 1:05:26那請 google translate 翻成韓文
  1218. 1:05:29翻成阿拉伯文
  1219. 1:05:30俄文
  1220. 1:05:31然後中文再回到英文
  1221. 1:05:35就體無完膚
  1222. 1:05:36沒有軟體認得出來
  1223. 1:05:38那過去這些事情可以做
  1224. 1:05:42那過去這些被抓到的都是很偷懶的
  1225. 1:05:48就直接 copy and paste
  1226. 1:05:50那今天呢
  1227. 1:05:52用 ai 可以作假
  1228. 1:05:54那可能會更嚴重
  1229. 1:05:57而且今天你
  1230. 1:05:59要去抓抄襲就非常的困難
  1231. 1:06:02AI 可以幫你把一篇文章完全改寫
  1232. 1:06:07所有的核心內容本質沒差可是文字上面完全認不出來
  1233. 1:06:13可是今天我們認不出來
  1234. 1:06:18不表示未來有沒有工具可以認得出來
  1235. 1:06:22所以這個風險還是不要去冒
  1236. 1:06:26再來我們看這個圖像
  1237. 1:06:28這個是一篇發表的文章
  1238. 1:06:32然後這是兩個示意圖
  1239. 1:06:36這個是老鼠的睪丸
  1240. 1:06:40它要去講它裡面的這些幹細胞
  1241. 1:06:44然後這是一個訊號傳遞的示意圖
  1242. 1:06:49看起來都好像不錯
  1243. 1:06:51可是你只要把它放大以後
  1244. 1:06:54就發現這個圖裡面的這些文字
  1245. 1:06:58都是亂的
  1246. 1:06:59都不是正常的英文字
  1247. 1:07:03所以 ai 做出來的東西常常都是這樣
  1248. 1:07:07遠看好像很好
  1249. 1:07:08近看就發現問題很多
  1250. 1:07:11所以目前所有的期刊都說
  1251. 1:07:15不可以用 ai 產生的圖像
  1252. 1:07:20那這篇文章就被 retract
  1253. 1:07:24再來我們看這個虛假的文獻
  1254. 1:07:28這個是去年底香港大學一個教授副院長
  1255. 1:07:34那他的文章裡面就發現有幾篇文獻是假的
  1256. 1:07:40所以他就辭去了副院長的職務
  1257. 1:07:45然後今年前一陣子
  1258. 1:07:49有個政大博士生的博士論文
  1259. 1:07:52他用 ai 幫忙然後也有文獻發現是造假的
  1260. 1:07:58而且好死不死呢
  1261. 1:08:00其中有假的文獻是有真的作者
  1262. 1:08:04那個作者教授就跳出來說
  1263. 1:08:07我從來沒有寫過這篇文章
  1264. 1:08:10所以這個就鬧上新聞
  1265. 1:08:11然後現在的處理是這邊學術論文就下架
  1266. 1:08:17然後學校在調查當中
  1267. 1:08:20那我就問 ai 說這種狀況應該很多
  1268. 1:08:25那有多少 case 是用學術倫理來處理
  1269. 1:08:30結果幾個 ai 都說現在還沒有找到具體的案例是
  1270. 1:08:36因為虛假文獻所以當作違反學術倫理
  1271. 1:08:43好我們先說怎麼樣子避免這種東西
  1272. 1:08:46避免虛假文獻
  1273. 1:08:48我可以要求
  1274. 1:08:49所有 ai 提供的文獻都要提供資訊來源
  1275. 1:08:54連結和 doi
  1276. 1:08:55這時候我點進去就可以檢驗
  1277. 1:08:58然後我可以請同一個 ai 或者另外一個 ai 做檢驗
  1278. 1:09:03檢驗的這個指令是這樣
  1279. 1:09:05請核實本論文所列參考文獻之真實性
  1280. 1:09:10就是說這篇文章是不是真實存在
  1281. 1:09:14並檢驗文獻內容是否與本文之引用語境相符
  1282. 1:09:20他可能給你一篇文章是真的有可是跟你要講的事情毫不相關
  1283. 1:09:25所以你要求他去檢驗這個
  1284. 1:09:27那我就發現
  1285. 1:09:29我剛才最前面 show 的那例子那一串文獻我丟給他都可以抓出來
  1286. 1:09:36同一個 ai 也抓出來另外一個 ai 也抓出來
  1287. 1:09:39所以我覺得這是一個很簡單很好的工具
  1288. 1:09:44可是即使這樣
  1289. 1:09:46我還是不會完全放心
  1290. 1:09:49所以我還是要每一篇自己去檢驗看看
  1291. 1:09:53那我也可以在一開始我就提供他一個真實的文獻庫
  1292. 1:09:58就像那個 notebook LM 一樣
  1293. 1:10:01或者我在提示的時候呢我就要求他
  1294. 1:10:06每篇文獻必須包含標題作者年份
  1295. 1:10:10及有效的 doi 連結
  1296. 1:10:14然後要告訴他說如果你找不到
  1297. 1:10:16就直接回答找不到
  1298. 1:10:18嚴禁自行編造
  1299. 1:10:21因為很有趣的
  1300. 1:10:22AI 就很喜歡編造
  1301. 1:10:26它不承認它找不到或它不知道
  1302. 1:10:29它一定要給你一個答案
  1303. 1:10:31所以你一定要很明確的告訴它嚴禁自行編造
  1304. 1:10:36也可以要求它優先引用
  1305. 1:10:38來自這些可靠的文獻庫的文獻
  1306. 1:10:43那避免虛假圖像
  1307. 1:10:45你要放大以後仔細檢驗
  1308. 1:10:48修改
  1309. 1:10:49要非常仔細的檢驗
  1310. 1:10:51因為所有東西都可能有問題
  1311. 1:10:55那我覺得在目前工具還沒有可靠的時候
  1312. 1:11:00就不要用了
  1313. 1:11:03那假如你用了
  1314. 1:11:05那在投稿的時候一定要註明清楚
  1315. 1:11:08就是說這個圖
  1316. 1:11:09我是用生成式 AI 產生的
  1317. 1:11:11可是我已經檢驗修改了
  1318. 1:11:13我確保它沒問題
  1319. 1:11:15告訴 editor 這個樣子
  1320. 1:11:17那看 editor 要不要接受
  1321. 1:11:21那碰到這樣的虛假內容呢
  1322. 1:11:24要怎麼處理
  1323. 1:11:26我覺得假如它牽涉到數據
  1324. 1:11:29那它影響的是研究結論
  1325. 1:11:31那這個是造假
  1326. 1:11:33這個是嚴重的學術倫理的問題
  1327. 1:11:38假如牽涉到文獻或者示意圖
  1328. 1:11:42本質上這個都是它造出來的
  1329. 1:11:45所以是造假
  1330. 1:11:47那可是我覺得有輕重不同
  1331. 1:11:51假如這個文獻是涉及核心論述的基礎
  1332. 1:11:58譬如說
  1333. 1:11:59我這一篇文章是 based on 某一篇
  1334. 1:12:02重要的 paper
  1335. 1:12:04可是這篇重要 paper 其實是假的
  1336. 1:12:06那我的整篇文章其實就是奠基於一個空的基礎上
  1337. 1:12:11那這個就不行
  1338. 1:12:13所以假如說這個虛假文獻是涉及核心論述基礎呢
  1339. 1:12:18那這個時候它是嚴重的學術倫理問題
  1340. 1:12:22即使你是沒有蓄意
  1341. 1:12:26可是很多時候它可能涉及的是
  1342. 1:12:29不是在這個核心論述基礎上
  1343. 1:12:31譬如說
  1344. 1:12:33我有一個論述
  1345. 1:12:35然後我引註了 10 篇文獻
  1346. 1:12:39來 support 我的這個論述
  1347. 1:12:4210 篇裡面有兩篇是 AI 給的假的
  1348. 1:12:46我把這兩篇拿掉
  1349. 1:12:48我的這個論述還是可以的
  1350. 1:12:52所以這兩篇其實沒有影響
  1351. 1:12:55就是 overcite
  1352. 1:12:57那這種時候呢
  1353. 1:12:59我覺得啊
  1354. 1:13:00就不要把它當成學術倫理的問題
  1355. 1:13:04那我是建議就行政處理
  1356. 1:13:06意思就是說
  1357. 1:13:07你就要求它修改或者退稿
  1358. 1:13:11或者已經發表的就撤稿
  1359. 1:13:13那我們前面看到那個示意圖錯了
  1360. 1:13:17它是撤稿
  1361. 1:13:19然後我們有看到說學校那一端會不會用學術倫理處理
  1362. 1:13:24目前的這個公開資訊裡面看不到這個
  1363. 1:13:28那我覺得這個類比啊
  1364. 1:13:30就好像我買了一個儀器
  1365. 1:13:32還沒有校正
  1366. 1:13:33我就拿來做實驗
  1367. 1:13:35然後實驗出來這個數據呢就可能有錯
  1368. 1:13:39那我反正就把它發表了
  1369. 1:13:41然後之後發現有錯
  1370. 1:13:43這個時候我不是蓄意造假
  1371. 1:13:46可是還是有影響還是不對
  1372. 1:13:50那可是這個就有輕重的關係
  1373. 1:13:54再來一個 point 就是大家都關心能不能夠區別
  1374. 1:13:58AI 的作品
  1375. 1:14:02好像所有的論述都是這個多少是 AI 產生的
  1376. 1:14:06那其實我用 AI 我發現每一個 AI 都有它的風格
  1377. 1:14:11我可以感覺得出來這一段是 Gemini 寫的
  1378. 1:14:16那一段是 ChatGPT 寫的
  1379. 1:14:19可是我沒有辦法 100%
  1380. 1:14:23現在有很多的工具想要來分辨
  1381. 1:14:27沒有一個是可靠的
  1382. 1:14:30它可以告訴你這看起來像
  1383. 1:14:32可是看起來像呢
  1384. 1:14:34在法律處理上就不行
  1385. 1:14:37你不能用來做這個法律的基礎
  1386. 1:14:42那 Gemini 說這個 OpenAI
  1387. 1:14:45有一個軟體叫 classifier 也都下架了
  1388. 1:14:48所以他說連製造矛的人都造不出盾
  1389. 1:14:52那我覺得呢
  1390. 1:14:54這永遠是一個軍備競賽
  1391. 1:14:57AI 永遠要像人
  1392. 1:15:00然後其他的分辨軟體就永遠要想辦法追著它走
  1393. 1:15:04永遠跟在後面永遠抓不到
  1394. 1:15:08所以我不預期未來可以真正可靠地分辨這件事情
  1395. 1:15:15那反過來說
  1396. 1:15:16我覺得這個問題根本就不重要
  1397. 1:15:19就是誰寫的根本不重要
  1398. 1:15:24那等一下要講到這個
  1399. 1:15:26重要的是說內容作者要負責
  1400. 1:15:32我們看到這有被抓到的幾個例子就是用 AI 寫的
  1401. 1:15:37譬如說這一篇文章這是已經發表的
  1402. 1:15:40它裡面就有這個 regenerate response
  1403. 1:15:42它這裡 as an AI language model
  1404. 1:15:45這很明顯就是整個給它抄下來就貼出去完全沒有做過處理
  1405. 1:15:52那這個文章呢就 retract
  1406. 1:15:58那所以我們很難分辨是不是 AI 的
  1407. 1:16:02然後我們目前被要求要揭露
  1408. 1:16:06那假如你用了 AI
  1409. 1:16:07可是你沒有揭露
  1410. 1:16:10那這個有什麼問題
  1411. 1:16:13我覺得假如說你的論文沒有騙沒有偷
  1412. 1:16:17那沒有揭露這件事情違反的是
  1413. 1:16:21你跟期刊或者國科會的約定
  1414. 1:16:25就是他說你用了要講
  1415. 1:16:28那你沒講
  1416. 1:16:31那我們很多東西都沒講
  1417. 1:16:34我實驗的條件都應該要交代清楚
  1418. 1:16:38可是常常我們會漏掉很多東西沒有交代清楚
  1419. 1:16:42那碰到這種會怎麼辦呢
  1420. 1:16:44reviewer 說你這裡沒交代清楚講清楚
  1421. 1:16:47你就 revise
  1422. 1:16:49那實在
  1423. 1:16:50你都沒講清楚
  1424. 1:16:51reviewer 覺得很爛就 reject
  1425. 1:16:55所以我認為
  1426. 1:16:57這樣的事情沒有揭露就行政處分
  1427. 1:17:02然後我覺得這個要求揭露是個過渡期的反應
  1428. 1:17:07那我們過去有一些工具一開始出來的時候
  1429. 1:17:11像這個 PCR 或者 BLAST
  1430. 1:17:14我們都要把那個實驗條件講得非常清楚
  1431. 1:17:17寫得很長
  1432. 1:17:19那今天已經完全不用
  1433. 1:17:22你就說我 PCR 了
  1434. 1:17:25我 BLAST 了
  1435. 1:17:27它就變成一個動詞
  1436. 1:17:29那大家都相信你知道怎麼做 follow 基本的做法
  1437. 1:17:34所以現在都已經默認
  1438. 1:17:37所以 Gemini 說
  1439. 1:17:38這個要求揭露是一個典型的安撫性的儀式
  1440. 1:17:44就是有一個新東西出來我們不知道要怎麼辦
  1441. 1:17:47那可是我們要告訴大家
  1442. 1:17:49尤其是政府一定要告訴大家 we are doing something
  1443. 1:17:54所以我們就設定一些做法
  1444. 1:17:56要求你一定要怎麼樣
  1445. 1:17:58可是這個做法其實是無效的
  1446. 1:18:02那我覺得未來當所有人都在用的時候
  1447. 1:18:06就沒有這個問題了
  1448. 1:18:09那我覺得要求揭露造成困境
  1449. 1:18:13道德上面的困境
  1450. 1:18:15對於使用者來講
  1451. 1:18:17我要不要揭露
  1452. 1:18:19我揭露了以後是不是 reviewer 會認為我偷懶
  1453. 1:18:24那這樣是不是對我不利
  1454. 1:18:27所以我相信很多人有用
  1455. 1:18:28可是只敢說我用它來改文法
  1456. 1:18:33那 reviewer 呢
  1457. 1:18:35現在所有的規範都說不可以用來審查
  1458. 1:18:38對不對
  1459. 1:18:39好那我假如今天看到有一篇文章
  1460. 1:18:42看起來就像是用 AI 寫的
  1461. 1:18:45那我要怎麼辦
  1462. 1:18:47我要追究嗎
  1463. 1:18:48我要告訴國科會
  1464. 1:18:50這個你要當作一個案件來審查嗎
  1465. 1:18:54那我要不要自己用 AI 來幫忙審稿
  1466. 1:18:58我有那麼多的文章要審
  1467. 1:19:01那我的 loading 很重
  1468. 1:19:04大家都說不可以
  1469. 1:19:05可是去年有一篇文章就去 survey 了很多人
  1470. 1:19:10他就發現
  1471. 1:19:11大概一半以上的 reviewer 呢
  1472. 1:19:14都在用 AI 做 review
  1473. 1:19:18等一下我們還有一個例子
  1474. 1:19:20所以其實很多人在用
  1475. 1:19:22可是沒講
  1476. 1:19:24好那國科會要怎麼辦呢
  1477. 1:19:27我相信國科會知道很多申請人或者審查人有用 AI
  1478. 1:19:34可是沒有揭露
  1479. 1:19:37那國科會要不要追究
  1480. 1:19:40追究起來不得了
  1481. 1:19:44那所以我的建議呢
  1482. 1:19:46就是說揭露的意義其實不大
  1483. 1:19:49而且沒有辦法求證
  1484. 1:19:52那造成大家的困擾
  1485. 1:19:54建議無需深究
  1486. 1:19:57這無需深究意思就是說
  1487. 1:19:59你的規範放在那裡
  1488. 1:20:01可是人家沒有遵守呢
  1489. 1:20:02你也不要真的去怎麼樣子處理
  1490. 1:20:06要處理就是行政處理
  1491. 1:20:08你就說
  1492. 1:20:09補齊修正就好
  1493. 1:20:12那有人問我一個問題
  1494. 1:20:17說我是一名研究員我碰到研究上的問題請 AI 幫我想辦法
  1495. 1:20:23然後我再去讀懂
  1496. 1:20:25判斷
  1497. 1:20:26然後最後用了
  1498. 1:20:28這樣子算不算是我想出來的東西
  1499. 1:20:32那我就找類比
  1500. 1:20:36我
  1501. 1:20:37把生成式 AI 換成別的
  1502. 1:20:40我自己去查文獻
  1503. 1:20:43文獻是過去人家的東西
  1504. 1:20:46這也是別人的
  1505. 1:20:47我可以問老師我可以跟同事同學討論
  1506. 1:20:51那討論了人家給我的建議
  1507. 1:20:55那我就去想辦法了解然後判斷然後用
  1508. 1:20:59對不對
  1509. 1:21:01所以我可以把這個生成式 AI 給它替代
  1510. 1:21:05就是我們熟知的現在的狀況
  1511. 1:21:08所以沒有問題
  1512. 1:21:10AI 提供一些建議提供幫忙最終的判斷還是你自己
  1513. 1:21:15所以你自己的貢獻是問題的形成篩選判斷後續的執行
  1514. 1:21:21所以這個是你的東西
  1515. 1:21:27原創性
  1516. 1:21:29我研究的 idea 來自別人
  1517. 1:21:31所以這樣的成果算我的嗎
  1518. 1:21:37這跟 AI 類似
  1519. 1:21:38幾乎所有的研究進展都奠基於前人的研究
  1520. 1:21:42我們讀文獻聽演講獲得啟發靈感
  1521. 1:21:46這個時候
  1522. 1:21:47你很可能有 citation 給人家 credit
  1523. 1:21:52也有可能你聽演講聽到的之後你已經忘掉到底是誰講的
  1524. 1:21:58你也不會再去 cite 那個人
  1525. 1:22:01就過了
  1526. 1:22:02那假如是合作者你身邊的這些學生博後 AI
  1527. 1:22:07那你就
  1528. 1:22:09它就是 co-author 大家貢獻很重要
  1529. 1:22:15牛頓說如果我看得比別人遠是因為我站在巨人的肩膀上
  1530. 1:22:21那 Gemini 說
  1531. 1:22:22只要你誠實標註了肩膀
  1532. 1:22:25剩下那部分你自己跑完的最後一哩路
  1533. 1:22:28無論多短都是你的原創
  1534. 1:22:33那 Claude 說
  1535. 1:22:35這個是知識的功勞
  1536. 1:22:36我站在哪些人的肩膀上
  1537. 1:22:39我要誠實引用
  1538. 1:22:40這個包含 AI
  1539. 1:22:43然後我的研究加入了什麼這個是在知識的進展上面
  1540. 1:22:48所以我覺得
  1541. 1:22:49我今天講這個對實驗科學來講是很適用
  1542. 1:22:53因為我們一定有一些東西是 AI 做不到的
  1543. 1:22:58然後我們做了
  1544. 1:22:59那我們有知識上面的進展
  1545. 1:23:00那你要是文學創作
  1546. 1:23:03或者現在作曲
  1547. 1:23:05這些我覺得就比較難了
  1548. 1:23:13那我剛才講說這個誰寫的不重要
  1549. 1:23:17我覺得從幾個點來看
  1550. 1:23:19一個是政府資助研究
  1551. 1:23:23要的是結果
  1552. 1:23:25它要的不是某教授做出來的
  1553. 1:23:28這個結果不管是 a 還是 b 還是 c 做出來都可以
  1554. 1:23:33你們都可以提計劃我來挑
  1555. 1:23:36那所以我們審計劃呢我們要看的
  1556. 1:23:39理論上不該是那個人
  1557. 1:23:41而是看計劃的可行性和執行力
  1558. 1:23:46那過去我們看人是因為這個人關係到可行性和執行力
  1559. 1:23:52那有的人可能他就沒有這些儀器沒有這些資源
  1560. 1:23:56做不到他要做的事
  1561. 1:23:59可是今天 AI 也可以幫你做這些事
  1562. 1:24:04那另外一個點是
  1563. 1:24:07今天所有的研究都是高度分工合作
  1564. 1:24:11所以在一個研究當中
  1565. 1:24:13有很多部分會來自於不同的人
  1566. 1:24:17包括創意執行修正撰寫
  1567. 1:24:20然後可能有各種各樣的合作的夥伴
  1568. 1:24:23那今天就包括了 AI
  1569. 1:24:27所以不是 PI 提供了所有的事情
  1570. 1:24:31那 PI 只是整合主導
  1571. 1:24:36所以我跟 AI 討論了很久
  1572. 1:24:38Gemini 終於接受說
  1573. 1:24:41學術界必須放棄對來源的執著
  1574. 1:24:44接受創意和內容可能來自多元化的輸入
  1575. 1:24:49包括 AI
  1576. 1:24:53那前面有講到 AI 不能夠用來做審查
  1577. 1:24:58可是今天呢
  1578. 1:25:00因為寫計劃或者寫 paper 的成本很低
  1579. 1:25:05所以我隨便就可以寫
  1580. 1:25:08那所以審查的負擔很重
  1581. 1:25:13那當然一個做法是我可以限制每個人可以投計劃的數目
  1582. 1:25:19那美國 NIH 說每個人每年可以投 6 篇
  1583. 1:25:246 篇還蠻多的台灣大概大家能夠寫個一兩篇就不錯了
  1584. 1:25:30那另外一個就是計劃的品質趨中
  1585. 1:25:35那我覺得作為一個審查人
  1586. 1:25:37我現在看到計劃我覺得一則以喜一則以憂
  1587. 1:25:42因為過去呢
  1588. 1:25:43很多計劃是看不懂的
  1589. 1:25:46寫的真的是亂七八糟
  1590. 1:25:48條理不清
  1591. 1:25:50我要花很大的力氣才能夠了解他到底想講什麼
  1592. 1:25:55那今天呢沒有這個問題
  1593. 1:25:58今天所有的這些計劃假如用 AI 幫忙
  1594. 1:26:02就是條理清楚架構清楚
  1595. 1:26:04我都看得懂
  1596. 1:26:06所以容易審
  1597. 1:26:08可是反過來說呢
  1598. 1:26:09今天所有的計劃呢
  1599. 1:26:11都達到一定的水準
  1600. 1:26:13過去我可以很容易的說
  1601. 1:26:15這個英文就很爛
  1602. 1:26:17然後他的講不清楚
  1603. 1:26:19那表示他沒有想清楚
  1604. 1:26:22所以這種計劃就可以很容易淘汰
  1605. 1:26:25今天沒有這種計劃
  1606. 1:26:27每一個都很好
  1607. 1:26:29所以 reviewer 的工作就更困難
  1608. 1:26:32因為你要去分辨哪些計劃是好的
  1609. 1:26:36比別人好
  1610. 1:26:39另外一個是呢
  1611. 1:26:41作為 reviewer
  1612. 1:26:42我擔心他的 reference
  1613. 1:26:44都不可靠
  1614. 1:26:47所以我每一篇假如我都要去檢驗
  1615. 1:26:51那真的會把我累死
  1616. 1:26:53所以 reviewer 真的負擔會很重很重
  1617. 1:26:58所以那我們就還是要找 AI 來幫忙
  1618. 1:27:02那現在確實有一些期刊開始做這種審查
  1619. 1:27:07就是他做一個 AI 是 internal within-firewall
  1620. 1:27:13所以這個時候他讓 reviewer 使用這個 AI
  1621. 1:27:18這個資訊就不會外洩
  1622. 1:27:21就保持了原來的這個 confidential agreement
  1623. 1:27:25這樣就沒有問題
  1624. 1:27:26那我相信這個會越來越普及
  1625. 1:27:32那最近我就看到這個期刊 frontiers journals
  1626. 1:27:36他們就用了這個 AI review assistant
  1627. 1:27:39那它用來減輕
  1628. 1:27:41審查人的行政與查核負擔
  1629. 1:27:44它可以幫你檢查這個文字有沒有抄襲
  1630. 1:27:48圖片有沒有 copy
  1631. 1:27:50然後利益衝突
  1632. 1:27:53就審查人跟作者之間有沒有這個潛在的利益衝突的關係
  1633. 1:27:59那他的 IRB 有沒有得到的批准什麼這些
  1634. 1:28:02各種各樣的這些基礎要求
  1635. 1:28:05可以幫你做這些
  1636. 1:28:07文獻是不是真的
  1637. 1:28:10那我覺得這個省掉 reviewer 很多的負擔
  1638. 1:28:13所以這是一個很好的事情
  1639. 1:28:16那他也強調說是他不做接受或者拒絕的決定
  1640. 1:28:22就是說最終的決定
  1641. 1:28:24他不真正去 review 這個文章的好壞
  1642. 1:28:28這個留給 reviewer 人去做決定
  1643. 1:28:32可是我會想像
  1644. 1:28:34人一定會偷懶
  1645. 1:28:36假如我是一個 reviewer
  1646. 1:28:37你給我這個 AI 幫忙
  1647. 1:28:39那我多少去問一下
  1648. 1:28:41那你覺得這篇文章好壞
  1649. 1:28:43跟你所有看到其他的文章的比較
  1650. 1:28:48那最終我們就還是會把很大一部分責任丟給 AI
  1651. 1:28:54那這個未來會怎麼樣子發展
  1652. 1:28:56是不是會重更改變我們今天的學術發表的這個制度
  1653. 1:29:05我覺得這個都等著看會怎麼發展
  1654. 1:29:09那有一個最新的例子
  1655. 1:29:11就是這個
  1656. 1:29:13International Conference on Machine Learning
  1657. 1:29:17這個是 AI 的一個大型國際會議
  1658. 1:29:21他們就做了一件事情
  1659. 1:29:23他問 reviewer 說
  1660. 1:29:26你在 review 的時候你要不要用 AI
  1661. 1:29:28你可以選擇要或者不要
  1662. 1:29:31然後他把這個文章丟給 reviewer 去審的時候
  1663. 1:29:35他在裡面做了一個
  1664. 1:29:37這個叫做 prompt injection
  1665. 1:29:42就他放了幾個特別的字
  1666. 1:29:46然後這個字呢假如說 AI 看了這個文章以後
  1667. 1:29:50就會出現在他的這個 report 裡面
  1668. 1:29:54結果他就抓到
  1669. 1:29:57有 506 個 reviewer
  1670. 1:30:00那做了 700 多個 review
  1671. 1:30:03大概是所有 reviewer 的 1%
  1672. 1:30:05那說我不會用 AI 幫忙審查
  1673. 1:30:09可是用了 AI 幫忙審查
  1674. 1:30:14那這個等於是一個釣魚啊
  1675. 1:30:17他用了這個去釣出來這些人
  1676. 1:30:19那他就把這些這些 reviewer 自己的 paper 通通 reject
  1677. 1:30:26就有差不多 500 篇 paper 就直接 reject
  1678. 1:30:31那這個做法
  1679. 1:30:33一個是顯示說
  1680. 1:30:34用 AI 做 review 其實是很常見
  1681. 1:30:39而這個趨勢很難擋
  1682. 1:30:40另外一個做法呢
  1683. 1:30:43被很多人批評
  1684. 1:30:44就是你把這個 reviewer 的 paper reject
  1685. 1:30:49害到了他的 co-author
  1686. 1:30:53所以你是害了額外的可能 innocent 的人
  1687. 1:30:58所以認為說這是一個 unethical 的 entrapment
  1688. 1:31:02就釣魚
  1689. 1:31:04另外還有一個評論就是說這個做法只能用一次
  1690. 1:31:08很快大家就學乖了下一次就不會這樣子
  1691. 1:31:11大家就知道怎麼去躲開這個
  1692. 1:31:14不過這個至少讓我們看到
  1693. 1:31:16我覺得用 AI 來幫忙 review 很可能是一個趨勢
  1694. 1:31:21必然會發生
  1695. 1:31:23所以我的 summary 我想最主要幾點是
  1696. 1:31:28研究是一個多元分工合作 AI 是其中一員
  1697. 1:31:33審查計畫或者論文
  1698. 1:31:34重點在創新可執行成功機會
  1699. 1:31:37誰寫的不重要
  1700. 1:31:40揭露無效而且造成困擾
  1701. 1:31:43那用 AI 審查現在不可以
  1702. 1:31:46未來可能會放寬
  1703. 1:31:48當然是在有限度的條件之下放寬
  1704. 1:31:53那這是 acknowledgement
  1705. 1:31:56有一些人提供一些意見
  1706. 1:31:59然後我用了很多的 AI
  1707. 1:32:03最後我用這個做結論結語
  1708. 1:32:09While intelligence is becoming artificial
  1709. 1:32:12stupidity will always remain original.
  1710. 1:32:17我覺得這滿有趣的不過這個來源是哪裡我也不知道
  1711. 1:32:21有一天看到了
  1712. 1:32:23好那我就今天講到這邊
  1713. 1:32:26大家事前提的這些 Q&A 我希望
  1714. 1:32:29大部分都已經能夠解決了
  1715. 1:32:31假如還沒有解決的話
  1716. 1:32:32歡迎可以提出來
  1717. 1:32:34請問在場有沒有什麼要詢問的
  1718. 1:32:38在線上還有 1000 人
  1719. 1:32:39那有問題嗎
  1720. 1:32:41我今天在等大家想問題的時候我先補充一下
  1721. 1:32:44如果你是自然科學或者說就是實驗科學的話
  1722. 1:32:48我們都知道現在有一個系統叫 credit
  1723. 1:32:51credit
  1724. 1:32:52edi 三個字是小寫其他都是大寫
  1725. 1:32:55這一個系統它又分了作者的 14 種
  1726. 1:32:58樣態譬如說你是 formal analysis
  1727. 1:33:01或者 writing
  1728. 1:33:02就是初步的 writing 還是 revise 等等等等
  1729. 1:33:05它就把作者的 14 個角色都分出來
  1730. 1:33:09那現在很多期刊是要求你根據這個 credit 這個模式
  1731. 1:33:14去註明誰做了什麼事情
  1732. 1:33:16然後你就會看到有人說什麼連 funding 的這個 obtained
  1733. 1:33:21這樣子都可以寫
  1734. 1:33:22然後還有 lab management
  1735. 1:33:23還有 supervision
  1736. 1:33:25還有什麼 idea 什麼什麼的
  1737. 1:33:27你就看下面有很多人的縮寫
  1738. 1:33:29這樣表示把那些所有作者不管多少人
  1739. 1:33:31就要根據這個 credit 14 種分類去分
  1740. 1:33:34那現在世界上有很多很多的研究大的機構像您剛剛提到的 cope
  1741. 1:33:39還有像 STM 等等都是在提倡學術倫理的這些他們正在做一個辦法
  1742. 1:33:45就是把這個 14 種的角色呢
  1743. 1:33:49讓 AI 做出一個辦法讓 AI 也可以加入
  1744. 1:33:53也就是說 AI 在這 14 種角色上面
  1745. 1:33:56contributor 的角度上面的話它做了些什麼事情
  1746. 1:34:00將來我們要揭露的時候
  1747. 1:34:02它就有兩套系統包含說每一個人類作者
  1748. 1:34:06它做了什麼事
  1749. 1:34:07然後還有 AI 它做了些什麼事情
  1750. 1:34:10所以我們就拭目以待這樣子
  1751. 1:34:12我只希望現在我們常常講這個
  1752. 1:34:15作者貢獻會要有一個表說每個人的百分比
  1753. 1:34:20我其實覺得這個百分比很
  1754. 1:34:22只有台灣的那個升等的代表作
  1755. 1:34:25這個真的很難
  1756. 1:34:26那我希望將來不要把 AI 放上去問 AI 貢獻的百分比
  1757. 1:34:31因為很多這些貢獻真的很難去說
  1758. 1:34:33AI 在學術研究有哪些做不到的
  1759. 1:34:39這個有點大哉問
  1760. 1:34:42它做到哪裡其實我覺得要看人的這個探索
  1761. 1:34:47那目前很多人都認為 AI 的創新很有限
  1762. 1:34:53那
  1763. 1:34:54可是
  1764. 1:34:56我覺得 AI 在某些程度上面它還是可以做到創新
  1765. 1:35:01因為很多的創新過去其實就是把不同領域連接起來
  1766. 1:35:06那 AI 現在可以幫你做這些事情
  1767. 1:35:08你只要要求它做這個
  1768. 1:35:10所以它就可以做
  1769. 1:35:13所以
  1770. 1:35:15你看我們諾貝爾獎已經頒給了 AI 的工具
  1771. 1:35:20當然頒給的得獎的是那個人
  1772. 1:35:22可是那個工具它可以做很多的事情是我們過去做不到
  1773. 1:35:27所以我覺得怎麼去講它能做到哪些
  1774. 1:35:31我覺得看人怎麼用它
  1775. 1:35:33應該會越來越多
  1776. 1:35:37或者把這題改一下就是
  1777. 1:35:39現在從學術倫理的角度
  1778. 1:35:41現在我們不允許 AI 在學術研究中做些什麼事情
  1779. 1:35:45絕對不允許用它來產生 data
  1780. 1:35:49我覺得這個數據
  1781. 1:35:50不能夠是憑空造出來的
  1782. 1:35:53當然有些狀況之下我們可能用
  1783. 1:35:56我知道統計上面這些你會 random 產生一些數據
  1784. 1:36:01然後用來做 training 什麼這種
  1785. 1:36:04這種是特殊用途然後講清楚
  1786. 1:36:06我覺得是可以的
  1787. 1:36:09那就是你怎麼用它一定要講清楚
  1788. 1:36:12然後經過 reviewer 可以接受
  1789. 1:36:15然後讀者都 aware
  1790. 1:36:18我覺得這樣就可以
  1791. 1:36:19目前我想最關鍵的是這個
  1792. 1:36:22那 AI 做的東西有錯
  1793. 1:36:26那個就是我們要避免的
  1794. 1:36:29也就是說它不可能取代了所有的 bench work
  1795. 1:36:33或者是實證的資料包含像人文社會領域也會去收問卷
  1796. 1:36:38或者說去訪談
  1797. 1:36:41去做實地的觀察這個都不能
  1798. 1:36:44所以實證資料是一個很好的
  1799. 1:36:47就是一定要實證資料這個是 AI 沒有辦法提供的
  1800. 1:36:52但是實證資料回來以後譬如說訪談了 15 個人
  1801. 1:36:55我可以把我的訪談稿全部都輸給他
  1802. 1:36:59叫他來幫忙分析一下這個可能還可以嗎
  1803. 1:37:02這可以可是你要確認說他最後分析的真的是沒有脫離那些訪談稿了
  1804. 1:37:10孫教授你好
  1805. 1:37:13演講非常精彩
  1806. 1:37:14我想請教一個問題就是說
  1807. 1:37:16你在使用這
  1808. 1:37:18你購買這三個 AI 工具的過程當中
  1809. 1:37:21會不會發現到說其實它引用的文獻是
  1810. 1:37:25大部分都來自於網頁或是 open access 的文章
  1811. 1:37:29所以學生或是我們在寫計劃書的時候其實有一些比較核心的
  1812. 1:37:34因為他沒有跟出版社這邊有簽版權的問題他沒有
  1813. 1:37:38訓練的資料沒有跟出版社有很好的那種合作的關係
  1814. 1:37:43當然現在 Wiley 有跟 Perplexity 他們合作
  1815. 1:37:46所以你在使用的過程當中它出來的這一些參考文獻
  1816. 1:37:51都是來自於網頁或是 open access 的文章
  1817. 1:37:55會不會導致的你在它給的答案的時候
  1818. 1:38:00其實它參考文獻都是一些學術上所謂
  1819. 1:38:06所品質比較不是那麼嚴謹的這些文章
  1820. 1:38:11會不會有這種現象
  1821. 1:38:12然後導致了學生或是老師在大量使用 AI 之後
  1822. 1:38:19就慢慢轉偏向了某一個方向
  1823. 1:38:22往某一個方向走
  1824. 1:38:24好謝謝
  1825. 1:38:25這個很重要的一個問題
  1826. 1:38:27就是確實他們能夠看到的資料都是公開的
  1827. 1:38:36那所以那些沒有公開的他看不到
  1828. 1:38:40在有些狀況他是可以
  1829. 1:38:42就是假如有一篇文章被別人的文章裡面 cite
  1830. 1:38:46所以參考文獻有
  1831. 1:38:48然後有討論
  1832. 1:38:50所以他會知道這些文章
  1833. 1:38:52那假如一篇文章沒有出現在公開的資料庫裡面
  1834. 1:38:58那他就找不到
  1835. 1:39:00所以他給出來的答案在這個 sense 上面就會有一點 bias
  1836. 1:39:06那這個會造成什麼樣的後果現在不知道
  1837. 1:39:11那比較會擔心說
  1838. 1:39:13爛的文章會越來越多
  1839. 1:39:16那假如他是用大數據然後統計的話
  1840. 1:39:19那爛文章將來會 dominate
  1841. 1:39:23所以他的訓練當中還應該要把這個文章的 quality
  1842. 1:39:29什麼也能夠加進去有不同的 weighting
  1843. 1:39:33那我不知道現在他們有沒有做到這樣
  1844. 1:39:36AI 現在的麻煩就是它還是一個黑盒子
  1845. 1:39:40我們不知道他到底讀了什麼
  1846. 1:39:42我們知道他讀了所有網路上的東西包含 wiki 包含了多少本書
  1847. 1:39:47他有幾千萬本書
  1848. 1:39:49然後他可能讀了一些 open access 的期刊跟論文
  1849. 1:39:53可是那些所在 paywall 後面的就是要買的資料庫後面的那些東西
  1850. 1:39:59我們剛剛講只有 Wiley 跟他簽了一個很
  1851. 1:40:03譬如說跟某一家簽了一個很大的合同把 Wiley 所有的期刊的資料
  1852. 1:40:08就賣給了那個生成式 AI 的系統
  1853. 1:40:10可是其他的系統其實我們不知道譬如說最大的系統
  1854. 1:40:14最大的知識庫在 Elsevier 裡面
  1855. 1:40:16他不知道現在很多是鎖在資料庫裡面
  1856. 1:40:19不知道那個有沒有進入 training 的 data
  1857. 1:40:22所以您剛剛講的是說擔心現在
  1858. 1:40:25就是因為如果你都是靠 AI 的話
  1859. 1:40:27AI 就是靠那些 mediocre
  1860. 1:40:29或者那些所謂的 open 的去回答你
  1861. 1:40:33其實它可能真正的經典的著作
  1862. 1:40:36或者那個領域中的最新的發展或最好的文章
  1863. 1:40:40研究成果其實它是沒有辦法拿到的
  1864. 1:40:43所以造成這樣子
  1865. 1:40:46那我們下面還蠻多問題的
  1866. 1:40:48不過我也想請教一下就是
  1867. 1:40:52孫老師您
  1868. 1:40:53我們以前
  1869. 1:40:54您剛剛講的是說
  1870. 1:40:56如果學生現在我們最大的問題是
  1871. 1:40:58學生寫來的論文
  1872. 1:41:00你不知道它的原創性在哪裡
  1873. 1:41:03還是說它真的只是拼湊的
  1874. 1:41:05或胡說一通
  1875. 1:41:06然後
  1876. 1:41:07這個是我們現在比較大的麻煩
  1877. 1:41:08就是以前學生要寫英文論文寫的爛你就很生氣
  1878. 1:41:12可是現在學生英文寫來每個人都乾乾淨淨漂亮亮你就會開始憂慮
  1879. 1:41:18這樣
  1880. 1:41:19然後呢它後面列了一大堆文獻
  1881. 1:41:22我還要去
  1882. 1:41:23我覺得我以前是要改學生的那個爛文章
  1883. 1:41:27可是現在
  1884. 1:41:28現在我變成一個偵探
  1885. 1:41:29必須用火眼去看這句話到底是誰說的
  1886. 1:41:33這句話為什麼沒有註出處
  1887. 1:41:34然後我還要去看它所有後面的 reference 到底是不是對的
  1888. 1:41:37那萬一是一個我不是那麼熟的領域
  1889. 1:41:41或者說它可能讀的已經超過我了
  1890. 1:41:44我沒有辦法判斷的話
  1891. 1:41:46我覺得難道我要一筆一筆去查嗎
  1892. 1:41:48所以我現在做了一個辦法就是要求我的學生
  1893. 1:41:51你只要你後面有引用到的
  1894. 1:41:55你全部的 doi 的文章要下載
  1895. 1:41:58要打包給我
  1896. 1:42:00我不一定會去看
  1897. 1:42:01但是呢
  1898. 1:42:02就是你要打包給我
  1899. 1:42:04然後你裡面引到的網址全部要列成一張清單
  1900. 1:42:07也就是說我只接受 doi 的論文
  1901. 1:42:12好這個如果不是 doi 的那種就假裝它不存在好了這樣
  1902. 1:42:16可是中文事實上中文很多不是 doi 的
  1903. 1:42:19就是沒有 doi 的這個號
  1904. 1:42:21這個英文大部分都有這樣
  1905. 1:42:24我覺得就是除了 reviewer
  1906. 1:42:26現在的期刊 reviewer 非常辛苦我們這邊有一題
  1907. 1:42:30是跟 reviewer
  1908. 1:42:31reviewer 真的太
  1909. 1:42:34就是這個壓力變得很大
  1910. 1:42:35然後作為 advisor 也是一個某種程度的 reviewer
  1911. 1:42:38也是覺得壓力很大
  1912. 1:42:40然後現在你當某期刊的 reviewer
  1913. 1:42:42他是一天到晚丟 paper 給你幾乎每三天丟一篇給你的原因是
  1914. 1:42:47現在所有的期刊的投稿量都倍數成長
  1915. 1:42:52本來 reviewer 就已經很難找了
  1916. 1:42:54現在更難找不要忘了跟國外的期刊的 reviewer 還是免費的
  1917. 1:42:58就是我們這些是免費做義工因為這是 part of our jobs
  1918. 1:43:03就 part of our career
  1919. 1:43:04但是三天就丟一篇然後我有十個期刊
  1920. 1:43:08我就幫過十個期刊審稿
  1921. 1:43:11所以每一天都有一篇丟過來
  1922. 1:43:15然後我有時候同時審了五篇
  1923. 1:43:17就是變得我也壓力很大這樣子
  1924. 1:43:19我要講了半天就是
  1925. 1:43:21現在寫論文沒有那麼困難
  1926. 1:43:25可是你要被 accept
  1927. 1:43:27變得非常非常的困難
  1928. 1:43:31那所有的期刊主編都跟我說
  1929. 1:43:34他們現在最看到就是覺得只要有一點點看起來這個標題
  1930. 1:43:38或者摘要有一點點覺得沒希望
  1931. 1:43:41就立刻先 desk reject
  1932. 1:43:42不然的話他可能要處理每天要處理上百篇他是沒辦法的這樣
  1933. 1:43:47所以剛才有一個點就是文獻 reference
  1934. 1:43:52我覺得我可以把它全部 copy 下來丟給 AI 請 AI 判斷
  1935. 1:43:56因為文獻我覺得不牽涉到洩密
  1936. 1:44:01對不對
  1937. 1:44:02這個都是 published 的東西嘛
  1938. 1:44:04那我從一個文獻我也沒有辦法推
  1939. 1:44:08回推出來說他這篇文章裡面講了什麼
  1940. 1:44:11所以我覺得直接用 AI 來幫我們判斷文獻是 ok 的
  1941. 1:44:16可是其他部分的這些文字就比較麻煩
  1942. 1:44:21那這裡講的說
  1943. 1:44:22發現投稿者有 AI 虛構文獻
  1944. 1:44:25那我覺得看你的心情吧
  1945. 1:44:29你可以 reject 或者要求它改掉
  1946. 1:44:33然後很嚴重
  1947. 1:44:34它好多篇
  1948. 1:44:35那我覺得這個就應該淘汰掉了
  1949. 1:44:39我相信期刊
  1950. 1:44:41我們大概不能用這個虛假文獻去說學生的 paper
  1951. 1:44:46學生寫來的作業一定是怎麼樣
  1952. 1:44:49可是
  1953. 1:44:51就是說那個比較嚴重的就是譬如說跟成績有關的
  1954. 1:44:55可是像期刊它其實不少你這一篇
  1955. 1:44:58它投稿多得很耶
  1956. 1:45:00所以它 reject 這篇其實也還好吧
  1957. 1:45:04我覺得很多人現在是因為你有虛假的文獻
  1958. 1:45:07我自動
  1959. 1:45:08而且你沒有說你沒有說你沒有要宣告 AI 幫你做什麼
  1960. 1:45:12我看到你有 AI 虛假文獻我可以自動的假設
  1961. 1:45:16你裡面的東西也有一部分是虛假的對不對
  1962. 1:45:19那就乾脆 reject 算了反正這期刊投稿非常多
  1963. 1:45:23像我們過去也要看到一個人他的很多的拼字都錯了
  1964. 1:45:27我就覺得他是 sloppy
  1965. 1:45:29那他的整個研究的態度可能就不夠嚴謹
  1966. 1:45:34所以他那個文章或者計劃我就會容易把它 reject
  1967. 1:45:40我覺得跟這種概念是一樣的
  1968. 1:45:42我們要先講的是其實現在很多的軟體
  1969. 1:45:44包括像 Turnitin 或是 iThenticate
  1970. 1:45:47它裡面也有一個功能是 check AI 寫成的機率
  1971. 1:45:52那個才是麻煩因為如果它是相似度比較
  1972. 1:45:56它給你一對一我也可以用嘛
  1973. 1:45:58我一對一比的話我會知道我跟哪些人的文字很相似
  1974. 1:46:02可是那一個數值它不會給你任何參考
  1975. 1:46:05它就是決定就給你那個數字譬如說
  1976. 1:46:08決定它覺得你這篇 32% 的機率是 AI 寫的
  1977. 1:46:12問題是它沒告訴你哪裡
  1978. 1:46:14然後我無從改進
  1979. 1:46:18所以它就 reject 了
  1980. 1:46:19可是這個 32% 或幾趴
  1981. 1:46:21我們學校裡面是不可以用這件事情去當掉學生的
  1982. 1:46:26我覺得我們不要被那些數字綁住
  1983. 1:46:30那種數字都不是一個可靠的依據
  1984. 1:46:35可是我是被錯殺的
  1985. 1:46:41然後回來我的確是用了修改但不是全部
  1986. 1:46:45我要講的是
  1987. 1:46:46後來我們的辦法還是作者
  1988. 1:46:50幾個作者每一個人改過一次以後
  1989. 1:46:52最後還是送了人的 proofreader
  1990. 1:46:54花了七八千塊送了人的 proofreader
  1991. 1:46:57然後 hopefully 它不是用 AI 改的
  1992. 1:47:00然後我們就要增添一點人味
  1993. 1:47:02我已經生氣到覺得我要埋幾個錯筆
  1994. 1:47:05拼錯字在裡面
  1995. 1:47:06自己決定不就是 AI 寫的
  1996. 1:47:09現在有 AI 可以幫你 humanize
  1997. 1:47:11加一些錯字進去
  1998. 1:47:14不過我覺得現在很多的期刊
  1999. 1:47:17一開始都是用一個很嚴的態度
  2000. 1:47:20因為他們還不知道要怎麼辦
  2001. 1:47:23那我覺得這個當大家習慣了
  2002. 1:47:26會慢慢的放鬆
  2003. 1:47:28可是在這個 transition
  2004. 1:47:31我們就只能夠遵守他們的規範
  2005. 1:47:34但不要忘記喔一定要你的創意要勝出
  2006. 1:47:39不然它得到三倍的量它一年要處理三四千篇它根本
  2007. 1:47:44它如果它的 publication 的量沒有多的話
  2008. 1:47:48那就變成選擇就更困難你要登上的
  2009. 1:47:52被接受的這個機率就變小很多了這樣
  2010. 1:47:55原創的角色
  2011. 1:47:58然後 AI 幫你產生動作和場景
  2012. 1:48:02我覺得動作和場景應該也是要你給它某些指令
  2013. 1:48:07然後做選擇嘛
  2014. 1:48:08所以我覺得還是你的作品啊
  2015. 1:48:13另外就是說
  2016. 1:48:13其實沒有所謂的 AI 的作品
  2017. 1:48:16因為 AI 不能夠 claim 它的 ownership
  2018. 1:48:23沒有一個 AI 會跳出來跟你搶這個原創的著作權嘛
  2019. 1:48:28對啊我最近看像霍去病
  2020. 1:48:30或者像什麼白蛇青蛇真的很 impressive
  2021. 1:48:35但是這題我會認為還是可以算某種程度的原創作品這樣
  2022. 1:48:41這位老師說
  2023. 1:48:41請說
  2024. 1:48:42今天感謝那個孫教授這個精彩的演講
  2025. 1:48:47但是我這裡有一些淺見
  2026. 1:48:48就是剛剛這邊有一個教授也在講
  2027. 1:48:51因為那個
  2028. 1:48:52就我所知道
  2029. 1:48:53因為剛剛那個孫教授也有講過
  2030. 1:48:55因為他們現在用 AI 的東西很多
  2031. 1:48:58包括很多的一些文獻
  2032. 1:49:00也不見得說它一定是很 low 的那種期刊
  2033. 1:49:04很好的期刊它一樣也會上傳上去
  2034. 1:49:07那上傳上去的話它就會進入到他們的 LM 模型裡面
  2035. 1:49:11所以你在審查的時候他們有時候還是會
  2036. 1:49:15有一些很好的期刊也是會出現在裡面
  2037. 1:49:19只是說
  2038. 1:49:20就是說在整個 AI 的使用來講的話它的參考文獻
  2039. 1:49:24其實還是會有一個就是會有一些錯亂
  2040. 1:49:27甚至有些可能是一些虛假的
  2041. 1:49:30也就是說它可能是 A 作者
  2042. 1:49:31可是 B 期刊
  2043. 1:49:32但是它可能是 C 的內容
  2044. 1:49:36所以在我這個審查的一個過程當中的話
  2045. 1:49:40我發現就是 AI 的話它的那個參考文獻
  2046. 1:49:46尤其是它的那個內文的東西
  2047. 1:49:48它有時候就是東拼西湊
  2048. 1:49:51所以你在使用 AI 的時候
  2049. 1:49:54你可能要去嚴格的去查證
  2050. 1:49:57就是說它的這個內容到底是真的還是假的
  2051. 1:50:00尤其是現在很多的研究生
  2052. 1:50:04他們反正就是就把一些東西全部丟到 AI 上面去
  2053. 1:50:08他在做這個過程的時候就是在整個論文在寫完之後的話
  2054. 1:50:13他也沒有去查證說這個東西到底是真的還是假的
  2055. 1:50:16所以剛剛那個副校長講的就是
  2056. 1:50:20可能要求學生可能在他的那個文章上傳的時候
  2057. 1:50:25或是說他在 final 的時候可能要把它的那個
  2058. 1:50:29就是說參考或引用的一些文獻的 doi
  2059. 1:50:33可能要把它列出來
  2060. 1:50:35要列出來的話這樣的話我們才能夠去做這個連結
  2061. 1:50:40去了解說它這個東西到底是真的還是假的
  2062. 1:50:43這是我這幾年大概在審查文章的時候所發現的一些問題
  2063. 1:50:49尤其像有些投稿的他們在寫這個文章的時候
  2064. 1:50:53他們並沒有交代它的一些數據
  2065. 1:50:56比如說它這個實驗到底是怎麼做出來的
  2066. 1:51:00它就可能只是就是很就是會漏掉就對了
  2067. 1:51:06所以現在那個實驗記錄簿其實還是非常非常的重要而且是
  2068. 1:51:11還是要詳細的自己用手寫或者把那個照片什麼什麼貼出來
  2069. 1:51:16但是數據的話我知道像現在有些是用 DA 的方式
  2070. 1:51:20因為畢竟有些實驗它的成本是非常的高
  2071. 1:51:24所以它會用 DA 就會用那個資料增量的方式
  2072. 1:51:27但是資料增量它基本上還是會有一個模型去
  2073. 1:51:31去 fit 它看它到底是準確性到底怎麼樣
  2074. 1:51:34我的學生的所有統計那個原始數據
  2075. 1:51:38跟它跑出來的那個東西全部也是要給我的這樣
  2076. 1:51:41第四題如果用 word 儲存對話記錄會不會被質疑說可能被修改
  2077. 1:51:47我覺得當然所有東西這些東西都有可能修改啦
  2078. 1:51:51可是你真的想像一下你要修改花的那個功應該是很不得了
  2079. 1:51:58所以我不覺得這個修改會是一個
  2080. 1:52:02對我覺得根據西方的文化只要你敢宣稱你是你的宣稱
  2081. 1:52:08然後他基本上就相信你
  2082. 1:52:10但是如果被抓到那就非常嚴重
  2083. 1:52:13就你敢說我就敢相信你
  2084. 1:52:15但是那你要修改你要這樣從頭到尾花這麼多功
  2085. 1:52:20去做這些外在的事情而不去好好做你的研究的話
  2086. 1:52:24那也沒辦法不過這個都是有可能的
  2087. 1:52:27好就是寫 review
  2088. 1:52:31我最近就在看說是譬如說我有一個構想
  2089. 1:52:37那我就用 AI 可以幫我找相關的文獻
  2090. 1:52:41它可以幫我整理然後我一個一個問題這樣問它
  2091. 1:52:45那它就都幫我這樣子回答出來
  2092. 1:52:48因為我覺得假如我用這樣來寫一個 review paper
  2093. 1:52:52其實方便很多
  2094. 1:52:55可是在這個過程當中
  2095. 1:52:57我覺得還是我有我的想法然後我透過 AI 來幫我
  2096. 1:53:03可是你也可以用 AI 來做完全不動大腦的幫你寫一篇 review
  2097. 1:53:09我覺得現在這個是應該蠻容易做得到的
  2098. 1:53:14那假如說它做了這個然後我再判斷說它裡面講的東西是不是真的
  2099. 1:53:21可是那個整個架構那些東西可能就不是我
  2100. 1:53:26參與了太多
  2101. 1:53:28譬如說我要它寫一個 review 關於乳癌最新的治療方法
  2102. 1:53:36它可以寫啊
  2103. 1:53:37那我可能不需要再給它更多的這些指引
  2104. 1:53:41所以在這樣的狀況之下
  2105. 1:53:43這一類的 review 文章
  2106. 1:53:45我覺得會越來越多
  2107. 1:53:47其實我們現在也看到很多這種 review 文章
  2108. 1:53:51它就是純 literature review
  2109. 1:53:54它把所有的文獻整理
  2110. 1:53:57可是沒有它自己的新的想法
  2111. 1:54:01過去這種純文獻整理是有用的
  2112. 1:54:04因為我們要找到這些文獻讀不容易
  2113. 1:54:07可是現在因為這些很容易了
  2114. 1:54:09所以其實在 AI 出來之前
  2115. 1:54:12這一類的 review paper 就已經開始蠻多了
  2116. 1:54:16尤其很多老師想要衝 paper 的話
  2117. 1:54:19寫這種 review 是很簡單的
  2118. 1:54:22或者說生醫方面
  2119. 1:54:23尤其是醫學
  2120. 1:54:25只有 systematic review
  2121. 1:54:26其實甚至還有 umbrella review of systematic review of meta analysis
  2122. 1:54:32這個其實很重要
  2123. 1:54:33因為它看了過去的譬如說 100 篇
  2124. 1:54:35然後就找到現在最新的乳癌治療的方法等等
  2125. 1:54:40那我也要回應這一篇
  2126. 1:54:43最近我讀到一篇文章
  2127. 1:54:44這個作者實際上是就在
  2128. 1:54:47他就說如果你的 review 的文章裡面有造假的文獻的話
  2129. 1:54:53這個應該視為 fabricate
  2130. 1:54:56就是它是造假的
  2131. 1:54:58就是說如果你的你自己研究是自己做的你只是有幾篇文章
  2132. 1:55:02你的參考文獻裡面是造假的
  2133. 1:55:04這個剛您剛剛講還可以用行政去處理就是把它 correct 等等
  2134. 1:55:08可是如果你是 review 文章而你 review 的文章
  2135. 1:55:11你譬如說你 review 了 100 篇文章其中有 20 篇是造假的
  2136. 1:55:15那這整篇文章就是叫造假
  2137. 1:55:17因為你的 data 就是那些文章
  2138. 1:55:21而那些文章是假的
  2139. 1:55:22也就是你的 data 就是假的這樣子
  2140. 1:55:24那就 review 的結果就是不準的這樣
  2141. 1:55:27我們這邊有一位已經
  2142. 1:55:28而是我們在做這個學生論文口試的時候
  2143. 1:55:32可能遭遇的問題因為以前如果說有可能造假的行為
  2144. 1:55:37可能是用 photoshop 它把膠圖改變貼上去
  2145. 1:55:43可是現在 AI 自己就可以 generate 假的圖
  2146. 1:55:46那我們這些當審查老師的人要怎麼監督這件事情
  2147. 1:55:52還是幾乎是不可能的
  2148. 1:55:56假如是像剛才講的那種示意圖
  2149. 1:55:59其實你放大就可以看得出來錯誤
  2150. 1:56:03假如說它造假的是數據
  2151. 1:56:06那這個我覺得就真的比較難
  2152. 1:56:09那我們過去假如學生有造假
  2153. 1:56:12那你的實驗記錄本拿出來你的 gel 這些照片
  2154. 1:56:18原始照片拿出來看
  2155. 1:56:21可能都是要回歸到原始數據
  2156. 1:56:24我們困難的地方就在於
  2157. 1:56:27可能審查過程中會覺得它的 data 也很合理
  2158. 1:56:30所以並不會要求它提供原始的資料出來
  2159. 1:56:34那這個有沒有可能間接的導致一些會投機取巧的事情發生這樣子
  2160. 1:56:41會啊會啊這絕對會
  2161. 1:56:43投機取巧現在變成更容易了
  2162. 1:56:46那我覺得其實跟過去講到這個
  2163. 1:56:50數據造假這一類最重要的是實驗室的文化
  2164. 1:56:56就是這個學生的論文不是今天才突然冒出來嘛
  2165. 1:56:59它是經過一個過程
  2166. 1:57:00這過程當中你要一直不斷跟學生的討論
  2167. 1:57:05去檢驗
  2168. 1:57:06那所以這個你會老師有機會找到這些狀況
  2169. 1:57:12這題的回答是
  2170. 1:57:14我個人認為是還可以
  2171. 1:57:17只要你有加進作者的一些創意的思維或者判斷等等的話
  2172. 1:57:25我覺得這種東西它可以發表
  2173. 1:57:27可是假如我作為 reviewer
  2174. 1:57:29我以後會用更嚴格的態度來審
  2175. 1:57:33就是一個 reviewer 不只要看它是不是把所有的文獻都整理了
  2176. 1:57:38我要看說它中間有沒有新的 point
  2177. 1:57:42或者說它這個整理是不是平常人不容易做到的
  2178. 1:57:47那這樣子這篇 reviewer 才有它的價值
  2179. 1:57:51所以我會用更嚴格的角度去看
  2180. 1:57:54我記得 APA 第七版出來的時候
  2181. 1:57:56好像還沒有 AI 所以應該是沒有這樣子
  2182. 1:58:00但是有些什麼資料庫那些都是有的
  2183. 1:58:03APA 是什麼
  2184. 1:58:04就是一種數目格式是常用於人文社會領域的
  2185. 1:58:10可能還沒有
  2186. 1:58:11不過你可以查可以問一下 AI 有沒有這樣子
  2187. 1:58:14好去查一下 APA 格式這樣第七版這樣
  2188. 1:58:16AI 可以幫你查
  2189. 1:58:18假設角色扮演
  2190. 1:58:20其實這個是有些人會發現
  2191. 1:58:24這樣的角色會比較有用
  2192. 1:58:27譬如說我假如希望他給我嚴格的批判
  2193. 1:58:32那你叫他做嚴格的批判
  2194. 1:58:34我覺得這個就有用
  2195. 1:58:36要不然他很可能就給你一個 pamper 一下這個
  2196. 1:58:40做得很好啊
  2197. 1:58:42而且 ChatGPT 會比較給正情緒價值
  2198. 1:58:45他說你問的很好問題呀 blah blah blah
  2199. 1:58:47那我覺得 Gemini 比較像直男就直接丟給你答案這樣子
  2200. 1:58:51所以我現在比較喜歡 Gemini 和 Claude
  2201. 1:58:54我覺得他們比較 professional
  2202. 1:58:57ChatGPT 會講一些
  2203. 1:58:59給了很多下指令後給了很多指令說明 hallucination
  2204. 1:59:03hallucination 幻覺
  2205. 1:59:07目前看起來不會完全消失
  2206. 1:59:09我們就是盡量減少
  2207. 1:59:11可是你最終還是要去檢驗
  2208. 1:59:14其實是跟他講說如果你不回答你就說不要回答了
  2209. 1:59:17你不要硬湊答案給我
  2210. 1:59:19因為他無論如何他都要回應你這樣子
  2211. 1:59:22那我覺得用兩個三個 AI 很有用
  2212. 1:59:26就我最近在規劃我要出國旅行
  2213. 1:59:29而一個 AI 幫我規劃了整套的行程
  2214. 1:59:32我覺得做得很好
  2215. 1:59:34然後把它丟給第二個 AI
  2216. 1:59:36他就說這中間有兩個安排呢
  2217. 1:59:38是錯誤的不可行的
  2218. 1:59:40那個單位在那個地點在那個時候根本沒有開放
  2219. 1:59:45所以每個人他們可能掌握到不同的資訊
  2220. 1:59:49那我覺得這個就非常有用
  2221. 1:59:50一個給另外一個再給第三個
  2222. 1:59:53這樣下來就錯誤就都抓出來了
  2223. 1:59:56也就是說讓你的助理們自己互相監督
  2224. 1:59:59學生們自己互相
  2225. 2:00:01你做完實驗就丟給他他要重做類似這樣子
  2226. 2:00:05就互相監督這樣
  2227. 2:00:07再次感謝孫教授給我們這個精闢的演講
  2228. 2:00:10然後他自己說他是比較 liberal 的
  2229. 2:00:13liberal 的意思就是他是比較開採開放的心胸
  2230. 2:00:17然後那個比較正向的看待
  2231. 2:00:21可是對於期刊主編或者 reviewer 甚至指導老師來說
  2232. 2:00:27其實我們還是蠻恐懼的這樣子
  2233. 2:00:29也許我們應該重新思考那個時候所謂的創意是什麼意思
  2234. 2:00:33學生的所謂獨立研究的研究精神是什麼意思這樣子
  2235. 2:00:39好我們再次謝謝孫以瀚老師謝謝

About this transcript

This page contains the full transcript of 孫以瀚研究員 - 運用AI輔助撰寫研究計畫與論文:心態、技巧、學倫 by NYCU OCW, generated from the public captions YouTube serves with the video. The transcript has 3,762 words across 2,235 segments, with the original timestamps preserved so you can click any line to jump to that moment in the embedded player.

What you can do with it

Use the transcript to take notes, quote the speaker, build a study guide, generate a summary with ChatGPT or Claude via the YouTube Summary tool, or export it as a timed subtitle file with YouTube to SRT. You can also re-open it in the transcriber to choose a caption track available on the video.

Free YouTube transcript tool

YouTube2Text is a free YouTube transcript generator — no signup, no daily limit. Paste any YouTube link and get the full transcript instantly, with timestamps, click-to-jump, caption language selection, AI prompts for ChatGPT, Claude, and Gemini, and exports to TXT, SRT, VTT, or Markdown.