[爆卦] 異常爆文分析器V1.0已回收

看板Gossiping作者 (提拉米蘇冰淇淋)時間5年前 (2018/11/06 18:23), 5年前編輯推噓271(28716133)
留言436則, 291人參與, 5年前最新討論串1/4 (看更多)
大家安安,八卦板首PO,如果有違反板規麻煩告知一下,我再修改 0.前言: 就,最近想說拿八卦版來玩玩爬蟲,又看到一堆人說八卦有異常爆文的情形 所以就寫了個異常爆文分析器來當練習 1.介紹: 先上GIT,Code和Readme都放在這了 https://github.com/Daniel34569/PTTCrawler 首先我們先定義一下異常爆文 我先定義為:在短時間內有不合常理大量推文的就算 至於時間多短,大量是多大量就因人而異,因此都當作輸入的參數 2.使用套件: 我是使用Python以及PTTLibrary為主來進行爬蟲 如果要使用的話需要安裝Python及使用的套件(git上有列出) 沒有製作成EXE檔是因為我這版本Python製作EXE剛好會報錯,我又懶得解決 而且我也懶得找免空來存 3.執行過程: 在settings中輸入好參數之後 會開始列出範圍中符合自定義的異常爆文的標題、編號 以及第25/50/75則推文與發文時間之間的差距 ...其實應該要把結果存起來或者是把檔案存起來省時間啦 如果有需求我在改版好了:) 4.執行結果: 這是試著跑八卦版第770000到780000這一萬則文章中 第25個推文與發文時間的間隔小於5分鐘的結果 其中Error是發文者不小心改到時間或者因為其他原因讓格式跑掉 https://i.imgur.com/x7USUcU.png
https://i.imgur.com/SNFZOh2.png
https://i.imgur.com/vMrSGbr.png
https://i.imgur.com/mSvjwzC.png
https://i.imgur.com/o00pnww.png
https://i.imgur.com/Dvv2mOD.png
5.後記: 不用Z過濾出目標推文數之後再分析的原因是避免有人故意歸零 另外,這只是整理出符合這些條件的文章,要怎麼解讀就...我對統計比較不熟啦 有任何可以改進的地方希望可以推文/箭頭提出,包括程式設計上可以改善的部分XD 謝謝大家:) -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.112.150.191 ※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1541499806.A.EB8.html

11/06 18:23, 5年前 , 1F
推個
11/06 18:23, 1F

11/06 18:24, 5年前 , 2F
11/06 18:24, 2F

11/06 18:24, 5年前 , 3F
糟惹,導演風向越來越難帶了
11/06 18:24, 3F

11/06 18:24, 5年前 , 4F
短時間內推爆就是異常爆文?標準也太低
11/06 18:24, 4F

11/06 18:24, 5年前 , 5F
實用
11/06 18:24, 5F

11/06 18:24, 5年前 , 6F
你有實作精神 給推
11/06 18:24, 6F

11/06 18:24, 5年前 , 7F
112吊喔
11/06 18:24, 7F

11/06 18:24, 5年前 , 8F
11/06 18:24, 8F

11/06 18:25, 5年前 , 9F
蠻有趣的想法
11/06 18:25, 9F

11/06 18:25, 5年前 , 10F
11/06 18:25, 10F

11/06 18:25, 5年前 , 11F
會被噓
11/06 18:25, 11F

11/06 18:25, 5年前 , 12F
你應該把id重複也列入
11/06 18:25, 12F

11/06 18:25, 5年前 , 13F
我送神魔帳號算異常爆文?
11/06 18:25, 13F

11/06 18:25, 5年前 , 14F
11/06 18:25, 14F
回應一下 短時間推爆!=異常爆文 但是異常爆文大部分都應該有短時間大量推的可能性 所以我這個是整理出符合短時間大量推的文章 理論上,發錢/協尋這種類型的文章短時間內爆應該是合理的 如果分析一年前的文章再與現在比較,這種類型文章爆文應該時間差不多 異常的話,大概就是1~3年前(或者上次選舉時)都要很久才會爆,可是最近卻一發就爆 不過這就涉及機率統計的方法了,所以就交給專業的來解釋吧XD ※ 編輯: clothg34569 (140.112.150.191), 11/06/2018 18:29:10

11/06 18:26, 5年前 , 15F
把垃圾黨工揪出來 順便看看爆文的交叉
11/06 18:26, 15F

11/06 18:26, 5年前 , 16F
比對 應該很好笑
11/06 18:26, 16F

11/06 18:26, 5年前 , 17F
這篇會不會也異常爆!^^
11/06 18:26, 17F

11/06 18:26, 5年前 , 18F
異常有點難定義
11/06 18:26, 18F

11/06 18:27, 5年前 , 19F
我覺得應該列入重複推文次數和ID 會很有趣
11/06 18:27, 19F

11/06 18:27, 5年前 , 20F
不過應該可以歸類出ID重複出現的比例
11/06 18:27, 20F

11/06 18:27, 5年前 , 21F
推 覺得要分析智障 機械式推文比較準
11/06 18:27, 21F

11/06 18:28, 5年前 , 22F
推列重複ID
11/06 18:28, 22F

11/06 18:28, 5年前 , 23F
讚 有連噓的嗎
11/06 18:28, 23F

11/06 18:28, 5年前 , 24F
分析不同文章 同ID推相同文
11/06 18:28, 24F

11/06 18:28, 5年前 , 25F
開源只能推了
11/06 18:28, 25F

11/06 18:28, 5年前 , 26F
所以異常在哪?
11/06 18:28, 26F

11/06 18:28, 5年前 , 27F
廠工QQ 應該加入快登解CD時間分析
11/06 18:28, 27F

11/06 18:28, 5年前 , 28F
先說,這篇會爆
11/06 18:28, 28F

11/06 18:29, 5年前 , 29F
推你實作 但鄉民很懶 只要結果好造風向
11/06 18:29, 29F

11/06 18:29, 5年前 , 30F
哈 看這些篇的標題 方向也太一致了
11/06 18:29, 30F

11/06 18:29, 5年前 , 31F
廠公殺手呀這 最近特別多自己發文自己推爆
11/06 18:29, 31F

11/06 18:30, 5年前 , 32F
的遊戲
11/06 18:30, 32F

11/06 18:30, 5年前 , 33F
XD 這麼快就推廠工 明明韓粉也有可能
11/06 18:30, 33F

11/06 18:30, 5年前 , 34F
廠公:爆三小? 台灣價值儲了沒?
11/06 18:30, 34F

11/06 18:30, 5年前 , 35F
連噓連推的實在是很多
11/06 18:30, 35F

11/06 18:31, 5年前 , 36F
11/06 18:31, 36F

11/06 18:31, 5年前 , 37F
導工 不意外
11/06 18:31, 37F

11/06 18:31, 5年前 , 38F
這些文章就全是選情激戰區的,巧合?我
11/06 18:31, 38F
還有 358 則推文
還有 1 段內文
11/06 22:36, 5年前 , 397F
11/06 22:36, 397F

11/06 22:39, 5年前 , 398F
專業推
11/06 22:39, 398F

11/06 22:40, 5年前 , 399F
真的覺得黨工體很煩 把人當白痴嗎
11/06 22:40, 399F

11/06 22:45, 5年前 , 400F
我覺得不該冠上異常 有些本來就熱門話題...
11/06 22:45, 400F

11/06 22:47, 5年前 , 401F
11/06 22:47, 401F

11/06 22:52, 5年前 , 402F
不演了 不演了
11/06 22:52, 402F

11/06 23:02, 5年前 , 403F
分析得很好
11/06 23:02, 403F

11/06 23:11, 5年前 , 404F
11/06 23:11, 404F

11/06 23:16, 5年前 , 405F
11/06 23:16, 405F

11/06 23:34, 5年前 , 406F
11/06 23:34, 406F

11/06 23:36, 5年前 , 407F
整個八卦版都是低能黨工體。1124滅東廠
11/06 23:36, 407F

11/06 23:38, 5年前 , 408F
11/06 23:38, 408F

11/06 23:39, 5年前 , 409F
大推
11/06 23:39, 409F

11/06 23:46, 5年前 , 410F
11/06 23:46, 410F

11/06 23:49, 5年前 , 411F
專業推
11/06 23:49, 411F

11/07 00:14, 5年前 , 412F
11/07 00:14, 412F

11/07 00:20, 5年前 , 413F
11/07 00:20, 413F

11/07 00:23, 5年前 , 414F
推個 雖然不太懂
11/07 00:23, 414F

11/07 00:32, 5年前 , 415F
幫廠工噓你 廠工都哭暈在廁所了 給
11/07 00:32, 415F

11/07 00:32, 5年前 , 416F
不給廠工活路阿
11/07 00:32, 416F

11/07 00:43, 5年前 , 417F
文章這麼多 很明顯有人想帶風向
11/07 00:43, 417F

11/07 00:50, 5年前 , 418F
推 記得分析你這篇
11/07 00:50, 418F

11/07 01:02, 5年前 , 419F
大推 辛苦了
11/07 01:02, 419F

11/07 01:24, 5年前 , 420F
狗娘廠公哭暈在廁所
11/07 01:24, 420F

11/07 01:41, 5年前 , 421F
導工:幹 留不留點活路讓人走啊
11/07 01:41, 421F

11/07 02:36, 5年前 , 422F
11/07 02:36, 422F

11/07 03:33, 5年前 , 423F
姆咪
11/07 03:33, 423F

11/07 03:54, 5年前 , 424F
報錯
11/07 03:54, 424F

11/07 05:39, 5年前 , 425F
廠工:連續推文都變“贊 ”是正常的
11/07 05:39, 425F

11/07 05:39, 5年前 , 426F
因為有台灣價值XD
11/07 05:39, 426F

11/07 07:27, 5年前 , 427F
重複ID列出來應該會很有趣 看來看去都那
11/07 07:27, 427F

11/07 07:27, 5年前 , 428F
幾隻
11/07 07:27, 428F

11/07 07:27, 5年前 , 429F
11/07 07:27, 429F

11/07 07:42, 5年前 , 430F
黨工就算了 自願跟著當殭屍還沾沾自喜的
11/07 07:42, 430F

11/07 07:42, 5年前 , 431F
真可憐
11/07 07:42, 431F

11/07 09:37, 5年前 , 432F
這不給廠工活路欸XD
11/07 09:37, 432F

11/07 10:13, 5年前 , 433F
11/07 10:13, 433F

11/07 15:37, 5年前 , 434F
11/07 15:37, 434F

11/07 18:41, 5年前 , 435F
11/07 18:41, 435F

11/07 23:19, 5年前 , 436F
推個
11/07 23:19, 436F
文章代碼(AID): #1RuMkUwu (Gossiping)
討論串 (同標題文章)
文章代碼(AID): #1RuMkUwu (Gossiping)