[爆卦] 異常爆文分析器V1.0已回收
看板Gossiping作者clothg34569 (提拉米蘇冰淇淋)時間5年前 (2018/11/06 18:23)推噓271(287推 16噓 133→)留言436則, 291人參與討論串1/4 (看更多)
大家安安,八卦板首PO,如果有違反板規麻煩告知一下,我再修改
0.前言:
就,最近想說拿八卦版來玩玩爬蟲,又看到一堆人說八卦有異常爆文的情形
所以就寫了個異常爆文分析器來當練習
1.介紹:
先上GIT,Code和Readme都放在這了
https://github.com/Daniel34569/PTTCrawler
首先我們先定義一下異常爆文
我先定義為:在短時間內有不合常理大量推文的就算
至於時間多短,大量是多大量就因人而異,因此都當作輸入的參數
2.使用套件:
我是使用Python以及PTTLibrary為主來進行爬蟲
如果要使用的話需要安裝Python及使用的套件(git上有列出)
沒有製作成EXE檔是因為我這版本Python製作EXE剛好會報錯,我又懶得解決
而且我也懶得找免空來存
3.執行過程:
在settings中輸入好參數之後
會開始列出範圍中符合自定義的異常爆文的標題、編號
以及第25/50/75則推文與發文時間之間的差距
...其實應該要把結果存起來或者是把檔案存起來省時間啦
如果有需求我在改版好了:)
4.執行結果:
這是試著跑八卦版第770000到780000這一萬則文章中
第25個推文與發文時間的間隔小於5分鐘的結果
其中Error是發文者不小心改到時間或者因為其他原因讓格式跑掉
https://i.imgur.com/x7USUcU.png
5.後記:
不用Z過濾出目標推文數之後再分析的原因是避免有人故意歸零
另外,這只是整理出符合這些條件的文章,要怎麼解讀就...我對統計比較不熟啦
有任何可以改進的地方希望可以推文/箭頭提出,包括程式設計上可以改善的部分XD
謝謝大家:)
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.112.150.191
※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1541499806.A.EB8.html
推
11/06 18:23,
5年前
, 1F
11/06 18:23, 1F
推
11/06 18:24,
5年前
, 2F
11/06 18:24, 2F
推
11/06 18:24,
5年前
, 3F
11/06 18:24, 3F
噓
11/06 18:24,
5年前
, 4F
11/06 18:24, 4F
推
11/06 18:24,
5年前
, 5F
11/06 18:24, 5F
推
11/06 18:24,
5年前
, 6F
11/06 18:24, 6F
推
11/06 18:24,
5年前
, 7F
11/06 18:24, 7F
推
11/06 18:24,
5年前
, 8F
11/06 18:24, 8F
推
11/06 18:25,
5年前
, 9F
11/06 18:25, 9F
推
11/06 18:25,
5年前
, 10F
11/06 18:25, 10F
推
11/06 18:25,
5年前
, 11F
11/06 18:25, 11F
噓
11/06 18:25,
5年前
, 12F
11/06 18:25, 12F
噓
11/06 18:25,
5年前
, 13F
11/06 18:25, 13F
推
11/06 18:25,
5年前
, 14F
11/06 18:25, 14F
回應一下
短時間推爆!=異常爆文
但是異常爆文大部分都應該有短時間大量推的可能性
所以我這個是整理出符合短時間大量推的文章
理論上,發錢/協尋這種類型的文章短時間內爆應該是合理的
如果分析一年前的文章再與現在比較,這種類型文章爆文應該時間差不多
異常的話,大概就是1~3年前(或者上次選舉時)都要很久才會爆,可是最近卻一發就爆
不過這就涉及機率統計的方法了,所以就交給專業的來解釋吧XD
※ 編輯: clothg34569 (140.112.150.191), 11/06/2018 18:29:10
→
11/06 18:26,
5年前
, 15F
11/06 18:26, 15F
→
11/06 18:26,
5年前
, 16F
11/06 18:26, 16F
推
11/06 18:26,
5年前
, 17F
11/06 18:26, 17F
推
11/06 18:26,
5年前
, 18F
11/06 18:26, 18F
推
11/06 18:27,
5年前
, 19F
11/06 18:27, 19F
推
11/06 18:27,
5年前
, 20F
11/06 18:27, 20F
推
11/06 18:27,
5年前
, 21F
11/06 18:27, 21F
推
11/06 18:28,
5年前
, 22F
11/06 18:28, 22F
推
11/06 18:28,
5年前
, 23F
11/06 18:28, 23F
→
11/06 18:28,
5年前
, 24F
11/06 18:28, 24F
推
11/06 18:28,
5年前
, 25F
11/06 18:28, 25F
推
11/06 18:28,
5年前
, 26F
11/06 18:28, 26F
推
11/06 18:28,
5年前
, 27F
11/06 18:28, 27F
→
11/06 18:28,
5年前
, 28F
11/06 18:28, 28F
推
11/06 18:29,
5年前
, 29F
11/06 18:29, 29F
推
11/06 18:29,
5年前
, 30F
11/06 18:29, 30F
推
11/06 18:29,
5年前
, 31F
11/06 18:29, 31F
→
11/06 18:30,
5年前
, 32F
11/06 18:30, 32F
推
11/06 18:30,
5年前
, 33F
11/06 18:30, 33F
推
11/06 18:30,
5年前
, 34F
11/06 18:30, 34F
推
11/06 18:30,
5年前
, 35F
11/06 18:30, 35F
推
11/06 18:31,
5年前
, 36F
11/06 18:31, 36F
推
11/06 18:31,
5年前
, 37F
11/06 18:31, 37F
推
11/06 18:31,
5年前
, 38F
11/06 18:31, 38F
還有 358 則推文
還有 1 段內文
推
11/06 22:36,
5年前
, 397F
11/06 22:36, 397F
推
11/06 22:39,
5年前
, 398F
11/06 22:39, 398F
推
11/06 22:40,
5年前
, 399F
11/06 22:40, 399F
推
11/06 22:45,
5年前
, 400F
11/06 22:45, 400F
推
11/06 22:47,
5年前
, 401F
11/06 22:47, 401F
推
11/06 22:52,
5年前
, 402F
11/06 22:52, 402F
推
11/06 23:02,
5年前
, 403F
11/06 23:02, 403F
推
11/06 23:11,
5年前
, 404F
11/06 23:11, 404F
推
11/06 23:16,
5年前
, 405F
11/06 23:16, 405F
推
11/06 23:34,
5年前
, 406F
11/06 23:34, 406F
推
11/06 23:36,
5年前
, 407F
11/06 23:36, 407F
推
11/06 23:38,
5年前
, 408F
11/06 23:38, 408F
→
11/06 23:39,
5年前
, 409F
11/06 23:39, 409F
推
11/06 23:46,
5年前
, 410F
11/06 23:46, 410F
推
11/06 23:49,
5年前
, 411F
11/06 23:49, 411F
推
11/07 00:14,
5年前
, 412F
11/07 00:14, 412F
推
11/07 00:20,
5年前
, 413F
11/07 00:20, 413F
→
11/07 00:23,
5年前
, 414F
11/07 00:23, 414F
噓
11/07 00:32,
5年前
, 415F
11/07 00:32, 415F
→
11/07 00:32,
5年前
, 416F
11/07 00:32, 416F
推
11/07 00:43,
5年前
, 417F
11/07 00:43, 417F
推
11/07 00:50,
5年前
, 418F
11/07 00:50, 418F
推
11/07 01:02,
5年前
, 419F
11/07 01:02, 419F
→
11/07 01:24,
5年前
, 420F
11/07 01:24, 420F
推
11/07 01:41,
5年前
, 421F
11/07 01:41, 421F
噓
11/07 02:36,
5年前
, 422F
11/07 02:36, 422F
推
11/07 03:33,
5年前
, 423F
11/07 03:33, 423F
噓
11/07 03:54,
5年前
, 424F
11/07 03:54, 424F
推
11/07 05:39,
5年前
, 425F
11/07 05:39, 425F
→
11/07 05:39,
5年前
, 426F
11/07 05:39, 426F
推
11/07 07:27,
5年前
, 427F
11/07 07:27, 427F
→
11/07 07:27,
5年前
, 428F
11/07 07:27, 428F
推
11/07 07:27,
5年前
, 429F
11/07 07:27, 429F
→
11/07 07:42,
5年前
, 430F
11/07 07:42, 430F
→
11/07 07:42,
5年前
, 431F
11/07 07:42, 431F
推
11/07 09:37,
5年前
, 432F
11/07 09:37, 432F
推
11/07 10:13,
5年前
, 433F
11/07 10:13, 433F
推
11/07 15:37,
5年前
, 434F
11/07 15:37, 434F
推
11/07 18:41,
5年前
, 435F
11/07 18:41, 435F
推
11/07 23:19,
5年前
, 436F
11/07 23:19, 436F
討論串 (同標題文章)