Facebook Message Scraper - outdated?

[Addic7ed]

Zdravim, uz jste treti forum na ktere se obracim

In a nutshell - Pythonu nerozumim, potrebuju zjistit kde je chyba, pripadne jestli je script porad funkcni nebo se da nejak "opravit"

https://github.com/RaghavSood/FBMessageScraper

Posledni post na predchozim foru vypadal nejak takto : "tech zprav je opravdu zhruba okolo 33k, ale je to hrozne divny celkove.. conversation ID, tedy to ktere zadavam pri spusteni scriptu by melo byt dobre protoze je i v tom POST requestu a vyhodi mi ho i stranka http://findmyfbid.com/, takze tam sem se ani neseknul. Nicmene, nechal sem to bezet a pak sem to utnul, vypadalo to takto

*...
Retrieving messages 174000-176000 for conversation ID 1795059115
Retrieving messages 176000-178000 for conversation ID 1795059115
Retrieving messages 178000-180000 for conversation ID 1795059115
Retrieving messages 180000-182000 for conversation ID 1795059115
Retrieving messages 182000-184000 for conversation ID 1795059115
Retrieving messages 184000-186000 for conversation ID 1795059115
Retrieving messages 186000-188000 for conversation ID 1795059115
Traceback (most recent call last):
File "dumper.py", line 100, in <module>
time.sleep(ge­neral_timeout)
KeyboardInterrupt
*
a vyhodilo mi to tedy ty "zpravy", viz. - (screen se souborama - necitelnej bordel)

otevrel sem si ve Waterfoxu namatkou 16000-18000.pretty.json, 60000-6200.pretty.json a 48000-5000.json .. prvni 2 byly vicemene podobne, v tom bordelu sem nasel tak 'body' a zpravu kterou sotva prelouskam, protoze to nejak nevzalo diakritiku (sry, v tomhle sem mimo fakt ), treti json uz byl totalni harampadi, ale vsechny zacinaly 7.4.2012, a to neni ani zdaleka zacatek konverzace, takze nejen ze sou vsechny soubory stejne, jsou mi taky pekne k nicemu."

Sice u toho ten dev pise ze "Interrupting the execution before completion only leaves the JSON chunks, not the stitched file.", ale co mam delat kdyz misto 33k zprav mi to jede do statisicu a stejne je to k nicemu :/ Za kazdou radu dik moc!

[Reklama]

[ttt]

Od boku: z nějakého důvodu skončí v 16000-18000.pretty.json místo JSONu HTML, patrně stránka s nějakou chybovou hláškou. Zkus to přejmenovat na .html a otevřít v prohlížeči.

[Addic7ed]

Pardon ze tak pozde..nic se nezmenilo, porad stejnej bordel.

{ "__ar": 1, "bootloadable": {}, "ixData": {}, "lid": "6220850702775148418", "payload": { "actions": [ { "action_id": "1333791703050000000", "action_type": "ma-type:user-generated-message", "attachments": [], "author": "fbid:100000210903625", "author_email": "100000210903625@facebook.com", "body": "(necitelna zprava)", "ephemeral_ttl_mode": null, "folder": "inbox", "forward_count": 0, "forward_message_ids": [], "has_attachment": false, "is_filtered_content": false, "is_filtered_content_account": false, "is_filtered_content_bh": false, "is_filtered_content_invalid_app": false, "is_filtered_content_quasar": false, "is_forward": false, "is_spoof_warning": false, "is_unread": false, "mes.... a tak to pokracuje dal..

[Addic7ed]

zrovna tady bych cekal zaval rad, ale FB ocividne moc nevoni :/ nechci prechazet na paty forum..

[ivoszz]

Když tobě je těžké radit, problém moc popsat neumíš a může to být cokoliv.

Při tom množství zpráv bych tipl, že FB hodí nějakou hlášku o překročení limitu, to je jedno možné vysvětlení. Osobně FB vůbec nemám, takže je to jen jedna z možností. Skript je zjevně OK, akorát neošetřuje všechny chybové stavy, což je u takovýchto udělátek celkem běžné, nemůžete tušit, co všechno na vás aplikace připraví.

[Reklama]

[Addic7ed]

Ja nevim jak vic to popsat.. delam to podle navodu a urcite tu vsichni nejsou FB immune a mohli by vyzkouset co to pise jim, cimz by me velmi potesili..