CONNEXION
  • RetourJeux
    • Sorties
    • Hit Parade
    • Les + populaires
    • Les + attendus
    • Soluces
    • Tous les Jeux
    • Gaming
  • RetourActu Gaming
    • News
    • Astuces
    • Tests
    • Previews
    • Toute l'actu gaming
  • RetourBons plans
    • Bons plans
    • Bons plans Smartphone
    • Bons plans Hardware
    • Bons plans Image et Son
    • Bons plans Amazon
    • Bons plans Cdiscount
    • Bons plans Decathlon
    • Bons plans Fnac
    • Tous les Bons plans
  • RetourJVTech
    • Actus High-Tech
    • Intelligence Artificielle
    • Smartphones
    • Mobilité urbaine
    • Hardware
    • Image et son
    • Tutoriels
    • Tests produits High-Tech
    • Guides d'achat High-Tech
    • JVTech
  • RetourCulture
    • Actus Culture
    • Culture
  • RetourVidéos
    • A la une
    • Gaming Live
    • Vidéos Tests
    • Vidéos Previews
    • Gameplay
    • Trailers
    • Chroniques
    • Replay Web TV
    • Toutes les vidéos
  • RetourForums
    • Hardware PC
    • PS5
    • Switch 2
    • Xbox Series
    • Switch
    • Pokemon pocket
    • FC 25 Ultimate Team
    • League of Legends
    • Tous les Forums
  • PC
  • PS5
  • Xbox Series
  • Switch 2
  • PS4
  • One
  • Switch
  • iOS
  • Android
  • MMO
  • RPG
  • FPS
En ce moment Genshin Impact Valhalla Breath of the wild Animal Crossing GTA 5 Red dead 2
Liste des sujets

Webscrap alerte BTC

Just1-Celest1
Just1-Celest1
Niveau 26
17 mai 2022 à 21:00:26

Salut les kheys :hap:
Quelqu’un serait svp capable de webscrap les topics alerte BTC et me sortir un csv avec :
Auteur / date / heure / message

Pseudo supprimé
Pseudo supprimé 17 mai 2022 à 21:18:31

Évidement tu veux le numéro de ma sœur aussi ?

Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 21:28:45

je l'avais déjà fait mais j'arrive plus à retrouver mon script

tu fais une loop avec cette lib https://github.com/IngenieurJVC2/jvc.py en changeant le numéro de page des adresses, tu dump tout dans un data frame et tu export en csv

d'ailleurs j'en parle ici https://www.jeuxvideo.com/forums/42-3011927-66397689-1-0-1-0-peut-on-faire-une-appli-jvc-tradingview-qui-ressemble-a-soundcloud.htm mais j'arrive pas à retrouver le script que j'ai fait
:(

Message édité le 17 mai 2022 à 21:31:52 par Blackamoto
Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 21:48:26

j'ai trouvé c'est bon, attendez je clean le script et je met sur github https://image.noelshack.com/fichiers/2022/16/2/1650382580-athee2.jpg

Pseudo supprimé
Pseudo supprimé 17 mai 2022 à 21:52:56

C'est quoi l'intérêt ?

Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 22:11:37

voilà enjoy https://github.com/blackamoto/dump_jvc_to_csv https://image.noelshack.com/fichiers/2022/16/2/1650382580-athee2.png

Message édité le 17 mai 2022 à 22:16:29 par Blackamoto
J-S-B___618
J-S-B___618
Niveau 6
17 mai 2022 à 22:13:15

tu veux faire quoi l'op https://image.noelshack.com/fichiers/2018/10/2/1520345870-duke-tare.png

nedsta
nedsta
Niveau 35
17 mai 2022 à 22:19:17

Le 17 mai 2022 à 22:13:15 :
tu veux faire quoi l'op https://image.noelshack.com/fichiers/2018/10/2/1520345870-duke-tare.png

ficher tous ceux qui font des calls de merde et venir se foutre de leur gueule qq mois plus tard :rire2:

Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 23:15:03

c'est bon le script est battle-tested là ça fonctionne bien j'ai corrigé tout les bugs, vous pouvez le laisser tourner sur 5000 pages tranquille

Message édité le 17 mai 2022 à 23:17:31 par Blackamoto
Just1-Celest1
Just1-Celest1
Niveau 26
17 mai 2022 à 23:20:18

Le 17 mai 2022 à 23:15:03 :
c'est bon le script est battle-tested là ça fonctionne bien j'ai corrigé tout les bugs

Merci :hap:
Je connais rien à python mais je vais essayer de le run cette semaine.

Je vais créer un site avec un chart du BTC daily avec en seconde abscisse le nombre de message postés et la possibilité de voir les messages en cliquant sur le chart direct.
Pour les sticker ce sera mort direct par contre.

Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 23:26:03

Le 17 mai 2022 à 23:20:18 :
Le 17 mai 2022 à 23:15:03 :
c'est bon le script est battle-tested là ça fonctionne bien j'ai corrigé tout les bugs

Merci :hap:
Je connais rien à python mais je vais essayer de le run cette semaine.

Je vais créer un site avec un chart du BTC daily avec en seconde abscisse le nombre de message postés et la possibilité de voir les messages en cliquant sur le chart direct.
Pour les sticker ce sera mort direct par contre.

ça peut être très intéressant de mettre le nombre de message par jour en effet !
dans la dataframe ou le csv final 'FULL.csv', il faudra que je rajoute une colonne avec la date en secondes ou millisecondes (unix timestamp), à faire dans la fonction 'rassembler_fichier' pour aider, je le ferait plus tard

Message édité le 17 mai 2022 à 23:30:38 par Blackamoto
Blackamoto
Blackamoto
Niveau 16
17 mai 2022 à 23:29:39

les liens noelshack n'apparaissent pas dans le contenu des messages de toute façon (les autres si), ça doit être parce que c'est affiché en tant qu'image et ça n'arrive pas à récup le lien (pas moi qui ai fait le scrap jvc)

Message édité le 17 mai 2022 à 23:30:12 par Blackamoto
Just1-Celest1
Just1-Celest1
Niveau 26
18 mai 2022 à 22:38:00

Le 17 mai 2022 à 23:29:39 :
les liens noelshack n'apparaissent pas dans le contenu des messages de toute façon (les autres si), ça doit être parce que c'est affiché en tant qu'image et ça n'arrive pas à récup le lien (pas moi qui ai fait le scrap jvc)

J’abuse si je te demande de m’envoyer le csv direct ?
Ou quelqu’un d’autre du forum ? :rire:

J’ai fini export données btc depuis 01/08/2019 jusque aujourd’hui.
Plus qu’à faire la jointure avec le csv webscrap de alerte btc et je vous envoie ça ce week-end.

Blackamoto
Blackamoto
Niveau 16
19 mai 2022 à 11:49:17

Le 18 mai 2022 à 22:38:00 :

Le 17 mai 2022 à 23:29:39 :
les liens noelshack n'apparaissent pas dans le contenu des messages de toute façon (les autres si), ça doit être parce que c'est affiché en tant qu'image et ça n'arrive pas à récup le lien (pas moi qui ai fait le scrap jvc)

J’abuse si je te demande de m’envoyer le csv direct ?
Ou quelqu’un d’autre du forum ? :rire:

J’ai fini export données btc depuis 01/08/2019 jusque aujourd’hui.
Plus qu’à faire la jointure avec le csv webscrap de alerte btc et je vous envoie ça ce week-end.

je suis en train de dl, ça sera prêt en fin d'aprem

La vidéo du moment