Si vous devez télécharger des fichiers depuis Google Drive en ligne de commande avec Curl ou Wget, il y a de fortes chances que cela échoue.

Pourquoi ? Et bien il semblerait que l’avertissement que Google envoie pour les fichiers dépassant une certaine taille soit bloquant pour ces outils.

Alors, comment faire ?

Et bien il existe un petit outil sous licence libre qui s’appelle Gdown qui permet de contourner le problème. Ainsi, grâce à GDown vous pourrez télécharger de gros fichiers depuis Google Drive en ligne de commande.

Elle n’est pas belle la vie ?

Pour installer GDown, ouvrez un terminal et entrez la commande suivante :

pip install gdown

Ensuite, entrez la commande gdown suivie de l’URL du fichier Google Drive :

gdown https://drive.google.com/uc?id=1l_5RK28JRL19wpT22B-DY9We3TVXnnQQ

Et voilà !

L’outil supporte également les URLs classiques qui ne sont pas des URL Google Drive, à la manière de n’importe quel Wget.

Un paramètre –fuzzy permet également de récupérer des répertoires complets de Google Drive ou des fichiers comme ce PowerPoint :

gdown --fuzzy "https://docs.google.com/presentation/d/15umvZKlsJ3094HNg5S4vJsIhxcFlyTeK/edit?usp=sharing&ouid=117512221203072002113&rtpof=true&sd=true"

Notez que Gdown peut également être importé en tant que lib dans vos scripts Python qui peut être très pratique.

Enjoy !

Merci à Laurent

Si vous voulez faire un peu de renseignements (OSINT), voici un script baptisé DaProfiler qui vous permet d’obtenir des emails, des comptes de médias sociaux, des adresses, les emplois et plus encore d’une votre cible.

Cet outil conçu pour la France uniquement, utilise notamment des techniques de web scraping et de Google dorking, pour trouver toutes ces infos et notamment les adresses e-mail de votre cible via des recherches sur Skype, Pinterest et à l’aide de combinaison de différentes adresses e-mail qu’il vérifie par la suite pour savoir si l’adresse e-mail existe ou non

DaProfiler est également capable de contrôler le contenu d’une biographie Instagram pour trouver des informations intéressantes telles que les adresses e-mail, les profils PayPal, la ville, l’école, l’âge, les hobbies et plus encore…

Évidemment, on parle ici uniquement de données disponibles publiquement sur Internet et cet outil n’est à utiliser qu’à des fins éducatives sur vos propres données.

Pour l’installer :

git clone https://github.com/TheRealDalunacrobate/DaProfiler.git
cd DaProfiler
pip install -r requirements.txt

L’UNESCO a à coeur de nous aider à protéger notre identité en ligne. Seulement, voilà, sans même nous en rendre compte, avec d’infimes détails, nous laissons chaque jour des tas de données durant nos séances de surfs. Les sujets qui nous animent, notre niveau de vie, nos habitudes, nos petits secrets…etc.

Et tout cela vient nourrir les bases de données des GAFAM et de leurs acolytes. Chaque donnée est ensuite analysée automatiquement par des systèmes d’IA (deep learning) qui peuvent ensuite nous cataloguer pour mieux nous servir de la publicité voire de l’information ciblée.

Dans ce cas, notre vie privée n’est pas réellement respectée et bien sûr comme pour le moment, il n’y a pas de cadre autour de l’éthique de l’intelligence artificielle, c’est un peu la fête ! Alors, comment sensibiliser les gens au sujet tout en frappant un grand coup pour que les politiques commencent à s’y intéresser ?

Et bien pour cela, l’UNESCO a mis au point la Cookie Factory, une extension Chrome qui va sauvegarder vos cookies, les supprimer et vous forger une toute nouvelle identité.

Je dois avouer que je n’ai jamais vu une extension aussi originale. C’est un vrai spectacle en image et en musique et je vous invite vraiment à la tester rien que pour le show. Ainsi vous pourrez choisir entre revêtir l’identité d’un fan de chats, d’un hacker, d’un multimillionnaire, d’un platiste, d’un fan de voiture…etc.

Chaque cookie a son parfum.

Évidemment, tout est réversible et vous pouvez retrouver à tout moment vos cookies d’origine, mais à quoi bon quand on peut incarner quelqu’un d’autre. Vous pouvez même créer un profil personnalisé… Devenez un homme, une femme, un(e) ado, adulte, sénior, fan de rap, de plongée sous-marine, de pâtisserie, de licornes, de danse classique…etc. Et

Ensuite, y’a plus qu’à surfer et voilà, vous ne serez plus la même personne aux yeux des algos. Très cool non ?

L’extension est disponible uniquement sous Chrome et vous pouvez la télécharger ici.

Une fois encore, je vous invite à la télécharger même si vous pensez ne pas en avoir besoin, ne serait que pour l’expérience. C’est un vrai show, j’ai adoré !

Bravo à l’UNESCO ainsi qu’à l’agence DDB Paris, c’est bien joué ! Puis maintenant que je suis une jeune fille multimillionnaire, fan de licorne et de combats de robots, je sens que ma vie numérique va basculer.

Voici un outil de scraping absolument bluffant qui se concentre sur l’extraction de données en provenance de Google Maps.

Imaginez que vous ayez un annuaire web à remplir ou un listing à consister à partir des données publiques de Google Maps.

Comment faire ? Tout recopier à la main ?

Bien sûr que non ! Grâce à l’extension G Map Extractor sous Chrome, vous pourrez à partir d’une simple requête, vous consister un fichier CSV contenant le nom, l’adresse, le code postal, le numéro de téléphone, le site web et les coordonnées géodésiques des lieux.

Par exemple, je suis ici sur la carte des Kebabs de Clermont-Ferrand… Je lance alors l’extension, j’entre ma requête…

« Kebab Clermont-Ferrand » … Et hop, les données vont commencer à être collectées automatiquement. On est bien dans un cas de scraping pur et dur. Pas sûr que ce soit approuvé par Google, mais vu qu’ils ont autorisé cette extension sur leur Chrome Store, j’imagine qu’ils s’en fichent.

Une fois les données extraites, y’a plus qu’à télécharger le CSV et voilà ! Vous aurez un beau fichier tout beau avec toutes les coordonnées de ce que vous avez recherché.

Hello les copains,

J’espère que vous allez bien. Ici, ça va mieux. Avec le Covid, professionnellement c’était la catastrophe, mais j’ai travaillé très dur depuis juillet et ça y est, je sors enfin un peu la tête de l’eau, alors c’est cool. Korben.info va continuer à vivre et je ne serai pas obligé de tout arrêter. D’ailleurs, c’est en partie grâce à mes Patrons qui me soutiennent ! Merci les amis !

Comme je suis sur les rotules, je vais me couper un peu du net durant la période de Noël. En profiter pour lire, jouer à Age of Empires IV, coder un peu pour me détendre et pourquoi pas refaire un peu de musique. Bref, chiller… J’ai hâte !

Entre deux coups d’enduit et de ponçage (oui je suis encore dans les travaux jusqu’au cou), j’ai quand même trouvé le temps pour commencer la nouvelle saison de Dexter (New Blood) et franchement, ça commence pas mal.

Bon, je vous laisse, faut que j’aille faire la cuisine pour ma petite famille…

Enjoy !