Aujourd'hui, les réseaux sociaux occupent une place extrêmement importante dans la vie d'une personne moderne : ici, vous pouvez communiquer avec des amis, trouver des intérêts communs et même trouver de nombreuses informations utiles, ainsi que créer des groupes thématiques en contact. Le fleuron incontesté des réseaux sociaux nationaux est VKontakte. Le nombre de ses participants augmente littéralement chaque jour. Tout utilisateur enregistré utilisant ce service peut rechercher ses amis, camarades de classe et connaissances, publier des statuts et diverses informations intéressantes et simplement communiquer, et bien plus encore. Une attention particulière doit être accordée aux multiples groupes d'intérêt qui existent sur VKontakte. Les participants à de tels groupes peuvent partager leurs propres opinions sur une question donnée, recevoir rapidement les informations les plus importantes et les plus récentes sur des questions d'intérêt, et également être les premiers à connaître tous les événements et actualités du monde, du pays ou de la ville. .
Rechercher un groupe sur VK
Pour les utilisateurs enregistrés, vous devez trouver l'inscription "Communautés" sur la page du réseau social et recherchez en utilisant les options de catégorie à laquelle appartient le groupe qui vous intéresse.
Chaque utilisateur découvre de nouveaux groupes en envoyant des invitations, des nouvelles, à partir des messages de ses amis ou grâce à des recherches pratiques de requêtes. Vous pouvez trouver de nombreux groupes différents sur le service VKontakte, mais certains qui sont particulièrement populaires doivent être soulignés. Il faut notamment distinguer les groupes suivants :
- "Drôle et intéressant", "Positif" et d'autres comme eux (vous pouvez trouver ici des citations amusantes, des photographies, les derniers mèmes Internet, des images, ainsi que d'autres informations qui vous remonteront parfaitement le moral).
- Groupes de fans de « Comedy Club =) » et de KVN.
- Un grand nombre de groupes réunissant des connaisseurs de cinéma et de dessins animés. Il convient de souligner « Cinéma intéressant », « Cinema Blog », divers groupes de fans de séries télévisées, acteurs, musiciens, chanteurs, films.
- Basé sur des intérêts dans un certain domaine. Il peut s'agir de groupes de parents, de passionnés d'automobile, d'étudiants, de salariés d'entreprises et de certaines professions, de supporters de football). Ici, nous devrions souligner des groupes tels que : « Le football comme style de vie », « Notre Zenit ».
- Il faut ajouter à ce qui précède plusieurs groupes qui ne laisseront personne indifférent : « Villes abandonnées du monde » (des impressions particulièrement vives restent des photographies postées ici - il y a un sentiment de mystère, une envie de visiter ces lieux naît), le page "Événements intéressants à Saint-Pétersbourg" (cette page sera particulièrement intéressante pour les résidents de Saint-Pétersbourg et les invités de la ville, car des informations sur les événements intéressants, les légendes et les sites touristiques du nord de Palmyre sont publiées ici). Il existe un grand nombre de groupes enregistrés sur VKontakte, afin que chaque visiteur puisse en trouver un qui lui convient. De plus, il est possible de créer votre propre groupe.
En outre, il existe également des groupes un peu étranges, sans intérêts ni objectifs spécifiques. En règle générale, de telles associations sont créées afin d'échanger des citations, des blagues et des images accrocheuses. Par exemple, « un groupe de personnes qui tapent d’abord, puis se rendent compte qu’elles tapent en anglais et tapent à nouveau tout. » groupe et y inviter de nouveaux membres.
L’autre jour, nous avons réussi à réaliser une chose intéressante. Pour tous les groupes VKontakte comptant entre 5 000 et 10 000 (~ 100 000 groupes), un graphique complet a été construit dans lequel les poids des bords étaient égaux à l'intersection des audiences du groupe.
Tout d’abord, ce graphique est magnifique :
Deuxièmement, avec son aide, vous pouvez sélectionner rapidement des groupes sur un sujet donné. Par exemple, vous devez trouver des groupes sur le tricot. En utilisant le mot-clé « tricot », nous trouvons un groupe approprié, Tricot -Tricot en ligne-, Par exemple. Nous affichons les groupes auxquels il est associé :
Et nous répétons jusqu'à ce que nous en ayons marre ou jusqu'à ce que de nouveaux noms cessent d'apparaître.
Tricot. Dans ce monde, tout est lié... :
8.88% Société FIL
3.06% Chaîne de maman - pour les mamans créatives (CROCHETS !)
2.58%
2.30% Tricot -Tricot en ligne-
2.14% Boutique de laine en ligne "AZHUR"
1.94%
1.85% Magasin de laine - ღ VOTRE FIL ღ
1.76% Fil
1.72% Monde ajouré : connecté avec l'amour !
1.55%
Fil « Madame Vyazalkina » (fournitures pour travaux d'aiguille) :
2.49% Fil
2.37% Société FIL
1.42% Magasin de laine Eesti lõng (Kauni, Kauni)
1.39% Le fil Kauni est une légende estonienne. Tricot.
1.32% FIL BON MARCHÉ. CAOUTCHOUCS POUR LE TISSAGE DE BRACELETS.
1.26% Magasin de laine et d'artisanat KUDEL
1.24% Chapeaux tricotés et plus encore.
1.21% LOISIRS ET MAISON | COUTURE
1.18% Boutique de laine en ligne "AZHUR"
1.15% Spaghettis en fil
Un résultat similaire peut être obtenu en sélectionnant judicieusement les mots-clés pour la recherche : « tricot », « fil », « artisanat », « crochet ». Mais ils ne sont pas toujours faciles à réaliser.
Pour construire un tel graphique, plusieurs solutions techniques non évidentes ont été utilisées, dont j'aimerais parler.
Pour obtenir une liste complète des groupes d'une taille donnée, l'excellent site allsocial.ru a été téléchargé. Je me demande comment ils collectent ces données ? Parcourez simplement tous les index : vk.com/club1 , vk.com/club2,...? Seuls les groupes de taille moyenne avec un nombre d'abonnés de 5 000 à 10 000 personnes ont été retenus pour deux raisons : on ne peut pas attirer d'énormes publics comme MDK, mais, plus important encore, l'adhésion à eux ne véhicule pas de signal particulier, de tels groupes sont connecté à tout dans le monde.
Pour obtenir une liste des abonnés du groupe dans l'API VKontakte, il existe une méthode spéciale. Mais il permet de recevoir 1000 utilisateurs à la fois et seulement 3 fois par seconde. Et il a fallu mettre à niveau environ 1 000 000 000 d'utilisateurs, ce qui est beaucoup. Il s'avère que vous devrez attendre 3 à 4 jours si VK répond instantanément à chaque demande. C'est généralement tolérable, mais la note suivante dans la documentation m'a dérouté :
Outre les restrictions sur la fréquence des appels, il existe également des restrictions quantitatives sur les méthodes d'appel du même type. Pour des raisons évidentes, nous ne fournissons pas d’informations sur les limites exactes.
Dans notre cas, cette remarque est gênante, car il nous faudra faire 1 000 000 de requêtes. La méthode la plus cool vient à la rescousse ici exécuter. Un grand respect aux gars de VK pour lui. Je me demande si quelqu'un d'autre a quelque chose comme ça ? Le fait est que grâce à l'exécution, vous pouvez envoyer des programmes dans le langage spécial VKScript à Contact, y insérer plusieurs requêtes API et, éventuellement, une certaine logique. Dans mon cas, le programme ressemblait à ceci :
Renvoie [ API.groups.getMembers(id=1, offset=0, count=1000), API.groups.getMembers(id=1, offset=1000, count=1000), API.groups.getMembers(id=1, offset=2000, count=1000), API.groups.getMembers(id=1, offset=3000, count=1000), API.groups.getMembers(id=1, offset=4000, count=1000), API.groups .getMembers(id=1, offset=5000, count=1000), ... ];
Il ne peut y avoir plus de 25 appels à l'API dans un programme. Autrement dit, le nombre de demandes est réduit à 40 000 et, en théorie, l'interdiction peut être évitée. Chacune de ces demandes n'était plus exécutée instantanément, mais en environ 5 à 6 secondes, nous devions donc encore attendre. Oui, il serait possible de lancer le téléchargement dans plusieurs threads, mais ce serait effrayant. Après deux jours et demi, tout a été téléchargé et a occupé environ 10 Go sur mon disque.
Maintenant, la question se pose : comment insérer ces 10 Go dans la RAM et comment calculer l'intersection des audiences par paires pour 100 000 groupes. Ce qui aide, c'est le fait que chaque utilisateur est généralement membre d'un petit nombre de groupes (99 % des utilisateurs sont membres de moins de 15 groupes). Vous pouvez noter les contributions de chaque utilisateur aux intersections, puis additionner ces contributions. Supposons, par exemple, qu'il y ait deux utilisateurs : A et B, et trois groupes 1, 2 et 3. A est dans les trois, B est uniquement dans 1 et 3. A contribue à trois intersections : (1, 2), (1 , 3) et (2, 3), B - en un : (1, 3). En additionnant, nous obtenons que 1 et 3 se croisent par deux utilisateurs, le reste des groupes par un. Si vous ignorez techniquement les utilisateurs qui appartiennent à 15 groupes ou plus, vous devrez alors écrire environ 500 000 000 d'intersections, ce qui est bien mieux que lors d'une résolution frontale, où vous devrez compter 100 000 * 100 000 intersections.
Génial, le seul problème qui reste est la RAM. Heureusement, l'algorithme décrit correspond bien au paradigme de réduction de carte, c'est pourquoi un nano-hadup de 50 lignes a été créé et le calcul ressemblait à ceci : nous écrivons les groupes et les utilisateurs qui leur appartiennent dans deux colonnes :
Utilisateur de groupe 3953835 10 2065169 100001643 2112714 100001643 ...
Le résultat est un fichier d'environ 9 Go, triez-le en utilisant le tri Unix dans la deuxième colonne et voyez où se trouve Pavel Durov :
groupe utilisateur 2226515 1 37110020 1 38354466 1 43453499 1 60140141 1 60615047 1 64980878 1 1019652 10 ...
On lit le fichier, on regroupe le flux par la deuxième colonne, on garde en mémoire uniquement la liste des groupes d'utilisateurs, s'il y a moins de 15 groupes, on écrit toutes les correspondances dans un autre fichier :
Source cible 10000 10027193 9980615 9997141 9974 9976553 ...
Puisque le seuil a été choisi correctement, le fichier n'est pas trop volumineux - ~ 9 Go. Nous le trions sur deux colonnes :
source cible 10000 100000 10000 100000 10000 10009982 10000 100100 10000 100100 10000 10019194 10000 10019194 10000 1002 10000 1002 1 0000 1002...
Ensuite le fichier est lu, regroupé en deux colonnes, et l'intersection est immédiatement calculée. Pour les groupes 10000 et 100000 par exemple, il y a 2 utilisateurs. Cela peut être dit immédiatement ; il n’est pas nécessaire de stocker quoi que ce soit en mémoire.
Envoyer anonymement
L’autre jour, nous avons réussi à réaliser une chose intéressante. Pour tous les groupes VKontakte comptant entre 5 000 et 10 000 (~ 100 000 groupes), un graphique complet a été construit dans lequel les poids des bords étaient égaux à l'intersection des audiences du groupe.
Tout d’abord, ce graphique est magnifique :
Deuxièmement, avec son aide, vous pouvez sélectionner rapidement des groupes sur un sujet donné. Par exemple, vous devez trouver des groupes sur le tricot. En utilisant le mot-clé « tricot », nous trouvons un groupe approprié, Tricot -Tricot en ligne-, Par exemple. Nous affichons les groupes auxquels il est associé :
Et nous répétons jusqu'à ce que nous en ayons marre ou jusqu'à ce que de nouveaux noms cessent d'apparaître.
Tricot. Dans ce monde, tout est lié... :
8.88% Société FIL
3.06% Chaîne de maman - pour les mamans créatives (CROCHETS !)
2.58%
2.30% Tricot -Tricot en ligne-
2.14% Boutique de laine en ligne "AZHUR"
1.94%
1.85% Magasin de laine - ღ VOTRE FIL ღ
1.76% Fil
1.72% Monde ajouré : connecté avec l'amour !
1.55%
Fil « Madame Vyazalkina » (fournitures pour travaux d'aiguille) :
2.49% Fil
2.37% Société FIL
1.42% Magasin de laine Eesti lõng (Kauni, Kauni)
1.39% Le fil Kauni est une légende estonienne. Tricot.
1.32% FIL BON MARCHÉ. CAOUTCHOUCS POUR LE TISSAGE DE BRACELETS.
1.26% Magasin de laine et d'artisanat KUDEL
1.24% Chapeaux tricotés et plus encore.
1.21% LOISIRS ET MAISON | COUTURE
1.18% Boutique de laine en ligne "AZHUR"
1.15% Spaghettis en fil
Un résultat similaire peut être obtenu en sélectionnant judicieusement les mots-clés pour la recherche : « tricot », « fil », « artisanat », « crochet ». Mais ils ne sont pas toujours faciles à réaliser.
Pour construire un tel graphique, plusieurs solutions techniques non évidentes ont été utilisées, dont j'aimerais parler.
Pour obtenir une liste complète des groupes d'une taille donnée, l'excellent site allsocial.ru a été téléchargé. Je me demande comment ils collectent ces données ? Parcourez simplement tous les index : vk.com/club1 , vk.com/club2,...? Seuls les groupes de taille moyenne avec un nombre d'abonnés de 5 000 à 10 000 personnes ont été retenus pour deux raisons : on ne peut pas attirer d'énormes publics comme MDK, mais, plus important encore, l'adhésion à eux ne véhicule pas de signal particulier, de tels groupes sont connecté à tout dans le monde.
Pour obtenir une liste des abonnés du groupe dans l'API VKontakte, il existe une méthode spéciale. Mais il permet de recevoir 1000 utilisateurs à la fois et seulement 3 fois par seconde. Et il a fallu mettre à niveau environ 1 000 000 000 d'utilisateurs, ce qui est beaucoup. Il s'avère que vous devrez attendre 3 à 4 jours si VK répond instantanément à chaque demande. C'est généralement tolérable, mais la note suivante dans la documentation m'a dérouté :
Outre les restrictions sur la fréquence des appels, il existe également des restrictions quantitatives sur les méthodes d'appel du même type. Pour des raisons évidentes, nous ne fournissons pas d’informations sur les limites exactes.
Dans notre cas, cette remarque est gênante, car il nous faudra faire 1 000 000 de requêtes. La méthode la plus cool vient à la rescousse ici exécuter. Un grand respect aux gars de VK pour lui. Je me demande si quelqu'un d'autre a quelque chose comme ça ? Le fait est que grâce à l'exécution, vous pouvez envoyer des programmes dans le langage spécial VKScript à Contact, y insérer plusieurs requêtes API et, éventuellement, une certaine logique. Dans mon cas, le programme ressemblait à ceci :
Renvoie [ API.groups.getMembers(id=1, offset=0, count=1000), API.groups.getMembers(id=1, offset=1000, count=1000), API.groups.getMembers(id=1, offset=2000, count=1000), API.groups.getMembers(id=1, offset=3000, count=1000), API.groups.getMembers(id=1, offset=4000, count=1000), API.groups .getMembers(id=1, offset=5000, count=1000), ... ];
Il ne peut y avoir plus de 25 appels à l'API dans un programme. Autrement dit, le nombre de demandes est réduit à 40 000 et, en théorie, l'interdiction peut être évitée. Chacune de ces demandes n'était plus exécutée instantanément, mais en environ 5 à 6 secondes, nous devions donc encore attendre. Oui, il serait possible de lancer le téléchargement dans plusieurs threads, mais ce serait effrayant. Après deux jours et demi, tout a été téléchargé et a occupé environ 10 Go sur mon disque.
Maintenant, la question se pose : comment insérer ces 10 Go dans la RAM et comment calculer l'intersection des audiences par paires pour 100 000 groupes. Ce qui aide, c'est le fait que chaque utilisateur est généralement membre d'un petit nombre de groupes (99 % des utilisateurs sont membres de moins de 15 groupes). Vous pouvez noter les contributions de chaque utilisateur aux intersections, puis additionner ces contributions. Supposons, par exemple, qu'il y ait deux utilisateurs : A et B, et trois groupes 1, 2 et 3. A est dans les trois, B est uniquement dans 1 et 3. A contribue à trois intersections : (1, 2), (1 , 3) et (2, 3), B - en un : (1, 3). En additionnant, nous obtenons que 1 et 3 se croisent par deux utilisateurs, le reste des groupes par un. Si vous ignorez techniquement les utilisateurs qui appartiennent à 15 groupes ou plus, vous devrez alors écrire environ 500 000 000 d'intersections, ce qui est bien mieux que lors d'une résolution frontale, où vous devrez compter 100 000 * 100 000 intersections.
Génial, le seul problème qui reste est la RAM. Heureusement, l'algorithme décrit correspond bien au paradigme de réduction de carte, c'est pourquoi un nano-hadup de 50 lignes a été créé et le calcul ressemblait à ceci : nous écrivons les groupes et les utilisateurs qui leur appartiennent dans deux colonnes :
Utilisateur de groupe 3953835 10 2065169 100001643 2112714 100001643 ...
Le résultat est un fichier d'environ 9 Go, triez-le en utilisant le tri Unix dans la deuxième colonne et voyez où se trouve Pavel Durov :
groupe utilisateur 2226515 1 37110020 1 38354466 1 43453499 1 60140141 1 60615047 1 64980878 1 1019652 10 ...
On lit le fichier, on regroupe le flux par la deuxième colonne, on garde en mémoire uniquement la liste des groupes d'utilisateurs, s'il y a moins de 15 groupes, on écrit toutes les correspondances dans un autre fichier :
Source cible 10000 10027193 9980615 9997141 9974 9976553 ...
Puisque le seuil a été choisi correctement, le fichier n'est pas trop volumineux - ~ 9 Go. Nous le trions sur deux colonnes :
source cible 10000 100000 10000 100000 10000 10009982 10000 100100 10000 100100 10000 10019194 10000 10019194 10000 1002 10000 1002 1 0000 1002...
Ensuite le fichier est lu, regroupé en deux colonnes, et l'intersection est immédiatement calculée. Pour les groupes 10000 et 100000 par exemple, il y a 2 utilisateurs. Cela peut être dit immédiatement ; il n’est pas nécessaire de stocker quoi que ce soit en mémoire.
Envoyer anonymement
Comment trouver un groupe sur VK - les informations sont ouvertes. Mais dans certains cas, lorsqu'une personne n'a pas de page sur un réseau social ou que seul l'identifiant de la communauté est connu, l'action provoque des difficultés pour les personnes. Est-il possible de trouver le public souhaité sans inscription, le nom et où se trouvent les listes des groupes gérés, nous vous le dirons plus loin.
L'inscription n'est pas requise pour ce type de travail avec les communautés. La liste des associations non protégées par les paramètres de confidentialité est accessible à tous les internautes. Il existe deux façons de trouver un groupe VKontakte sans page de réseau social.
- Si vous connaissez le nom, accédez à n'importe quel moteur de recherche. Entrez le nom de la communauté dans la barre de recherche et appuyez sur « Entrée ». Les groupes populaires apparaissent généralement parmi les premiers résultats de recherche. Les communautés moins connues peuvent être recherchées via Yandex, limitant le cercle aux pages VK.
- Accédez à https://vk.com/communities. Écrivez le nom du groupe dans la barre de recherche et démarrez le processus. Les associations officielles et les millionnaires occupent les premières positions dans les listes de recherche, tandis que les pages publiques moins populaires devront être parcourues manuellement.
Vous ne vous souvenez plus du titre, mais vous souvenez-vous du texte de la publication sur le mur ou des hashtags utilisés ? Tapez-le dans la barre de recherche. Limitez votre recherche dans les paramètres à un réseau social, une demande précise, et dans 90% des cas la méthode fonctionnera.
Comment trouver un groupe sur VK par ID
Si l'identifiant de la communauté est connu, la tâche devient beaucoup plus facile. Dans ce cas, la recherche de groupe VKontakte est disponible pour les utilisateurs enregistrés et non enregistrés. Copiez l'identifiant et :
Veuillez noter que les communautés privées ne sont pas consultables. Vous ne pouvez accéder à ces sites que sur invitation de l'administrateur ; les étrangers ne voient pas les résultats dans les résultats de recherche.
Comment trouver un groupe VK d'où vous êtes parti
Pour découvrir une association abandonnée, il faudra passer un peu plus de temps et faire preuve de talents de détective. Sortie 4.
N'oubliez pas qu'aucune des méthodes ne garantit les résultats. Le succès dépend de la quantité d’informations dont vous vous souvenez et du temps écoulé depuis que vous avez quitté le public.
Comment trouver votre groupe en contact
Pour retrouver un groupe sur VK que vous avez vous-même créé et quitté, rendez-vous dans la rubrique « Groupes ». Parmi les onglets « Toutes les communautés » et « Gestion » en haut, sélectionnez le deuxième. Les communautés que vous gérez apparaîtront dans la liste.
Dans certains cas, les publics abandonnés ne sont pas affichés dans la « Gestion ». Ensuite, vous devrez vous souvenir des textes des publications, du nom ou de l'identifiant exact, des amis qui faisaient également partie de la communauté et rechercher la page manuellement.
Rechercher un administrateur de groupe
La méthode ne fonctionne pas toujours, mais elle vaut la peine d'être essayée. Pour rechercher un administrateur :
- ouvrez la page publique qui vous intéresse, recherchez une discussion et copiez le lien vers l'un des sujets ;
- créer une nouvelle communauté ou utiliser une communauté existante ;
- Cliquez sur le bloc « Liens » – « Ajouter un nouveau » et collez l'adresse de la discussion depuis le presse-papiers.
Pour rechercher des communautés :
1. Saisissez le nom de la tâche dans ce champ, sous ce nom elle sera affichée dans l'historique de toutes les tâches de la version Pro, et sous ce nom les résultats seront téléchargés dans les versions Flash et Pro.
2. Spécifiez les données à analyser :
- Saisissez un mot-clé ou une expression au cas nominatif par lequel vous souhaitez rechercher des communautés. Veuillez noter que les recherches multi-mots ne sont pas possibles au sein d'un module.
- Spécifiez s'il faut ou non rechercher par occurrence exacte d'une expression. Lorsque vous sélectionnez « Occurrence exacte d'une expression recherchée », les résultats incluront uniquement les communautés dont les noms contiennent l'expression ou la forme de mot spécifiée, et non aucun mot de l'expression spécifiée ou un mot avec une terminaison différente.
- Dans la version Flash, vous pouvez en outre spécifier une recherche uniquement pour les communautés officielles, c'est-à-dire vérifiées.
- Sélectionnez le type de communauté que vous souhaitez rechercher : communauté, page publique ou événement - ou sélectionnez « n'importe lequel » si le type de communauté n'est pas important. Dans la version Flash, vous pouvez également trouver les futures réunions.
- Déterminez l'emplacement géographique des groupes et des événements, car les pages publiques ne contiennent des informations géographiques que si elles ont été créées en tant que groupes puis déplacées vers le public.
- Définir l'ensemble des communautés par le nombre d'utilisateurs, le taux de croissance, le rapport entre le trafic quotidien et le nombre d'utilisateurs, le rapport entre le nombre de likes et le nombre d'utilisateurs, le rapport entre le nombre de commentaires et le nombre d'utilisateurs , le rapport entre le nombre de messages dans les discussions et le nombre d'utilisateurs. Autrement dit, les communautés collectées seront classées par ordre décroissant en fonction du paramètre sélectionné. Disponible lors d'une recherche sans spécifier de ville. Cela doit être fait avant le début de l'analyse.
- Filtrez la liste par nombre d'abonnés. Les communautés qui n’atteignent pas les nombres minimum et maximum d’abonnés spécifiés ne seront pas incluses dans l’échantillon. Cela doit être fait avant le début de l'analyse.
- Filtrez la liste par mots-clés qui ne doivent pas figurer dans le nom de la communauté (entrez séparés par un espace).
- Filtrez les communautés trouvées par date au plus tard à laquelle le dernier message de la communauté doit être publié. Pour que cette option devienne active, vous devez attendre que la tâche soit terminée et cliquer sur « Rechercher les dates des dernières publications ».
Si vous utilisez la version Pro, un message de fin sera envoyé à l'e-mail que vous avez fourni lors de l'inscription. Si vous êtes dans la version Flash, vous devez attendre la fin du module pour enregistrer les résultats.
