[PYTHON] Un briefing sur la colère provoquée par le grattage

Je suis diplômé de 15 ans. J'ai entendu dire que c'était normal d'être une personne apparentée, alors j'aimerais vous présenter l'histoire de la colère du grattage à l'époque du SFC. image.png

Livre final

Nous rendrons compte des résultats du grattage du site de bouche à oreille de l'entreprise et des données échangées sur le serveur du campus.

Quand se mettre en colère

Cela s'est produit lorsque je travaillais. Je suis entré au SFC et j'ai commencé à programmer, et le terme "période de travail" est la période où je viens de me débarrasser des bases des émotions, des obpros, des pros du jeu, etc. et j'ai dit "j'ai bien compris la programmation". .. En particulier, j'étais bon en analyse de données, et c'était à une époque où je faisais de la recherche et des loisirs pour collecter des données sur le Web en utilisant une technique appelée grattage et les analyser et les visualiser.

Contexte de la colère

Keio Gijuku, en particulier SFC, s'appelle lui-même «Bureau pratique». L'utilisation pratique des techniques de grattage et d'analyse de données a toujours été dans mon esprit. À ce moment-là, comme mentionné ci-dessus, j'étais en période d'emploi, alors j'ai eu l'idée: «Oui, nous allons travailler dans les sciences».

À cette époque, il y avait un site de bouche à oreille d'une entreprise que j'utilisais souvent, et ce site avait beaucoup de données quantitatives et qualitatives, pour ainsi dire, c'était un «journal alimentaire d'entreprise». Les étudiants à la recherche d'un emploi ont pu utiliser gratuitement les fonctions payantes pendant un certain temps, ce qui a été très utile. J'ai décidé de mettre cela dans une base de données, de créer un moteur de recommandation et de passer à la mise en œuvre.

Le grattage est une technique assez polyvalente. Alors que les gens en général copient et collent des données sur le Web, toutes les données sont extraites. Très drôle.

Cause de colère

Jusque-là, ce n'était pas mal. (Peut-être que ce n'était pas en termes d'utilisation) Cependant, quand j'étais en bonne forme, je l'ai donné au serveur du campus avec des autorisations accessibles à tous. De plus, je l'ai envoyé à un ami par mention sur Twitter.

C'était l'exploitant du chantier de changement d'emploi qui éludait cela. DM est venu ce jour-là et a dit: «Effacez et écrivez un mémorandum que j'étais mauvais.

Contenu du mémorandum

«Ce que j'ai fait était un acte qui dépassait les conditions d'utilisation. ――Nous paierons le montant total des dommages à la société d'exploitation en raison du partage de ces données.

C'était un contenu qui mettait les étudiants mal à l'aise. On m'a demandé de soumettre un document qui semble être juridiquement contraignant, qu'il s'agisse d'un sceau ou d'un sceau enregistré.

Bien sûr, aucun dédommagement n'a été réclamé jusqu'à présent, mais j'étais chasseur d'emploi à l'époque, ce qui m'a mis longtemps mal à l'aise.

L'efficacité de ce mémorandum n'est pas encore bien comprise. Pour être honnête, j'ai toujours le mauvais pressentiment de jouer beaucoup de pouvoir pour les étudiants. (Bien sûr, du point de vue d'une entreprise maintenant, je pense que c'est nécessaire du point de vue de la protection des parties prenantes telles que les actionnaires et les employés.)

En fait, les lois sur le grattage ont d'autres subtilités, comme la question de la charge du serveur de l'autre côté. Pour ceux qui font du grattage au quotidien, il est recommandé de vérifier au moins les dispositions légales sur les sites suivants et d'effectuer un grattage prudent. Le grattage est-il illégal? Un avocat explique trois problèmes juridiques et contre-mesures en 5 minutes | Topcourt International Law Office

Pour les pages qui ne sont accessibles qu'après la connexion, nous ne les avons pas grattées avec une certaine considération.

Parler plus tard

Je suis désolé de le dire maintenant, mais j'ai personnellement continué à utiliser les données de grattage et le moteur de recommandation a été un grand succès (même si c'était une mise en œuvre très minable et primitive). Comme j'étais étudiant sans axe, quand j'ai obtenu un emploi, j'ai émis des ES du haut dans l'ordre recommandé, et finalement j'ai eu une offre d'emploi et un emploi dans l'entreprise recommandée vers la 3e place. (En passant, c'est une interprétation que j'ai pu approcher de la [fenêtre aveugle] de la fenêtre de Johari (https://lightworks-blog.com/johari-window#3-3))

Au fait, mon compte n'a pas été interdit pour une raison quelconque.

finalement

Ce fut une fin heureuse à la fin, mais j'ai eu peur lorsque le mémorandum a été rédigé. J'espère sincèrement que vous gérerez les données et les scripts en toute sécurité et que vous effectuerez des analyses intéressantes.

Recommended Posts

Un briefing sur la colère provoquée par le grattage
Remarques sur la personnalisation de la classe de liste de dict
Remarque sur le comportement par défaut de collate_fn dans PyTorch
Remarque sur la façon de vérifier la connexion au port du serveur de licences
Observation en virgule fixe de données spécifiques sur le Web en exécutant automatiquement un navigateur Web sur le serveur (Ubuntu16.04) (2) -Web scraping-
Remarques sur l'activation de PostgreSQL avec Django
[Python] Une barre de progression sur le terminal
Un mémo que j'ai essayé le tutoriel Pyramid
Environnement d'exécution sur le Web par "Project Jupyter"
Écrire une note sur la version python de python virtualenv
Calculer la probabilité de valeurs aberrantes sur les moustaches de la boîte
Obtenez la liste "J'aime" de Qiita en grattant
Une note sur la nouvelle classe de base de style
Créez une interface graphique sur le terminal à l'aide de curses
J'ai fait un peu de recherche sur la classe
Une note sur l'implémentation de la bibliothèque qui explore les hyperparamètres à l'aide de l'optimisation bayésienne en Python