从爬虫角度来说下360快视频事件

360快视频事件 最开始好像是东方华灯宴的视频被发现被盗用,然后众用户排查发现大量B站视频被快视频盗用,连用户和评论也大量照搬,并有很多B站用户发现使用B站的用户名、密码可以直接在快视频上登录一个账号。 详情可以看知乎问题页 如何看待360快视频大量盗用B站视频和用户个人信息数据? 他是怎么实现的 有网友是这样猜测的 A.360主动参与了针对用户群体个人信息数据库的盗窃和/或非法买卖行为; B.360一直在通过各种渠道(比如某些有名的“安全杀毒软件”)收集用户的录入信息,特别是用户名和密码; C.用户名和密码都是B站用户托梦告诉360的; D.今天天气真好。 以上来自如何看待360快视

继续阅读全文 »

websocket与爬虫

背景 写爬虫的目的应该就是为了拿到数据,或者说模拟某种操作 如果他使用的是http(s) 协议来传输数据的,那么我们就模拟http协议来发送数据 如果它使用的是websocket协议来传输数据的, 那么我们理所当然的就模拟websocket来发送数据~ 首先,我们需要了解什么是websocket websocket的介绍 WebSocket是一种在单个TCP连接上进行全双工通讯的协议。WebSocket通信协议于2011年被IETF定为标准RFC 6455,并由RFC7936补充规范。WebSocket API也被W3C定为标准。 WebSocket使得客户端和服务器之间的数据交换变得更

继续阅读全文 »

github如何创建ssh-key

背景 最近在写几个私有项目,每次提交都需要输入账号密码,很烦… 搜索发现如果使用ssh协议来提交的话,只要生成ssh key,就不需要输入账号密码了 本地ssh-key的创建 默认已经装好了git,如果没有安装的话,请百度如何安装 在命令行中输入下面命令 ssh-keygen -t rsa -C "你的邮箱地址" 如果提示找不到ssh-keygen 这个命令的话,请检查是否有安装git 以及是否要ssh-keygen加入环境变量 然后直接回车三连(三次回车) 然后 li* mac 等系统的同学 直接输入 cat ~/.ssh/id_rsa.pub 然后直接复制里面的所有的内容 w

继续阅读全文 »

傻逼的我

背景 前几天部门老大突然找到我,说因为我技术比较垃圾,所以不想和我续签了。(我还在试用期内) 然后我自己想了一晚上,觉得他说的一些地方我确实不足 然后就自己填了离职申请单 过两天发现,和我一起进去的二位同事也被开了(也都在试用期内)。。。 而且我之前所在的部门也辞退了5个人(一共应该18个人左右把) 发现和我一起进去的同事竟然有补偿金 然后就问了hr说,为啥不给我补偿金,hr说因为我自己垃圾,所以不给。。。 然后我就申请了劳动仲裁。。。 结果呢,我输了 原因是啥呢,因为我填了离职申请单!!! 只要填了离职申请单,仲裁老师说 打官司肯定是输的,除非你有证据证明是他们逼你填的…

继续阅读全文 »