一个简单的node爬虫踩坑之路
一个简单的node爬虫踩坑之路准备工作最近在看爬虫相关的文章，偶然想起来尝试一下用node来实现一个简单的爬虫。但是爬别的多没意思，当然是爬美女图片啊。。。这大概node里面造的最多的轮子了。于是，我选取了下面的地址：美女图片戳我，简单分析后，我的目标是通过爬取首页的轮播图，然后爬取轮播图的直链后面的详情大图，并按照图片名称存到指定的文件夹中。大致流程是下面这个样子的：看起来挺简单的，选用的技术方案是：:请求库:创建文件夹:控制并发请求:Dom操作库:内置核心文件读写库最终的效果源码：划重点1....
教程 [2026-05-05]
使用深度学习自动识别限速标志：这里有一份Keras和TensorFlow教程
原文来源：Medium作者：ImaadMohamedKhan「雷克世界」编译：嗯~阿童木呀、多啦A亮在我来到德国之前，我对德国道路上没有车速限制的事感到着迷。令我失望的是，几乎所有地方都有限速。公路（高速公路）上只有一些区域被指定为无限速区域，汽车和其他车辆可以测试其引擎极限。如果一个司机正在超速行驶，他突然进入一个必须遵循一定速度限制的区域，他将如何操作？解决这个问题的一种方式，也是最常见的方式是驾驶员手动刹车并减少加速度。但是，我们现处于2017年，电脑可以识别比猫和狗更多东西！所以让我们试...
教程 [2026-05-05]
VAIN：Attentional Multi-agent Predictive Modeling
HoshenY.VAIN:AttentionalMulti-agentPredictiveModeling[J].arXivpreprintarXiv:1706.06122,2017.原文：https://arxiv.org/pdf/1706.06122.pdf简介：这篇文章来自多agent领域，主要讲述在其它agent的影响下，当前agent的状态如何进行更新。在本文中，作者提出了一种attention模型，每个agent的状态预测是由所有agent信息的加权整合和自身状态信息的交互完成的。这...
教程 [2026-05-05]
元学习（一）
学习麒麟之角的第14篇原创文章1.什么是元学习?很多人在学习编程的时候，都会在网上找各种各样的入门书籍，从入门到精通的教程，但大部分人都是直接从入门到放弃，原因何在呢？我想大部分都是没有学习如何学习。最初听到这个例子是从李笑来那里听到的，然后慢慢发现他说的确实有道理，但是有道理没有用呀，关键还是靠实践。今年六月份，大三就基本已经过去了，在考虑是考研还是找工作的过程中，最终还是选择了找工作。原因在此不细说，总之，相比于老师面对面教，我更喜欢自己慢慢琢磨思考，自己找资料学习。由于我学的是数学，目前人...
教程 [2026-05-05]
Jira入门教程 敏捷开发管理（一）
#简介Jira是Atlassian公司出品的一款事务管理软件。无论是“需求”，还是“BUG”，或是“任务”，都是“事务”的一种，所以Jira可以胜任非常多的角色：需求管理、缺陷跟踪、任务管理等等……因为Jira提供了专门的Scrum视图和Kanban视图，所以特别适合敏捷开发团队使用。大型互联网公司如LinkedIn、Facebook、eBay等内部都在使用Jira。Jira在国内的销售价格相当贵，而且没有永久授权，只能年付，CSDN的报价最低18000元（25用户）。推荐直接去官网购买，10人...
教程 [2026-05-05]
python数据处理实战-自动统计mysql数据库数据表每天数据量
日常报表统计,日总量,日增量不可避免,这篇文章我们从实际应用出发,从逻辑思考到最后写出代码,一步步分析拆解一.表结构设计既然想统计每一张表每天的数据量,后续则可以计算每个表的增量,因此数据表,数据量,日期是必带的字段,除此之外,还要从业务角度去思考,大多数情况下每一张表都是代表业务里的一个指标,表注释往往是代表了对这个表的简单的功能介绍,因此我们也要加上表注释这个字段,再去细想一下,如果公司有多个数据库,如果我们只统计表的数据,没有标明这张表存在哪个数据库当中,如果我们根据数据库查询的时候就无法...
教程 [2026-05-05]
Python数据类型之字符串第三季
Hello，各位小伙伴们这个周末过的怎么样？常老师可是没闲着出去浪了一天，整整一天！除了感叹光阴飞度以外内心还掠过一丝愧疚之情！浪费时间，就是犯罪！那么我们就赶紧言归正传，看看今天我们要一起探讨哪些新知识呢？Python字符串的格式化大家可能也已经看到了字符串在本系列课程中常老师已经和大家一起探讨了好几节课了何时为什么呢？？大家别嫌磨叽（同音可能不同字）啊因为字符串在Python中真的太重要了我们以后会需要用大量的时间去和Python中的字符串亲密接触所以学好字符串是很重要的那么，今天我们来讲=...
教程 [2026-05-05]
无惧双十二Or 黑五，这些 MySQL 性能调优技巧看过来
摘要：针对购物旺季网站流量会对数据库造成的压力，作者给出了MySQL性能调优的一些技巧，这些技巧极具参考价值，通过这些调优，可以有效避免因为流量过大造成服务器宕机，从而给企业造成经济损失。以下是译文万圣节已经过去很久了，该是把注意力集中在即将到来的假日季节的时候了。首先是感恩节，接着就是黑色星期五和网络星期一，最终在圣诞节/节礼周（从12月26日的节礼日开始，到12月31日的除夕结束为期六天或更长时间。这个词是由零售业在2000年代中期左右发明的，试图延长他们的节礼日销售）达到购物高潮。对于企业...
教程 [2026-05-05]
来仿一仿retrofit
新媒体管家关键时刻，第一时间送达！为什么要重复造轮子在开发领域有一句很流行的话就是不要重复造轮子，因为我们在开发中用到的很多东西早已有很多人去实现了，而且这些实现都是经过时间和开发者检验过的，一般不会遇到什么坑，而如果我们自己去实现的话，那不仅会增加工作量，最大的隐患还是我们并不能预见以后是否会遇到大坑。不过大家注意了吗？上面不要重复造轮子的一个前提是开发中，是的，这句名言在开发中是适用的，那在学习阶段的?我可以大概的告诉你-忘记这句话！为什么不要重复造轮子不适合在学习阶段使用呢?如果我们在学习...
教程 [2026-05-05]
SEO之404页面应该怎么做？
404页面是什么？404是网页反馈的状态码之一，4开头的状态码是指用户错误，5开头的是服务器错误。而404页面就是当用户提交信息后服务器无法回应或者反馈信息就会出现404页面。主要原因就是用户提交了错误信息，或者原内容没移动或者删除导致。404页面的主要作用：404主要是反馈给用户所请求的也面错误或者不存在的同时不是让用户离开而是继续浏览其他页面。目前很多的空间后台都是可以设置404页面，如果设置不了网上的方法还是非常的多的。这里简单说一个方法（Apache服务器404页面建立方法）：很简单就是...
教程 [2026-05-05]
互联网＋的到来
互联网+”是互联网思维的进一步实践成果，推动经济形态不断地发生演变，从而带动社会经济实体的生命力，为改革、创新、发展提供广阔的网络平台。通俗的说，“互联网+”就是“互联网+各个传统行业”，但这并不是简单的两者相加，而是利用信息通信技术以及互联网平台，让互联网与传统行业进行深度融合，创造新的发展生态。它代表一种新的社会形态，即充分发挥互联网在社会资源配置中的优化和集成作用，将互联网的创新成果深度融合于经济、社会各域之中，提升全社会的创新力和生产力，形成更广泛的以互联网为基础设施和实现工具的经济发展...
教程 [2026-05-05]
每日一学之socket编程（三）
图片来自于百度图片NIO的新特性Buffer前两期我们主要讲述了关于socket连接的问题，这期我们主要说说数据的问题。自JDK1.4开始，Java提出了NIO的概念。其中有一个很重要的特性叫做面向缓冲，在整个NIO当中，所有操作都是以缓冲区进行的。认识和使用Buffer什么是BufferBuffer就是缓冲区，对，其实它的功能就是字面意思。创建一个缓冲区，将数据先写或是先读到缓冲区，可以在缓冲区对数据进行操作。Buffer种类ByteBufferCharBufferDoubleBufferIn...
教程 [2026-05-05]
如何对机器学习代码进行单元测试？
作者｜ChaseRoberts译者｜庄道玉编辑｜Emily目前，关于神经网络代码，并没有一个特别完善的单元测试的在线教程。甚至像OpenAI这样的站点，也只能靠盯着每一行看来思考哪里错了来寻找bug。很明显，大多数人没有那样的时间，并且也讨厌这么做。所以希望这篇教程能帮助你开始稳健的测试系统。首先来看一个简单的例子，尝试找出以下代码的bug。看出来了吗？网络并没有实际融合（stacking）。写这段代码时，只是复制、粘贴了slim.conv2d(…)这行，修改了核（kernel）大小，忘记修改实...
教程 [2026-05-05]
动态神经网络工具包Dynet
作者｜Murat译者｜陈亮芬编辑｜Emily基于诸如TensorFlow等几种流行工具包的编程模型使用的是静态声明方法，这些工具包将网络架构的声明和执行进行了分离。静态声明优点众多。在定义了计算图后，我们可以通过多种方式对其进行优化，以便尽可能快地完成后续的重复执行计算。而且，以在TensorFlow中的应用为例，静态声明也简化了跨多个设备的计算分布。但即便如此，静态声明在以下几种情况下依旧有不便之处。可变大小的输入可变结构的输入非默认的推理算法可变结构的输出当然，如果计算图可以表示在声明时间内...
教程 [2026-05-05]
网站性能测试指标详解
常用的网站性能测试指标有：吞吐量、并发数、响应时间、性能计数器等。并发数并发数是指系统同时能处理的请求数量，这个也是反应了系统的负载能力。响应时间响应时间是一个系统最重要的指标之一，它的数值大小直接反应了系统的快慢。响应时间是指执行一个请求从开始到最后收到响应数据所花费的总体时间。吞吐量吞吐量是指单位时间内系统能处理的请求数量，体现系统处理请求的能力，这是目前最常用的性能测试指标。QPS（每秒查询数）、TPS（每秒事务数）是吞吐量的常用量化指标，另外还有HPS（每秒HTTP请求数）。跟吞吐量有关...