机器学习人工学weekly-2018/1/14
注意下面很多链接需要科学上网，无奈国情如此1.大炮GaryMarcus(NYU教授，前UberAIlab的director)发长文讨论深度学习的各种问题，比如需要大量数据，容易被攻击等等链接：https://arxiv.org/ftp/arxiv/papers/1801/1801.00631.pdf2.JustinTimberlake新出的MVFilthy，背景是2028年吉隆坡的AI大会（当然是虚构的），如果机器人真的有这种dexterity就好了视频：https://www.youtube....
教程 [2026-05-02]
分享】java缓存技术详解
一、缓存是什么？Cache高速缓冲存储器，其中复制了频繁使用的数据以利于快速访问。位于速度相差较大的两种硬件/软件之间，用于协调两者数据传输速度差异的结构二、缓存有哪几类？1、基于web应用的系统架构图2、在系统架构中，不同层级之间为了加快访问速度，缓存都可以存在。操作系统磁盘缓存->减少磁盘机械操作数据库缓存->减少文件系统I/O应用程序缓存->减少对数据库的查询Web服务器缓存->减少应用服务器请求客户端浏览器缓存->减少对网站的访问三、操作系统缓存1、文件系统...
教程 [2026-05-02]
黑客黑产攻防：1秒定生死的幽灵战
黑客黑产攻防：1秒定生死的幽灵战；你在前端秒杀，他们在后台博弈；犯案模式更简单粗暴，随着国内互联网金融、人工智能和大数据等产业继续深化发展，互联网为实体产业转型升级所提供的帮助越来越明显。但在另一面，潜伏在网络暗处的黑产势力也不断升级作案手法，从传统的病毒木马和电话诈骗等模式，向更为先进的撞库拖库、精准诈骗等模式发展，黑产上游的危害显得愈发严重。此外，黑产生态中的内部分工也进一步细化，出现了更为商业化运作的岗位。1000毫秒，即1秒钟，是一位消费者网购下单时能忍受的等待时间。在你的耐心范围内，是...
教程 [2026-05-02]
通过Chocolatey软件包管理器安装.NET Core
在Linux的世界里，有了yum/apt-get百分之九十的软件都可以通过它来安装管理。但是在Windows系统上，装个软件还是挺折腾的。比如我要装个Chrome浏览器，我先得打开IE浏览器吧，我还打不开Chrome的官网吧，得百度吧，。没经验的兄弟还要被那些坑二婶的广告链接忽悠一下吧。用某卫士或者某管家的美女，你们有福可以统一管理，统一安装。当然Windows上现在也有了专门负责软件包管理的Chocolatey。今天我们就来演示下如何通过Chocolatey安装.NETCore的最新版本。1....
教程 [2026-05-02]
给那些新入门Python的同学推荐几本好书
中国大学极少开设Python课程，故而国内Python程序员多属自学，那么你在自学Python的过程中有哪些值得分享的经验或者有趣的体验呢？我就是完全通过网上资源自学python的。从在校时候用python接活赚零花钱，到在创业公司用python开发商业网站和游戏后台。所有遇到的问题，几乎都可以从互联网上的公开资源找到答案.其实python非常适合初学者入门。相比较其他不少主流编程语言，有更好的可读性，因此上手相对容易。自带的各种模块加上丰富的第三方模块，免去了很多“重复造轮子”的工作，可以更快...
教程 [2026-05-02]
如何使用Java访问集成OpenLDAP并启用Sentry的Impala和Hive
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。Fayson的github：https://github.com/fayson/cdhproject提示：代码块部分可以左右滑动查看噢1.文档编写目的内容概述1.环境准备2.示例代码编写及说明3.代码测试测试环境1.CM和CDH版本为5.13.12.CentOS6.53.ImpalaJDBC驱动版本2.5.41.1061前置条件1.集群未启用Kerberos2.Impala已集成OpenLDAP3.集群已启用Sentry2.环境准备1...
教程 [2026-05-02]
机器学习中样本比例不平衡的处理方法
原创干货文章第一时间送达！推荐阅读时间：5min~12min主要内容：机器学习中样本比例不平衡的处理方法在机器学习中，常常会遇到样本比例不平衡的问题，如对于一个二分类问题，正负样本的比例是10:1。这种现象往往是由于本身数据来源决定的，如信用卡的征信问题中往往就是正样本居多。样本比例不平衡往往会带来不少问题，但是实际获取的数据又往往是不平衡的，因此本文主要讨论面对样本不平衡时的解决方法。样本不平衡往往会导致模型对样本数较多的分类造成过拟合，即总是将样本分到了样本数较多的分类中；除此之外，一个典型...
教程 [2026-05-02]
你看到的最直白清晰的CNN讲解
这篇博客介绍的是深度神经网络中常用在图像处理的模型——卷积神经网络（CNN），CNN在图像分类中（如kaggle的猫狗大战）大显身手。这篇博客将带你了解图像在计算机中是如何存储的，什么是卷积，卷积神经网络的四个重要环节（局部感知、参数共享、多卷积核、池化），不会涉及复杂的公式。计算机是怎么存储图片的为了更好的理解计算机对图片的存储，我找了一个非常简单的图片，是一个385385（像素）的jpg格式的图片，如图1所示，这个图片就是一个白色为底色，数字为黑色的数字“2”，也就是说，图片中只涉及两种颜...
教程 [2026-05-02]
用python爬取自己的朋友圈，得到的信息超过你的想象！
微信作为一款拥有将近9亿用户的超级APP，已经成为很多人生活中不可或缺的一部分，聊天、分享动态、阅读资讯、购物支付……微信就像一张移动互联网的身份证，拥有它就能在移动互联的世界行止由心。本文作者利用Python爬取了自己微信好友的信息后，像打开了一扇新世界的大门。一起来围观他的爬取过程吧。昨晚偶然了解到Python里的itchat包，它已经完成了wechat的个人账号API接口，使爬取个人微信信息更加方便。鉴于自己很早之前就想知道诸如自己微信好友性别比例都来自哪个城市之类的问题，于是乎玩心一起，...
教程 [2026-05-02]
Python大牛一步步教你用Python制作迷宫GIF
安装可以通过PyPi安装或者通过Git为什么你需要这个库？问：我是一个Python迷，并且对迷宫的生成和迷宫解决的办法非常感兴趣。我很羡慕别人能够做出生成迷宫的动画。我如何能够用Python自己做一个迷宫动画，然后把我的成果展示给其他人呢？（我知道tkinter,pyglet和pyqt，但是它们很难发布给别人看）答：现在，你可以使用库gifmaz来做这件事了，它有一些很好的特性：大家遇到啥问题都会在里面交流！而且分享零基础入门料资料web开发爬虫资料一整套！是个非常好的学习交流地方！也有程序员大...
教程 [2026-05-02]
特征选择常用算法
1综述(1)什么是特征选择特征选择(FeatureSelection)也称特征子集选择(FeatureSubsetSelection,FSS)，或属性选择(AttributeSelection)，是指从全部特征中选取一个特征子集，使构造出来的模型更好。(2)为什么要做特征选择在机器学习的实际应用中，特征数量往往较多，其中可能存在不相关的特征，特征之间也可能存在相互依赖，容易导致如下的后果：特征个数越多，分析特征、训练模型所需的时间就越长。特征个数越多，容易引起“维度灾难”，模型也会越复杂，其推广...
教程 [2026-05-02]
大数据处理必备的十大工具！
大数据的日益增长,给企业管理大量的数据带来了挑战的同时也带来了一些机遇。下面是用于信息化管理的大数据工具列表：1.ApacheHiveHive是一个建立在hadoop上的开源数据仓库基础设施，通过Hive可以很容易的进行数据的ETL,对数据进行结构化处理,并对Hadoop上大数据文件进行查询和处理等。Hive提供了一种简单的类似SQL的查询语言—HiveQL,这为熟悉SQL语言的用户查询数据提供了方便。2JaspersoftBI套件Jaspersoft包是一个通过数据库列生成报表的开源软件。行业...
教程 [2026-05-02]
Python人工智能之图片识别，Python3一行代码实现图片文字识别
我们以识别诗词为例下面是我们要识别的图片先看下效果图我们运行代码后识别的结果,有几个字没有正确识别，但是大多数字都能识别出来。一行代码就能识别图片，我们背后要做些准备工作的这里我们需要用到两个库：pytesseract和PIL同时我们还需要安装识别引擎tesseract-ocr下面就来讲讲这几个库的安装，因为只有这几个库安装好以后Python才能实现一行代码实现图片文字识别一，pytesseract和PIL的安装安装这两个包可以借助pip-1，命令行安装pipinstallPILpipinsta...
教程 [2026-05-02]
如何实现大型网站架构设计的负载均衡
负载均衡（LoadBalancing）负载均衡建立在现有网络结构之上，它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。大型网站负载均衡的利器全局负载均衡系统（GSLB）内容缓存系统（CDN）服务器负载均衡系统（SLB）DNS域名解析的基本过程最初的负载均衡解决方案（DNS轮询）优点基本上无成本，因为往往域名注册商的这种解析都是免费的；部署方便，除了网络拓扑的简单扩增，新增的Web服务器只要增加一个公网IP即可缺点健康检查，如果...
教程 [2026-05-02]
2017 年度数据库：PostgreSQL 实至名归
来源：oschinawww.oschina.net/news/92308/postgresql-is-the-dbms-of-the-year-2017DB-Engines网站宣布PostgreSQL为2017年度数据库管理系统。DB-Engines表示，PostgreSQL在2017年的数据库排名中，比其他监测到的341个数据库管理系统都更受欢迎。因此，决定宣布PostgreSQL为2017年的年度DBMS。计算结果基于当前（2018年1月）分数和2017年1月差值获得。最终的结果代表了一个产...