前言 上一篇我们说通过 mini batch 的方式来为梯度下降算法增速。 这次说一说指数加权平均。 它同样是用来给梯度下降增速的。 在我们的正常的梯度下降中，不论是 mini batch 还是 full batch，梯度下降的效果大概是下面这个样子的。 梯度下降算法就像是上面这个图一样，像一个碗一样。这是我们优化成本函数 J 的方式，不停的更新 w 和 b 的值。让函数移动到最下面的那个红色的点...

回顾 之前我们讲到了一些在训练模型的时候用到的超参数，例如上一次说的 L2 正则， 在过拟合的场景中增加 L2 的值有助于减小网络的复杂度。 还有诸如学习率， 在梯度下降中，每一次迭代的下降的步长是学习率乘以成本函数对 w 的导数。所以如果我们想让算法训练的快一点，调高学习率可以有效的减少迭代次数。 诸如此类的还有迭代次数，激活函数的选取等等。今天我们说一下 mini batch 什么是 mini...

测试集与训练集 看上面的图，这是一个逻辑回归算法的 DAG(有向无环图)，它是这个二分类算法的简单应用流程的展示。 可以看到我们在采集完数据并做过处理后，会把数据进行拆分。 训练集作用训练模型，而测试集会被输入到模型中来评估模型的性能。这是我们测试人工智能服务的最常用方式， 通过这个流程会产生一个模型的评估报告，如下： 当然这种拆分是有一定的规则的，如果数据集比较小，那么一般遵循 7：3 的经验拆...

回顾 之前我们已经学过了逻辑回顾和浅层的神经网络，下面我们简单回顾一下。 上面是一个逻辑回归的流程，我们输入样本特征，得到一个预测值。 这就是一个最简单的神经网络 (只有一个节点的神经网络)。 那么扩展开来我们看一下神经网络是什么样子的。 先来看我们学到的浅层神经网络，也就是只有一个隐藏层的神经网络。 这是一个单隐藏层的的神经网络。 最左边的事输入层 (输入样本特征)，最右边的是输出层 (输出预测...

什么是神经网络 根据上篇帖子，我们知道了逻辑回归这种 2 分类算法。 严谨的说逻辑回归就是只有一个神经单元的神经网络。 而神经网络就是很多个层次的逻辑回归组成的。回顾一下在讲房价预测的例子中我们说求一个函数：y=wx +b，其中 x 是特征向量，y 是预测值。逻辑回归要不停的迭代变换参数 w 和 b 的值以找到最合适的参数来让预测值和实际值相差最小。 在那个例子中我们只有房屋面积这一个特征。 但实...

人工智能定义 人工智能 = 大数据 + 机器学习。 我理解的现阶段的人工智能是使用机器学习算法在大量的历史数据下进行训练，从历史数据中找到一定的规律并对未来做出的预测行为。比如我们曾经给银行做过反欺诈项目。 以前在银行里有一群专家，他们的工作就是根据经验向系统中输入一些规则。例如某一张卡在一个城市有了一笔交易，之后 1 小时内在另一个城市又有了一笔交易。这些专家根据以前的经验判断这种情况是有盗刷的...

背景 好久没写文章了， 自从换工作以后整天就忙着熟悉新公司的项目了。 趁着这两天有时间我就继续更新一下大数据测试系列。 上一次我们聊过流计算场景一般的测试方法，而流计算是在线业务。 那今天我们聊聊离线业务的场景。 不知道大家有没有接触过大数据平台产品， 这类产品以 TO B 公司居多， 当然也有一些大厂内部也会有大数据平台去支撑业务线， 比如阿里的好像叫 odps 吧（有点忘了）， 腾讯也有 tb...

背景 当我们使用 Locust 做性能压测的时候，压测的过程和展示如下： 其中波动图是非持久化存储的，也就是刷新后，波动图就清空了。尽管 Statistics 中显示的信息比较完整，但是都是瞬时值，并不能体现出时序上的变化。像 Failures、Exceptions、Slaves 分在不同的 tag 查看起来也比较麻烦。Locust 的测试报告也只有简单的 csv 文件，需要下载。 从上面我们可以...

一、了解人工智能 1.1、对人工智能的理解： 人工智能（AI）是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学（定义）。**人工智能利用机器学习技术**，通过对现有的经过处理（筛选、消噪、过滤等）的数据，不断进行矫正（设置阀值等方法）机器模型的输出，此过程称为训练，期望通过训练可以得到在未来新数据上有良好表现的模型，从而投入生产。 1.2、人工智能目前应用的一...

小白学习大数据测试：6个主流程和3个关键步骤归纳整理 什么是大数据？ 大数据是一个大的数据集合，通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析，而且它在数量、多样性、速度方法都很出色。 大数据测试类型 测试大数据应用程序更多的是验证其数据处理，而不是测试软件产品的个别功能。当涉及到大数据测试时，性能和功能测试是关键。 在大...

执行集成构建 持续，自动地构建&测试软件项目代码管理（git/svn）>编译（maven/ant/gradle）>打包>测试环境部署>自动化测试 研发体系中的迭代流程 1 源码分支管理： git或者svn, 将不同开发编写的代码集成起来形成不同版本和分支，那么急于版本管理，来进行版本打包发布 2 形成版本 编译打包： maven，ant,gradle集成的版本代码编译打包形成可发布的war包或可运...

软件测试工程师，和开发工程师相比起来，虽然前期可能不会太深，但是涉及的面还是比较广的。前期面试实习生或者一年左右的岗位，问的也主要是一些基础性的问题比较多。涉及的知识主要有MySQL数据库的使用、Linux操作系统的使用、软件测试框架性的问题，测试环境搭建问题、当然还有一些自动化测试和性能测试的问题。测试工程师的面试题，基本上都是大同小异的，面试的核心主要在于框架模块（一到两年工作经验） 今天这篇...

测试用例基础 1.测试用例概念（测什么？怎么测？） 测试用例（Test Case）是为特定的目的而设计的一组测试输入、执行条件和预期的结果 通过大量的测试用例来检验软件的运行效果（作用） 它是知道测试工作进行的依据 2.测试用例示例（雪球APP） 3.测试用例组成要素 用例编号、模块、测试点（测试标题）、优先级、前提条件、测试步骤、期望结果（预期结果）、实际结果 4.测试用例的优先级 测试用例根据...

一、软件测试工作瓶颈在哪里？ 首先要知道软件测试工作的瓶颈在哪儿 环境 沟通 测试分析 数据准备 用例设计 测试执行 缺陷报告 需求变更 脚本开发 二、测试可能会遇到的一系列障碍 惯性作用，文化和思维改变很难 沟通成本高 需求模糊 需求变更 自动化测试实施效果不佳 返工 发布时间久，靠加班 bug 还很多 测试人员能力不足 研发过程比较混乱 系统架构耦合性强 三、如何跨越这些障碍？ 测试思维：突出...

前言 Jmeter体系结构我们可以简单分层为：测试计划–>线程组–>元件–>组件。 一个测试计划的下一层就是线程组，线程组下面是所有元件，每一个元件又是多个组件的集合。 Jmeter 自带的线程组控件（Thread Group），是所有测试计划的起始点。一个线程组就是一个虚拟用户组，线程组中的每一个线程都是一个模拟用户。模拟并发测试，即多个线程（虚拟用户）同时去执行相同的任务。线程之间是独立的，单...

1、为什么要做性能测试？ 1）目前绝大多数应用都是基于网络的分布式应用，我们无法知道用户数量，用户场景的不确定性，导致系统测试时，不仅仅是功能，业务逻辑，接口测试，还要测试系统性能。一个用户没问题，但是用户一旦多了就可能出现各种各样的问题，所以需要进行系统性能测试。 2）用户数量增加，系统负债增加，进行系统性能测试，知道系统承受的并发用户数量，带宽是否够用，cpu是否够用，内存是否够用，硬盘速度是...

写在前面 Jmeter至今已更新Apache JMeter 5.1.1 (Requires Java 8+)版本，在不断的升级的过程中功能不断增加，越来越强大。点击链接下载Jmeter：Jmeter官网下载链接 Jmeter是使用率最高的性能测试工具之一，现在很多互联网公司都在使用Jmeter来完成测试工作。因为Jmeter开源所以更具扩展性，能够胜任更多的工作具有更多的可能性。 Jmeter可以...

Jmeter教程 一、jmeter环境要求 Jmeter的安装需要用到java环境，而java环境的配置就是jdk的配置，针对于java环境的配置，可以看一下之间的文章。 纯小白式配置java环境（win7） - 简书 纯小白式配置java环境（win10版本） - 简书 二、jmeter的下载 下载的时候可以再jmeter官网上直接下载 这里我使用的已经打包好的压缩包 解压后，得到文件夹： 打开...

1.简介 现在的NIDS领域snort一枝独秀，而suricata是完全兼容snort规则的多线程IDS，无论在效率还是性能上都超过原有的snort，这个系列主要针对suricata的规则中的一些关键字进行了解和学习，参考suricata的文档，链接为为：https://redmine.openinfosecfoundation.org/projects/suricata/wiki/Suricat...

一 简介 Postman 是一款功能超级强大的用于发送 HTTP 请求的 Chrome插件 。做web页面开发和测试的人员应该是无人不晓无人不用！其主要特点 特点： 创建 + 测试：创建和发送任何的HTTP请求 一 简介 Postman是一款功能超级强大的用于发送 HTTP 请求的 Chrome插件 。做web页面开发和测试的人员应该是无人不晓无人不用！其主要特点特点： 创建 + 测试：创建和发送...