统计计算

挑战最快 SVM！ReHLine 算法诞生记

邱怡轩 / 2023-12-22

本文由邱怡轩主笔，内容素材源自邱怡轩和戴奔共同讨论的结果。 […] 武林至尊，宝刀屠龙。长久以来，机器学习江湖中一直流传着两件神器——LibSVM 和 Liblinear，它们都是用来求解支持向量机（SVM）问题的，且都是由台湾大学的林智仁教授及其团队开发和维护。两者的不同在于，LibSVM 支持各类基于核函数的 SVM，而 Liblinear 只能计算线性 SVM。但从计算效率上来……

R语言

龙芯可以做数据分析吗？

邱怡轩 / 2022-03-28

因为众所周知的原因，近几年来，计算机处理器芯片这个高科技产品受到了社会的广泛关注。一时间，一款名为“龙芯”的 CPU 好像突然成了“全村人的希望”，不管是业内大佬还是吃瓜群众，都开始对自研芯片这个话题展开了激烈的讨论。按照官方的说法，龙芯是我国首枚拥有自主知识产权的通用高性能微处理器芯片，最初在2001年是中科院计算所下属的一个课题项目，而到了2010年又成立了龙芯中科公司，从纯科研项目走向了商业……

机器学习

为什么统计学家也应该学学 TensorFlow

邱怡轩 / 2017-08-22

（先啰嗦一句：本文的标题和内容牵涉到 TensorFlow，只是因为它是可用的工具之一，我相信很多其他的框架都可以做到文中我想要实现的功能。我自己并没有工具上的偏好，所以就当是拿 TensorFlow 举一个例子。）对于学统计做统计的人来说，这可能是最好的时代，也可能是最坏的时代。好的地方我就不多说了，基本上关键词包括“大数据”、“数据科学”等，搜索引擎可以帮你列举出许多激动人心的字眼。为什么会……

统计计算

Julia 中的分布式计算

张驰原 / 2017-08-18

[…] Julia 是一门相对比较新的着眼于科学计算的语言，语法上看起来有点类似于 Matlab 的脚本语言，但是实际上从 Ruby、Python、Lisp 之类的语言里吸收了许多有趣的特性。在这篇文章中，我想介绍一下 Julia 的分布式计算机制，它方便的并行和分布式计算的能力，结合优质的数值计算能力，其实让它非常方便用于做分布式数据处理——比如 distributed……

统计计算

随机数生成及其在统计模拟中的应用

黄湘云 / 2017-05-26

揭秘统计软件如R，Octave，Matlab等使用的随机数发生器，然后做一些统计检验，再将其应用到独立随机变量和的模拟中，最后与符号计算得到的精确结果比较。除特别说明外，文中涉及到的随机数都是指伪随机数，发生器都是指随机数发生器。 […] 随机数的产生和检验方法是蒙特卡罗方法的重要部分，另外两个是概率分布抽样方法和降低方差提高效率方法。在20世纪40年代中期，当时为了原子弹的研制，乌……

统计计算

Bandit算法与推荐系统

陈开江 / 2017-05-04

注:本文首发于《程序员》杂志 […] 推荐系统里面有两个经典问题：EE问题和冷启动问题。前者涉及到平衡准确和多样，后者涉及到产品算法运营等一系列东西。bandit算法是一种简单的在线学习算法，常常用于尝试解决这两个问题，本文为你介绍基础的bandit算法及一系列升级版，以及对推荐系统这两个经典问题的思考。 […] 我们会遇到很多选择的场景。上哪个大学，学什么专业，去哪家……

统计计算

谷歌为什么创造了幽灵广告？

陈丽云 / 2017-04-27

说起广告大家肯定都知道，可是什么是幽灵广告？其实幽灵广告的英文是ghost ads，源自Google的一篇论文，Johnson, Garrett A., Randall A. Lewis, and Elmar I. Nubbemeyer. “Ghost Ads: Improving the Economics of Measuring Online Ad……

统计计算

共轭梯度法计算回归

邱怡轩 / 2016-11-23

轮回眼共轭梯度示意图（图片来源：维基百科） […] 之所以写这篇文章，是因为前几天统计之都的微信群里有同学提了一个问题，想要对一个很大的数据集做回归。然后大家纷纷给出了自己的建议，而我觉得共轭梯度算回归的方法跟这个背景比较契合，所以就正好写成一篇小文，与大家分享一下。说到算回归，或许大家都会觉得这个问题太过简单了，如果用 $X$ 表示自变量矩阵，$y$ 表示因变量向量，那么回归……

R语言

R与并行计算

赵鹏 / 2016-09-08

作者简介赵鹏，世界知名IT企业性能分析师。在包括多核、分布式以及GPU通用计算方面具有丰富的研究和实践经验，善于帮助客户解决性能问题以及提供并行化方案。R语言爱好者，业余时间创建了ParallelR网站<www.parallelr.com>，以此来分享R和并行计算相关内容。 […] 本文首先介绍了并行计算的基本概念，然后简要阐述了R和并行计算的关系。之后作者从R用户的使……

统计计算

标准正态分布函数的快速计算方法

邱怡轩 / 2016-01-30

标准正态分布的分布函数 $\Phi(x)$ 可以说是统计计算中非常重要的一个函数，基本上有正态分布的地方都或多或少会用上它。在一些特定的问题中，我们需要大量多次地计算这个函数的取值，比如我经常需要算正态分布与另一个随机变量之和的分布，这时候就需要用到数值积分，而被积函数就包含 $\Phi(x)$。如果 $Z\sim N(0,1), X\sim f(x)$，$f$ 是 $X$ 的密度函数，……

统计计算

漫谈正态分布的生成

王夜笙 / 2015-06-09

本文作者简介：王夜笙，就读于郑州大学信息工程学院，感兴趣的方向为逆向工程和机器学习，长期从事数据抓取工作（长期与反爬虫技术作斗争~），涉猎较广（技艺不精……），详情请见我的个人博客~ 个人博客地址：http://bindog.github.io/blog/ 邮箱：bindog@outlook.com 感谢怡轩同学的悉心指导~ 之前拜读了靳志辉（@rickjin）老师写的《正态分布的前世今生》，一直……

统计计算

嘿，朋友，抢红包了吗？

邱怡轩 / 2015-02-24

如果你有一台智能手机，如果你装了一个名叫微信的软件，那么你今年的春节很可能是在下面这样的场景中度过的（图片来自微信群）：这也使得众多的网络大V发出了下面的感慨：而最近几天不少微信群里面又流行起来一种“红包接力”的玩法，大概的规则是：群里面先由一人发一个红包，然后大家开始抢，其中金额最大的那个人继续发新一轮的红包，之后不断往复循环。这时候大家或许就会问了，一直这么玩下去会有什么结果呢？是“闷声……