0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

为什么说数学知识是数据科学家的先决条件?

DPVg_AI_era 来源:lq 2019-01-29 09:19 次阅读

AI机器学习的火热让数据科学家成为近几年热门职业之一。但对于试图从事这一职业的新人来说,数学可能最大的拦路虎之一。不过本文作者认为,当数据科学家并不一定需要坚实的数学基础,并给出了9类无需数学基础的数据科学任务。

在当今世界上,数据科学和机器学习已成为最令人向往的职业方向之一,从大学生到职业生涯中期的专业人士,很多人都希望进入数据科学领域。但是,在追求数据科学或机器学习领域时想到的第一个先决条件是,要具备深入研究复杂数学问题的能力,才能走进数据科学的大门。

但是那些数学基础薄弱,不具备扎实数学背景的人怎么办?他们就没有希望进入数据科学领域了吗?

当然不是。本文将提供踏入数据科学和机器学习世界之前,是否强制要求数学背景知识的真实情况。

为什么说数学知识是数据科学家的先决条件?

与大学其他专业相比,数据科学更多地是关于如何快速准确地学习。通过严格的数学运算,快速准确地掌握技术,并且通常可以比大多数人更容易地学习。

数据科学家基本上都是统计学家,大多数人拥有研究生水平的数学和统计学知识。这是从事实际项目所必需的知识,对于正确使用算法和假设检验至关重要。

掌握逻辑回归、决策树、置信区间等标准数学工具也很重要。大多数企业都会使用这些标准工具。因此,招聘人员也倾向于寻找具备扎实数学背景的求职者,这主要是出于历史原因。

坚持使用标准的数学训练和标准工具,对有兴趣成为硬核数据科学家的人是非常有用的。

数据科学家需要掌握哪些知识呢?

一位优秀的数据科学家或工程师必须具备丰富的数据库知识和工程实践知识。包括处理和记录错误、监控系统,构建人为错误容错渠道,了解扩展项目所需的条件、处理持续整合问题、掌握数据库管理知识,维护数据清理以及确保确定性处理流程等。

凡事有例外,高中数学水平的人也有机会

实际上,在机器学习的所有方面的技术中,数据科学背后的统计引擎并不涉及高中以后的任何数学或统计理论。

如果具备强大的数据和编程背景,任何人都可以非常快速地学习数据科学。

不过,由硬核数学导向的数据科学家开发的一些技术并不使用数学或统计学,这些技术同样有效,其中一些技术已经被证明不输于使用数学的同类技术,而且性能通常更加强大。此外,这些技术更易于理解,并且可解释性更强。

数据科学家的实际工作有多少和数学有关?

打破神话,揭示现实。

从入门级数据科学家到中级数据科学家,一般花在数学上的时间不到5%,机器学习也是如此,尤其是建立模型时,很少有时间做任何数学上的工作。对于机器学习,需要学习的真正的必要技能是数据分析,以便建立能够进行准确预测的模型。初学者其实不需过多掌握微积分和线性代数。

只有参与学术上的机器学习研究或者少数先进的数据科学家团队时,数学的作用才显得特别重要。高水平的业内人士也经常使用高等数学。一些人正在拓展机器学习研究人员的研究边界。

像谷歌和Facebook这样的公司中,人们只会在工作中经常使用微积分、线性代数和更高级的数学工具。

最重要的是,在产业界中,数据科学家只是没有将太多时间花在数学上,但花了大量时间来获取数据、清理数据、探索数据。实际上,80%的人所做的是数据整理和数据的可视化。

9类无需数学技术的数据科学任务

1、使用基本的Excel进行高级机器学习:此方法是一种轻量级的技术实现,包括非常简单易懂的基本Excel实现。目前可用于Python、Perl,Julia和R。未来预计还将支持SQL实现。

2、使用HDT进行自动化的机器学习:此方法融合了名为“决策树”和“回归”的两种传统技术。但是这种实现不涉及任何节点分割或任何传统的回归模型,回归部分是与数学无关的Jack-knife回归。早期版本使用逻辑回归,但由于数据转换过程比较简单,使用的参数较少,导致逻辑回归被Jack-knife回归所取代。

3、无模型置信区间:需要对随机变量和概率分布有基本的了解才能知道置信区间的概念。这类置信区间方法基于百分位数,非常易于理解,无需数学知识且可靠性高,可用于预测分析。

4、假设检验:这是学生在统计课程中的难题之一。这里已被置信区间的简单变体所取代,便于直观理解。

5、使用Excel的Jack-knife回归:这些回归技术非常简单高效,可以在Excel或SQL中轻松实现。

6、Jack-knife回归:理论 – 无须统计理论的回归,甚至不涉及线性代数。不过带有置信区间。在该方法中,即使使用少量元参数,与经典回归相比,也能实现最低限度的精度损失。该方法在存在异常值、高度相关的特征或其他违反假设的情况下性能良好,这些假设条件在使用传统回归时必须通过一个数据集满足。

7、索引,编目和NLP:无需数学知识的监督聚类方法。

8、快速组合特征选择:这种方法通常需要理解随机变量的概念。

9、方差,聚类和密度估计:这些方法中也不大涉及数学。

要成为高效的数据科学家,还是要懂点数学的

其实,这里的关键点是,对于初出茅庐的数据科学家和机器学习从业者来说,数据专业知识的重要性要优于数学专业知识,因此,如果你的目标是获得一份工作,进入数据科学领域,那么最重要的任务是必须掌握数据分析,而不是掌握微积分。数据科学家要做的不是做证明题或研究数学问题,能够分析数据才是最重要的。

初学者需要尽快掌握如何收集数据、探索和准备数据。全面掌握数据可视化和数据处理(包括聚合)是关键环节,这样才可以同时使用它们来执行探索性数据分析任务。

尽管这些无需数学知识的工具和方法,确实凸显了在不具备坚实数学基础的情况下从事数据科学的可能性,但并一定能够满足行业的期望,因为能否获得数据科学家的职位,完全取决于你从事的工作内容,以及你心仪的公司究竟从事什么业务。

在不具备数学背景知识的情况下,确实有可能成为一名数据科学家。但按以往经验来看,如果没有一定程度的数学素养,从长期而言,很难成为一个高效的数据科学家,而高效这一点无疑是更为重要的。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器学习
    +关注

    关注

    66

    文章

    8453

    浏览量

    133165
  • 数据科学
    +关注

    关注

    0

    文章

    168

    浏览量

    10116

原文标题:不懂数学,照样做数据科学家

文章出处:【微信号:AI_era,微信公众号:新智元】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    深开鸿亮相“小小科学家”品牌发布暨科学探索研学营开营活动

    为在青少年中营造学科学、爱科学、用科学的浓厚氛围,1月14日,由市委组织部、市委教育工委、团市委共同主办的“小小科学家”品牌发布暨科学探索研
    的头像 发表于 01-15 21:17 219次阅读
    深开鸿亮相“小小<b class='flag-5'>科学家</b>”品牌发布暨<b class='flag-5'>科学</b>探索研学营开营活动

    AI 推动未来科学 晶泰科技共襄未来科学大奖周

    科学家,探讨学科交叉与学术创新,倾力打造兼具权威性、专业性和国际影响力的科学盛会。 未来科学大奖由未来论坛于 2016 年创设,被誉为"中国诺贝尔奖"。未来论坛是当前中国极具声望的民间科学
    的头像 发表于 12-18 09:58 178次阅读
    AI 推动未来<b class='flag-5'>科学</b> 晶泰科技共襄未来<b class='flag-5'>科学</b>大奖周

    西湖大学:科学家+AI,科研新范式的样本

    研究,创新科研新范式。这一点在西湖大学的科研项目中已得到体现。 成立于2018年的西湖大学是由施一公院士领衔创办的、聚焦前沿科学研究的研究型大学,该校鼓励科学家们探索AI与各学科交叉融合,为科研创新提速。为此,西湖大学在浪潮信息等企业助力下打造
    的头像 发表于 12-12 15:59 275次阅读
    西湖大学:<b class='flag-5'>科学家</b>+AI,科研新范式的样本

    AI for Science:人工智能驱动科学创新》第4章-AI与生命科学读后感

    了传统学科界限,使得科学家们能够从更加全面和深入的角度理解生命的奥秘。同时,AI技术的引入也催生了一种全新的科学研究范式,即数据驱动的研究范式,这种范式强调从大量数据中提取有价值的信息
    发表于 10-14 09:21

    《AI for Science:人工智能驱动科学创新》第一章人工智能驱动的科学创新学习心得

    如何激发科学家的创新思维。AI不仅仅是工具,更是一种思维方式,它鼓励我们跳出传统框架,以数据为驱动,探索未知。这种思维方式的转变,不仅促进了科学方法的革新,也为解决全球性挑战提供了新的视角和途径
    发表于 10-14 09:12

    SAP B1 Web Client &amp; MS Teams App集成连载一:先决条件/Prerequisites

    一、先决条件/Prerequisites 在设置 SAP Business One 应用之前,确保您已具备以下各项:Before you set up the SAP Business One
    的头像 发表于 09-14 16:29 217次阅读
    SAP B1 Web Client &amp; MS Teams App集成连载一:<b class='flag-5'>先决条件</b>/Prerequisites

    受人眼启发!科学家开发出新型改良相机

    新型事件相机系统与标准事件相机系统对比图。 马里兰大学计算机科学家领导的一个研究小组发明了一种照相机装置,可以改善机器人观察周围世界并做出反应的方式。受人眼工作原理的启发,他们的创新型照相机系统模仿
    的头像 发表于 07-22 06:24 376次阅读
    受人眼启发!<b class='flag-5'>科学家</b>开发出新型改良相机

    中国科学家发现新型高温超导体

    据新华社报道,我国科学家再立新功,又一新型高温超导体被发现。 复旦大学物理学系赵俊团队利用高压光学浮区技术成功生长了三层镍氧化物,成功证实在镍氧化物中具有压力诱导的体超导电性,而且超导体积分数达到
    的头像 发表于 07-19 15:14 796次阅读

    天津大学科学家突破人类大脑器官成功驱动机器人

    在科技探索的征途上,天津大学的科研团队再次迈出了令人瞩目的步伐。7月5日,该校宣布了一项革命性的成果——科学家们利用前沿的干细胞技术,成功培育出了高度模拟人类大脑的类脑器官,并创新性地将其与机器人系统通过先进的片上脑机接口技术紧密相连,开启了人脑与机器深度融合的新纪元。
    的头像 发表于 07-08 16:00 699次阅读

    新华社:突破性成果!祝贺我国科学家成功研发这一传感器!

    6月25日,新华社以《突破性成果!祝贺我国科学家》为标题,报道了由我国科学家研发的传感器成果。 我国科学家研发高通道神经探针实现猕猴全脑尺度神经活动监测 神经探针是一种用来记录神经活动的针状电传
    的头像 发表于 06-27 18:03 564次阅读
    新华社:突破性成果!祝贺我国<b class='flag-5'>科学家</b>成功研发这一传感器!

    前OpenAI首席科学家创办新的AI公司

    消息在业界引起了广泛关注,因为苏茨克维曾是OpenAI的联合创始人及首席科学家,并在去年在OpenAI董事会上扮演了重要角色。
    的头像 发表于 06-21 10:42 583次阅读

    科学家研制出一款新型柔性X射线探测器

    英国科学家开发出一种有机半导体材料,并利用其研制出一款新型柔性X射线探测器。这种探测器不仅“身段”更柔软,可贴合需要扫描物体的形状,从而提高患者筛查的准确性,降低肿瘤成像和放射性治疗的风险,而且成本
    的头像 发表于 06-13 06:29 377次阅读

    自动控制原理需要哪些基础知识

    自动控制原理是工程学和应用科学领域的一个重要分支,它涉及到系统的设计、分析和维护,以确保系统能够自动地、准确地响应外部或内部的变化。 基础数学知识 自动控制原理涉及到大量的数学运算和公式,因此,掌握
    的头像 发表于 06-11 11:08 3457次阅读

    本源量子参与的国家重点研发计划青年科学家项目启动会顺利召开

    2024年4月23日,国家重点研发计划“先进计算与新兴软件”重点专项“面向复杂物理系统求解的量子科学计算算法、软件、应用与验证”青年科学家项目启动会暨实施方案论证会在合肥顺利召开。该项目由合肥综合性国家科学中心人工智能研究院(安
    的头像 发表于 05-11 08:22 867次阅读
    本源量子参与的国家重点研发计划青年<b class='flag-5'>科学家</b>项目启动会顺利召开

    NVIDIA首席科学家Bill Dally:深度学习硬件趋势

    Bill Dally于2009年1月加入NVIDIA担任首席科学家,此前在斯坦福大学任职12年,担任计算机科学系主任。Dally及其斯坦福团队开发了系统架构、网络架构、信号传输、路由和同步技术,在今天的大多数大型并行计算机中都可以找到。
    的头像 发表于 02-25 16:16 1334次阅读
    NVIDIA首席<b class='flag-5'>科学家</b>Bill Dally:深度学习硬件趋势