• 主页
  • 课程

    关于课程

    • 课程归档
    • 成为一名讲师
    • 讲师信息
    同等学历教学

    同等学历教学

    免费
    阅读更多
  • 特色
    • 展示
    • 关于我们
    • 问答
  • 事件
  • 个性化
  • 博客
  • 联系
  • 站点资源
    有任何问题吗?
    (00) 123 456 789
    weinfoadmin@weinformatics.cn
    注册登录
    恒诺新知
    • 主页
    • 课程

      关于课程

      • 课程归档
      • 成为一名讲师
      • 讲师信息
      同等学历教学

      同等学历教学

      免费
      阅读更多
    • 特色
      • 展示
      • 关于我们
      • 问答
    • 事件
    • 个性化
    • 博客
    • 联系
    • 站点资源

      R语言

      • 首页
      • 博客
      • R语言
      • 【数据工作】你懂数据工作流程吗?

      【数据工作】你懂数据工作流程吗?

      • 发布者 weinfoadmin
      • 分类 R语言
      • 日期 2016年5月2日
      测试开头

      大家都明白,我们做数据的首要目的就是要做出一系列的数据产品。当然,数据产品可以一个某产品的推荐报告、一个数据图表、或者是帮领导做出明智决策的可行性报告。总之,,数据科学应该产生一些对现实有用的结果,而这些结果就是所说的数据产品。我们做出数据产品的过程一般是比较规范化的,通常称这个过程为:方法论、产品生命周期或者工作流程。

          科克伯恩博士曾在文章《Raising the Standard in the Big Data Analytics Profession》.提出过关于数据产品流程精细化的想法。数据科学流程的精细化确实是需要我们去努力的,但最终数据产品的实现依然是我们的重中之重。

      数据科学不是软件工程

      可能由于数据产品的实现过程中我们也需要编写代码,故通常很多人会把数据科学等同与软件工程,。当然,他们并不是一回事。数据科学中更侧重于多种数据处理方法,而不是开发类似瀑布模型之类的架构;更侧重与科学方法而不是工程项目设计。

      数据科学工作流程

      当然数据科学的工作也有很多选择,就像没有一套通用的开发软件工程一样,但我们会努力设计出一套尽可能适用的工作流程。
      一、CRISP-DM(数据挖掘建模标准)

      CRISP-DM是为大数据的信息挖掘设计的,在本质上这是标准对于软件工程来讲可能更适合数据科学。以下是CRISP-DM的6个步骤:

          理解业务核心
          理解数据关系
          数据准备
          建立模型模
          评价优化
          具体实施

      二、数据科学项目生命周期

      数据科学项目生命周期的理论更加工程化了CRISP-DM的过程。
      它的步骤为:

          数据采集
          数据准备
          假设和建模
          评估和解释
          部署
          具体操作
          循环优化

      三、数据科学工作流程

      在Philip Guo的博士论文《Data Science Workflow: Overview and Challenges》中,描述了数据科学的这一部分,它的步骤为:

          数据准备
          数据分析
          结果反馈
          方法传播

      以上是3种不同的数据处理基本流程,当然,这些都不是固定不变的,我们可以根据自己的具体需要来进行选择。我们也很期待不断有更新更好的流程出现,同时我们也很乐意看到更实用更适用的具体方法流程。

      这将是令人兴奋的看到新的数据科学工作流将在不久的将来创建。它也将是有趣的看到哪些是最有益的。

      一个优秀的数据产品必须能够解决一个具体问题,有时候一个好问题比解决方法更重要。但是无论如何,我们都应该时刻记住我们数据人的核心注意力都应该在数据产品本身而不是软件工程。

      英文链接:http://101.datascience.community/2015/01/12/the-goal-is-data-products-now-how-do-we-get-there/

      今日数据人网投稿精选

      《如何进行机器学习?》

      《成为数据科学家的新规则》

      点击【阅读原文】,立刻打开精选目录

      测试结尾

      请关注“恒诺新知”微信公众号,感谢“R语言“,”数据那些事儿“,”老俊俊的生信笔记“,”冷🈚️思“,“珞珈R”,“生信星球”的支持!

      • 分享:
      作者头像
      weinfoadmin

      上一篇文章

      【数据分析】多元统计分析之因子分析及R实现
      2016年5月2日

      下一篇文章

      【数据人网】致数据人的一封信
      2016年5月8日

      你可能也喜欢

      3-1665801675
      R语言学习:重读《R数据科学(中文版)》书籍
      28 9月, 2022
      6-1652833487
      经典铁死亡,再出新思路
      16 5月, 2022
      1-1651501980
      R语言学习:阅读《R For Everyone 》(第二版)
      1 5月, 2022

      搜索

      分类

      • R语言
      • TCGA数据挖掘
      • 单细胞RNA-seq测序
      • 在线会议直播预告与回放
      • 数据分析那些事儿分类
      • 未分类
      • 生信星球
      • 老俊俊的生信笔记

      投稿培训

      免费

      alphafold2培训

      免费

      群晖配置培训

      免费

      最新博文

      Nature | 单细胞技术揭示衰老细胞与肌肉再生
      301月2023
      lncRNA和miRNA生信分析系列讲座免费视频课和课件资源包,干货满满
      301月2023
      如何快速批量修改 Git 提交记录中的用户信息
      261月2023
      logo-eduma-the-best-lms-wordpress-theme

      (00) 123 456 789

      weinfoadmin@weinformatics.cn

      恒诺新知

      • 关于我们
      • 博客
      • 联系
      • 成为一名讲师

      链接

      • 课程
      • 事件
      • 展示
      • 问答

      支持

      • 文档
      • 论坛
      • 语言包
      • 发行状态

      推荐

      • iHub汉语代码托管
      • iLAB耗材管理
      • WooCommerce
      • 丁香园论坛

      weinformatics 即 恒诺新知。ICP备案号:粤ICP备19129767号

      • 关于我们
      • 博客
      • 联系
      • 成为一名讲师

      要成为一名讲师吗?

      加入数以千计的演讲者获得100%课时费!

      现在开始

      用你的站点账户登录

      忘记密码?

      还不是会员? 现在注册

      注册新帐户

      已经拥有注册账户? 现在登录

      close
      会员购买 你还没有登录,请先登录
      • ¥99 VIP-1个月
      • ¥199 VIP-半年
      • ¥299 VIP-1年
      在线支付 激活码

      立即支付
      支付宝
      微信支付
      请使用 支付宝 或 微信 扫码支付
      登录
      注册|忘记密码?