学习data mining的7个步骤

2024-06-01 05:58
文章标签 学习 步骤 data mining

本文主要是介绍学习data mining的7个步骤,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

学习data mining的7个步骤(可以并行进行,或按不同次序进行)

1.语言:学习R, Python, SQL, 提交到 KDnuggets
2.工具:学习使用data mining和visualization工具
3.教材:阅读introductory textbook to understand the fundation.
4.教育:参加在线研讨会(webinars),加入课程,拿到data scicence方面的degree或certificate
5.数据:检查可用数据资源,可参考此处:http://www.kdnuggets.com/news/subscribe.html
6.比赛:参加双周期email的data mining竞赛
7.与其他数据科学加交流,可通过社交网络,群组,会议的方式。

下面详细对以上7个步骤做以说明:
1.学习语言
KDnuggets对最受流行的data mining语言做了个调查,见
http://www.kdnuggets.com/2013/08/languages-for-analytics-data-mining-data-science.html
发现最流行的语言是R,Python和SQL。
以下是这些语言的学习资源:
Data Science with R(e-book): www.kdnuggets.com/2013/02/free-e-book-on-data-science-with-r.html

Getting Start with Python for Data Science:
https://www.kaggle.com/wiki/GettingStartedWithPythonForDataScience

Python for Data Analysis: Agile Tools for Real World Data
http://shop.oreilly.com/product/0636920023784.do

An Indispensable Python: Data sourcing to Data science
http://www.datasciencecentral.com/profiles/blogs/an-indispensable-python-data-sourcing-to-data-science

W3 Schools Learning SQL
http://www.w3schools.com/sql/

2.Data mining需要的工具。
针对Data mining不同的任务,需要使用不同的工具。所以要想能完整地完成数据分析工作需要掌握一系列工具,使之形成一个工具集。

起步工具:可以使用开源的免费工具,如:
KNIME: www.knime.org
RapidMiner: http://rapidminer.com/products/rapidminer-studio/
Weka: www.cs.waikato.ac.nz/ml/weka/

在分析工作中常用到的一个工具:
SAS:http://www.sas.com/en_us/home.html
这是一个商业化工作,使用广泛

其他流行的工具包括:
MATLAB,
StatSoft STATISTICA,
Microsoft SQL Server
Tableau
IBM SPSS Moderler
Rattle
详见:http://www.kdnuggets.com/polls/2013/analytics-big-data-mining-data-science-software.html

可视化工具:
Microsoft Excel
R graphics: http://cran.r-project.org/web/views/Graphics.html(特别是其中的ggplot2: http://cran.r-project.org/web/packages/ggplot2/index.html)
Tableau: http://www.tableau.com/(非常出色)
TIBCO Spotfire
Miner3D

3.教材
有大量与data mining和data science相关的教材,详见
http://www.kdnuggets.com/publications/books.html
以下是几本推荐的:
n 《Data Mining and Analysis: Fundamental Concepts and Algorithms》,by Mohammed Zaki and Wagner Meira Jr.见
http://www.kdnuggets.com/2013/09/data-mining-analysis-fundamental-concepts-algorithms-download-pdf-draft.html

n 《Data Mining: Practical Machine Learning Tools and Techniques》by Ian Witten, Eibe Frank, and Mark Hall, from the authors of Weka, and using Weka extensively in examples.
见:http://www.cs.waikato.ac.nz/ml/weka/book.html

n 《The Elements of Statistical Learning, Data Mining,Inference, and Predictionm》by Trevor Hastie, Robert Tibshirani, Jerome Friedman这是一本从数学角度出发的不错的概述性书籍
见:http://statweb.stanford.edu/~tibs/ElemStatLearn/

n 《LIONbook: Learning and Intelligent Optimization》, by Roberto Battiti and Mauro Brunato, 本书网上有免费版。
见:http://www.lionsolver.com/LIONbook/

n 《Mining of Massive Datasets Book》 by A. Rajaraman, J. Ullman.
见:http://www.kdnuggets.com/2012/08/mining-massive-datasets-book-revised.html

n 《StatSoft Electronic Statistics Textbook™ (free)》, 本书包含了许多data mining有关的话题
见:http://www.statsoft.com/Textbook

4.教育:在线研讨会(Webinars),课程,Certificates和学位
在线研讨会资源:http://info.hortonworks.com/Retail-Insights-Big-Data-Hadoop.html

在线课程:http://www.kdnuggets.com/education/index.html

特别要提到的几个课程:
Coursera上的Machine Learning,Andrew Ng任课
edX上的Learning from data,Caltech Professsor Yaser Abu-Mostafa任课:http://www.kdnuggets.com/2013/09/edx-learning-from-data-free-online-course.html
Syracuse iSchool的Open Online Course in Applied Data Science:
http://ischool.syr.edu/future/cas/datascience.aspx
在线幻灯片:http://www.kdnuggets.com/data_mining_course/index.html
此外,最好能拿到Certificates in Data Mining, and Data Science(见
http://www.kdnuggets.com/education/analytics-data-mining-certificates.html
)或取得Data Science方面的高级学位,如MS。参考
http://www.kdnuggets.com/education/index.html

5.数据
学习数据分析,需要分析数据,参考
http://www.kdnuggets.com/datasets/index.html
这里包括:
l Government, Federal, State, City, Local and public data sites and portals:http://www.kdnuggets.com/datasets/government-local-public.html
l Data APIs, Hubs, Marketplaces, Platforms, Portals, and Search Engines:http://www.kdnuggets.com/datasets/api-hub-marketplace-platform.html
l Free Public Datasets:http://www.kdnuggets.com/2011/02/free-public-datasets.html

6.竞赛
可以参加一些竞赛,如
http://www.kaggle.com/
中的,参赛者可以从初学者竞赛开始进行,如
http://www.kdnuggets.com/2012/10/beginner-competition-titanic-survival-via-machine-learning.html

7.交流:会议,群组和社交网络
可以加入许多组织,参考Top 30 LinkedIn Groups for Analytics, Big Data, Data Mining, and Data Science:
http://www.kdnuggets.com/2013/04/top-30-linkedin-groups-analytics-big-data-data-mining-data-science.html

AnalyticBridge是关于数据和分析科学的一个活跃组织。
http://www.analyticbridge.com/

也可以加入许多关于数据分析,大数据,数据挖掘,数据科学和知识发现方面的会议:http://www.kdnuggets.com/meetings/index.html

最后,应该考虑加入ACM SKGKDD组织,它组织了年度KDD会议,这是该领域领军的研究性会议:http://www.sigkdd.org/

这篇关于学习data mining的7个步骤的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1020163

相关文章

Goland debug失效详细解决步骤(合集)

《Golanddebug失效详细解决步骤(合集)》今天用Goland开发时,打断点,以debug方式运行,发现程序并没有断住,程序跳过了断点,直接运行结束,网上搜寻了大量文章,最后得以解决,特此在这... 目录Bug:Goland debug失效详细解决步骤【合集】情况一:Go或Goland架构不对情况二:

Java深度学习库DJL实现Python的NumPy方式

《Java深度学习库DJL实现Python的NumPy方式》本文介绍了DJL库的背景和基本功能,包括NDArray的创建、数学运算、数据获取和设置等,同时,还展示了如何使用NDArray进行数据预处理... 目录1 NDArray 的背景介绍1.1 架构2 JavaDJL使用2.1 安装DJL2.2 基本操

SpringBoot+MyBatis-Flex配置ProxySQL的实现步骤

《SpringBoot+MyBatis-Flex配置ProxySQL的实现步骤》本文主要介绍了SpringBoot+MyBatis-Flex配置ProxySQL的实现步骤,文中通过示例代码介绍的非常详... 目录 目标 步骤 1:确保 ProxySQL 和 mysql 主从同步已正确配置ProxySQL 的

nginx部署https网站的实现步骤(亲测)

《nginx部署https网站的实现步骤(亲测)》本文详细介绍了使用Nginx在保持与http服务兼容的情况下部署HTTPS,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录步骤 1:安装 Nginx步骤 2:获取 SSL 证书步骤 3:手动配置 Nginx步骤 4:测

Springboot 中使用Sentinel的详细步骤

《Springboot中使用Sentinel的详细步骤》文章介绍了如何在SpringBoot中使用Sentinel进行限流和熔断降级,首先添加依赖,配置Sentinel控制台地址,定义受保护的资源,... 目录步骤 1: 添加 Sentinel 依赖步骤 2: 配置 Sentinel步骤 3: 定义受保护的

Ollama整合open-webui的步骤及访问

《Ollama整合open-webui的步骤及访问》:本文主要介绍如何通过源码方式安装OpenWebUI,并详细说明了安装步骤、环境要求以及第一次使用时的账号注册和模型选择过程,需要的朋友可以参考... 目录安装环境要求步骤访问选择PjrIUE模型开始对话总结 安装官方安装地址:https://docs.

开启mysql的binlog日志步骤详解

《开启mysql的binlog日志步骤详解》:本文主要介绍MySQL5.7版本中二进制日志(bin_log)的配置和使用,文中通过图文及代码介绍的非常详细,需要的朋友可以参考下... 目录1.查看是否开启bin_log2.数据库会把日志放进logs目录中3.查看log日志总结 mysql版本5.71.查看

deepseek本地部署使用步骤详解

《deepseek本地部署使用步骤详解》DeepSeek是一个开源的深度学习模型,支持自然语言处理和推荐系统,本地部署步骤包括克隆仓库、创建虚拟环境、安装依赖、配置模型和数据、启动服务、调试与优化以及... 目录环境要求部署步骤1. 克隆 DeepSeek 仓库2. 创建虚拟环境3. 安装依赖4. 配置模型

JSON字符串转成java的Map对象详细步骤

《JSON字符串转成java的Map对象详细步骤》:本文主要介绍如何将JSON字符串转换为Java对象的步骤,包括定义Element类、使用Jackson库解析JSON和添加依赖,文中通过代码介绍... 目录步骤 1: 定义 Element 类步骤 2: 使用 Jackson 库解析 jsON步骤 3: 添

将sqlserver数据迁移到mysql的详细步骤记录

《将sqlserver数据迁移到mysql的详细步骤记录》:本文主要介绍将SQLServer数据迁移到MySQL的步骤,包括导出数据、转换数据格式和导入数据,通过示例和工具说明,帮助大家顺利完成... 目录前言一、导出SQL Server 数据二、转换数据格式为mysql兼容格式三、导入数据到MySQL数据