<commit_before>---
layout: post
title: 大数据行业了解
---

# 大数据行业介绍
### 初学者几问
1. 数据挖掘、机器学习、大数据、深度学习几者之间的关系
 >###### 数据挖掘主要是将在挖掘过程中使用了哪些算法。
 >
 >###### 机器学习是一个方向，在这个方向中使用了这些算法？需要具体到平台和工具
 >
 >###### 大数据也是一个方向，也是使用了这些算法，而这个方向本身有自己的工具及平台，从事这个方向需要认识相关的平台和工具
2. 爬虫在这个过程中的作用
 >###### 收集数据
3. 数据分析在这个过程又是什么角色🎭
 >###### 数据挖掘出结果后，对结果的解读
4. 常说的决策树一类的算法在其中又有什么关联？
5. 对hadoop的认知应该到何种程度？
6. 对算法应该掌握到何种程度？算法的方向是确定的么？有哪些种类的算法？
7. 经常听到的推荐系统之类的，和算法之间的关系？和大数据之间的联系？

# 对应大公司列表
* 阿里巴巴
* 百度
* 腾讯
* 京东
* 微软

## “大数据”专业学什么？

        大数据领域三个大的技术方向：

        方向一：Hadoop（在分布式服务器集群上存储海量数据并运行分布式分析应用的一种方法）大数据开发方向 

        方向二：数据挖掘、数据分析&机器学习方向 

        方向三：大数据运维&云计算方向

## “大数据”专业毕业后干什么?

        事实上，大数据工作者可以施展拳脚的领域非常广泛，从国防部、互联网创业公司到金融机构，到处需要大数据项目来做创新驱动。数据分析或数据处理的岗位报酬也非常丰厚，在硅谷，入门级的数据科学家的收入已经是6位数了(美元)。<commit_msg>Update 2017-4-4-大数据行业了解.md<commit_after>---
layout: post
title: 大数据行业了解
---

# 大数据行业介绍
### 初学者几问
1. 数据挖掘、机器学习、大数据、深度学习几者之间的关系
 >###### 数据挖掘主要是将在挖掘过程中使用了哪些算法。
 >
 >###### 机器学习是一个方向，在这个方向中使用了这些算法？需要具体到平台和工具
 >
 >###### 大数据也是一个方向，也是使用了这些算法，而这个方向本身有自己的工具及平台，从事这个方向需要认识相关的平台和工具
2. 爬虫在这个过程中的作用
 >###### 收集数据
3. 数据分析在这个过程又是什么角色🎭
 >###### 数据挖掘出结果后，对结果的解读
4. 常说的决策树一类的算法在其中又有什么关联？
5. 对hadoop的认知应该到何种程度？
6. 对算法应该掌握到何种程度？算法的方向是确定的么？有哪些种类的算法？
7. 经常听到的推荐系统之类的，和算法之间的关系？和大数据之间的联系？

# 对应大公司列表
* 阿里巴巴
* 百度
* 腾讯
* 京东
* 微软

## “大数据”专业学什么？

        大数据领域三个大的技术方向：

        方向一：Hadoop（在分布式服务器集群上存储海量数据并运行分布式分析应用的一种方法）大数据开发方向 

        方向二：数据挖掘、数据分析&机器学习方向 

        方向三：大数据运维&云计算方向

## “大数据”专业毕业后干什么?

        事实上，大数据工作者可以施展拳脚的领域非常广泛，从国防部、互联网创业公司到金融机构，到处需要大数据项目来做创新驱动。
        数据分析或数据处理的岗位报酬也非常丰厚，在硅谷，入门级的数据科学家的收入已经是6位数了(美元)。
{'fraction_non_alphanumeric': 0.14483627204030228, 'fraction_numerical': 0.013853904282115869, 'mean_word_length': 4.907063197026022, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 17, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '809690', 'n_tokens_mistral': 1399, 'n_tokens_neox': 1553, 'n_words': 79}