简体中文(ZH-CN) English(EN) 繁体中文(ZH-TW) 日本語(JA) 한국어(KO) Melayu(MS) Français(FR) Deutsch(DE)
Maison> base de données> tutoriel mysql> le corps du texte

hadoop学习-前记

WBOY
Libérer： 2016-06-07 16:38:29
original
1061 Les gens l'ont consulté

之前找工作的时候，我的目标是找互联网、电商方面的公司开发工作，但是碰了好多壁。原因是一直做企业级开发，与互联网开发方面不对口。而互联网公司都需要有互联网开发经验的，对这方面我有很大的不足。 一次在面试的过程中我就问面试官，互联网现在一般用哪

之前找工作的时候，我的目标是找互联网、电商方面的公司开发工作，但是碰了好多壁。原因是一直做企业级开发，与互联网开发方面不对口。而互联网公司都需要有互联网开发经验的，对这方面我有很大的不足。

一次在面试的过程中我就问面试官，互联网现在一般用哪些技术，他告诉我现在互联网开发主要是针对大数据的处理，云计算的方向。具体点的就是hadoop、hbase、高并发、网络编程方面的。

所以最近我准备学习hadoop的应用，在此留下我学习的足迹。


先上一段百度百科对hadoop的介绍：

hadoop：

一个分布式系统基础架构，由Apache基金会所开发。

用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。

[1]Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streaming access）文件系统中的数据。

Hadoop的框架最核心的设计就是：HDFS和MapReduce.HDFS为海量的数据提供了存储，则MapReduce为海量的数据提供了计算。[2]


声明:本文采用 BY-NC-SA 协议进行授权 | yu博客
转载请注明转自《hadoop学习-前记》

Étiquettes associées：
hadoop 学习 找工作 目标
source：php.cn
Article précédent：在异步回调中操作redis的一个异常 Article suivant：mysql 关闭 bin-log 日志
Déclaration de ce site Web
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn
Derniers articles par auteur
Derniers numéros
À quoi sert Hadoop, quels sont ses principaux scénarios et domaines d'application et quels sont les principaux problèmes à résoudre ? Comment pouvons-nous personnellement le faire ? À quoi sert Hadoop ? Quels sont ses principaux scénarios d'application et domaines d'appli...
Depuis 2020-09-24 16:31:30
0
1
1245
python - Puis-je exécuter une instruction source avec pyhive? curseur.execute("source '/home/hadoop/create_table.sql'") résultat de l'exécutio...
Depuis 2017-06-28 09:22:35
0
1
1272
hadoop - Utilisez le module python hdfs ou d'autres modules similaires pour filtrer le contenu du journal sur HDFS Actuellement, la société utilise HDFS pour stocker les journaux téléchargés par chaque ser...
Depuis 2017-06-13 09:24:45
0
1
714
hadoop - 不同机器上docker创建的虚拟机器怎么相互访问 我在A机器上用docker虚拟化创建了10台linux机器。B机器上同样虚拟化10台机器。我要搭建spark环境，B和A上的虚拟机可以相互通过ssh访问吗？
Depuis 2017-04-26 09:01:41
0
2
658
eclipse 读取Hadoop文件 如图，通过dfs，我能看见hdfs里的存储目录结构，但是双击后打开缺看不到文件的内容。报错：Could not obtain block: BP-583232605-127.0.1...
Depuis 2017-04-25 09:02:41
0
0
540
Rubriques connexes
Plus>
Recommandations populaires
Tutoriels populaires
Plus>
Tutoriels associés
Recommandations populaires
Derniers cours
Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal
À propos de nous Clause de non-responsabilité Sitemap
Site Web PHP chinois：Formation PHP en ligne sur le bien-être public，Aidez les apprenants PHP à grandir rapidement！