结果:找到“hdfs”相关内容28个,排序为按回复时间降序,搜索更多相关帖子请点击“高级
大数据实务学习资料-基于Kylin
6 个回复 - 850 次查看 Kylin大数据实务学习资料 |- 集群分发脚本准备.mp4 - 338.20 MB |- 集群分发脚本准备(1).mp4 - 338.20 MB |- 从零Start-www.cong0sousuo.top.url - 116 B |- 【就业课】大数据+项目实战(环境文档).p ...2020-12-9 14:37 - wz151400 - 现金交易版
【原创】大数据原理与技术(学习总结)
1 个回复 - 867 次查看 RT,收一些辛苦整理费 【资料部分内容截图】 【资料目录】 第一章 大数据概述 第二章 Hadoop大数据处理平台 第三章 大数据存储技术(HDFS) 第四章 大数据离线计算 ...2019-10-18 10:42 - 芋头和稀饭 - 现金交易版
Hadoop 生态圈解读
0 个回复 - 433 次查看 Hadoop 生态圈解读Agenda:1. Hdfs-是什么?为什么?实例2. Yarn-是什么?为什么?实例3. MapReduce-是什么?为什么?实例4. Zookeeper-是什么?为什么?实例5. HBase-是什么?为什么?实例6. Pig-是什么?为什么? ...2019-5-13 16:58 - Mujahida - 现金交易版
hdfs上文件读写、追加、上传下载删除操作Java命令
2 个回复 - 3515 次查看 hdfs上文件读写、追加、上传下载删除操作 Java命令实现 //0.组织配置文件 //1.初始化 filesystem //2.创建文件夹,这一天的文件夹,若存在则删去,若不在就删去。 //3.在今天的 ...2018-4-9 08:43 - LiZara - Hadoop论坛
在关系数据库和hdfs,hive之间数据导入导出的工具sqoop
0 个回复 - 1595 次查看 1.sqoop是什么 让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 2.sqoop特点Sqoop中一大亮点就是可以通过hadoop的mapreduce把数据从关系型数据库中导入数据到HDFS。sq ...2018-4-7 18:41 - LiZara - Hadoop论坛
HDFS原理及操作
0 个回复 - 580 次查看 HDFS原理及操作-HDFS原理及操作2018-4-7 13:13 - LiZara - 新手入门区
maven工程pom报错和hdfs存储机制与运行原理
0 个回复 - 597 次查看 Pom.xml文件报错eclipse本身的源不行,需要重新配置源.选择配置阿里的源:根据这个原因来配pom.xml文件2018-4-7 12:49 - LiZara - 新手入门区
Hadoop分布式文件系统(HDFS)架构–适用于每位数据工程师的HDFS指南
0 个回复 - 711 次查看 Hadoop分布式文件系统(HDFS)架构–适用于每位数据工程师的HDFS指南 在当代,处理海量数据是司空见惯的。从下一个WhatsApp消息到下一个Tweet,您在与技术互动的每个步骤都在创建数据。现在,将其乘以45亿互联网用户 ...2020-12-17 20:53 - 时光永痕 - 数据分析与数据挖掘
打破HDFS的性能障碍;首先存储对象
0 个回复 - 889 次查看 打破HDFS的性能障碍;首先存储对象 很少有人会反对Hadoop HDFS下降的说法。实际上,Hadoop生态系统的HDFS部分不仅仅是下降-它是自由下落。在其诞生之初,它就扮演着高吞吐量,容错的分布式文件系统的角色。秘密之处 ...2020-9-16 20:15 - 时光永痕 - 数据分析与数据挖掘
【学习笔记】总结-学习-熟悉hdfs基本命令~熟能生巧~ 今天开始学习专项知识h ...
0 个回复 - 595 次查看 总结-学习-熟悉hdfs基本命令~熟能生巧~ 今天开始学习专项知识hive~果然搞清楚了hive导数~下午半天基本重点都在sql语句上啦~看来要好好复习下~2020-3-24 21:55 - W160912190030eO - Forum
【学习笔记】今天是半无聊半坎坷的一天~ 上午老师讲了半天hdfs分布式文件系统 ...
0 个回复 - 312 次查看 今天是半无聊半坎坷的一天~ 上午老师讲了半天hdfs分布式文件系统~一堆陌生的概念ToT 下午带着我们搭建分布式Hadoop~ 现场演绎全员failed~哈哈2020-3-19 21:15 - W160912190030eO - Forum
【学习笔记】第三天~Hadoop搭建~ 修改环境变量4个:core-site/hdfs-sitw/map ...
0 个回复 - 596 次查看 第三天~Hadoop搭建~ 修改环境变量4个:core-site/hdfs-sitw/mapred-sit/yarn-site~ 安装了三个组件:zookeeper,hbase,spark。安装spark前先安装Scala。 还安装了anaconda,及findspark,用于连接python和spark~ ...2020-3-18 20:33 - W160912190030eO - Forum
使用Java API操作完成和HDFS的交互
1 个回复 - 726 次查看 CDA数据分析师[/backcolor]:数据科学、人工智能从业者的在线大学。 [/backcolor][/backcolor]数据科学(Python/R/Julia)数据分析、机器学习、深度学习 Q群:874447702[/backcolor][/backcolor]关闭HDFS的权限检查 ...2019-9-11 14:16 - 时光人 - JAVA语言开发技术
sqoop在hdfs与oracle导入、导出的实例
1 个回复 - 1848 次查看 Oracle—import---->hdfs 示例 bin/sqoop import \ ##执行动作 --connect jdbc:oracle:thin:@//11.240.34.6:1521/orcl \ ##连接信息 --username PDADMIN1_V1 \##用户名 --password pdadmin1_v1 \ ##密码 --t ...2019-2-2 11:42 - joy0519 - Hadoop论坛
Hadoop技术内幕:深入解析HADOOP COMMON和HDFS架构设计与实现原理.pdf(中文高清版)
3 个回复 - 2566 次查看 “Hadoop技术内幕”共两册,分别从源代码的角度对“Common+HDFS”和MapReduce的架构设计和实现原理进行了极为详细的分析。《Hadoop技术内幕:深入解析HadoopCommon和HDFS架构设计与实现原理》由腾讯数据平台的资深Ha ...2018-4-7 23:17 - 952019901 - Hadoop论坛
高可用性的HDFS:Hadoop分布式文件系统深度实践
4 个回复 - 1375 次查看 本书专注于Hadoop 分布式文件系统(HDFS)的主流HA 解决方案,内容包括:HDFS 元数据解析、Hadoop 元数据备份方案、Hadoop Backup Node 方案、AvatarNode 解决方案以及最新的HA 解决方案Cloudrea ...2016-7-20 19:38 - 514050209 - python论坛
Making Data Science Accessible – HDFS
0 个回复 - 651 次查看 By Dan Kellett, Director of Data Science, Capital One.Disclaimer: This is my attempt to explain some of the ‘Big Data’ concepts using basic analogies. There are inevitably nuances my analogy misses. ...2016-8-7 15:47 - oliyiyi - winbugs及其他软件专版
SparkR读取hdfs文件转R local data frame
2 个回复 - 2995 次查看 读取HDFS文件 转R local data frame2016-5-17 10:07 - yudedipan - R语言论坛
Hadoop核心架构HDFS+MapReduce+Hbase+Hive内部机理详解
1 个回复 - 1651 次查看 编者按:HDFS和MapReduce是Hadoop的两大核心,除此之外Hbase、Hive这两个核心工具也随着Hadoop发展变得越来越重要。本文作者张震的博文《Thinking in BigDate(八)大数据Hadoop核心架构HDFS+MapReduce+Hbase+Hive ...2016-2-26 07:43 - 安然2016 - 数据分析师(CDA)专版
【转干货】Hadoop分布式文件系统HDFS的工作原理
1 个回复 - 2124 次查看 Hadoop分布式文件系统HDFS的工作原理 [/backcolor] Hadoop分布式文件系统(HDFS)是一种被设计成适合运行在通用硬件上的分布式文件系统。HDFS是一个高度容错性的系统,适合部署在廉价 的机器上。它能提供高吞 ...2015-12-23 10:29 - 小段DM - Hadoop论坛
求助:利用MapReduce将ACCESS数据库文件存放到HDFS上
1 个回复 - 1605 次查看 各位大神,小弟遇到了一个比较棘手的问题 得到的数据是以ACCESS文件形式存储的,现在要将数据存放到HDFS上以便利用分析,但是小弟才疏学浅不知如何操作。望有能人可以赐教。 数据形式见下表: 数据只包含一个表 ...2015-6-16 20:06 - Gripen2015 - Hadoop论坛
pydoop:python to hdfs+mapreduce
1 个回复 - 1847 次查看 Python MapReduce Programming with Pydoop Pydoop: a Python MapReduce and HDFS API for Hadoop yield:让函数变成generator2015-3-29 22:37 - EchoEstelle - python论坛
〖摘·hadoop〗设计目标和hdfs的结构(二)
1 个回复 - 1978 次查看 前提和设计目标 [hr] 硬件错误 硬件错误是常态而不是异常。HDFS可能由成百上千的服务器所构成,每个服务器上存储着文件系统的部分数据。我们面对的现实是构成系统的组件数目是巨大的,而且任一组件都有可 ...2015-3-16 14:51 - 我的素质低 - 经管代码库
用MapReduce+HDFS为数据去重
1 个回复 - 2740 次查看 随着存储数据信息量的飞速增长,越来越多的人开始关注存储数据的缩减方法。数据压缩、单实例存储和重复数据删除等都是经常使用的存储数据缩减技术。 重复数据删除往往是指消除冗余子文件。不同于压缩,重复数据删除 ...2015-3-1 08:09 - olympic - Hadoop论坛