linux中怎样把本地文件传到hdfs上
⑴ 我用linux搭建hadoop集群,在本地我用eclipse向节点上传文件 但是文件没有上传到hdfs节点上
在configuration后面一行加上conf.addResource(new Path("/home/yourname/hadoop/conf/core-site.xml"));这样就好了。
⑵ 怎么把本地的文件上传到linux服务器
SecureCRT与SshClient不同的就是,SecureCRT没有图形化的文件传输工具,不过也不影响,用命令来实现的话,其实会方便快捷很多。
第一种方式:
上传文件只需在shell终端仿真器中输入命令“rz”,即可从弹出的对话框中选择本地磁盘上的文件,利用Zmodem上传到服务器当前路径下。
下载文件只需在shell终端仿真器中输入命令“sz 文件名”,即可利用Zmodem将文件下载到本地某目录下。
通过“File Transfer”可以修改下载到本地的默认路径。设置默认目录:options-->session options-->file transfer。
第二种方式:用sftp
securecrt 按下ALT+P就开启新的会话 进行ftp操作。
输入:help命令,显示该FTP提供所有的命令
pwd: 查询linux主机所在目录(也就是远程主机目录)
lpwd: 查询本地目录(一般指windows上传文件的目录:我们可以通过查看”选项“下拉框中的”会话选项“,如图二:我们知道本地上传目录为:D:/我的文档)
ls: 查询连接到当前linux主机所在目录有哪些文件
lls: 查询当前本地上传目录有哪些文件
lcd: 改变本地上传目录的路径
cd: 改变远程上传目录
get: 将远程目录中文件下载到本地目录
put: 将本地目录中文件上传到远程主机(linux)
quit: 断开FTP连接
⑶ eclipse(java api)操作hadoop hdfs,我试图将本地文件拷贝进hdfs,目标却是本地文件系统,不是hdfs。
恭喜啊,学习hadoop需要先学好命令啊。
想学Linux命令就去www.linuxsky.cn,里面也可以学习脚本和svn的命令,哈哈
⑷ 我用linux搭建hadoop集群,在本地我用eclipse向节点上传文件,请问上传的文件在节点的什么位置
你可以先刷新一下再看看,另外实在不行,可以用HDFS的命令,在你的线上的HDFS里找找,命令大概是hadoop fs -ls /(看根目录下的文件/文件夹,hadoop dfs -ls /也可以),这样你就可以看到当前的HDFS里的文件夹或者文件,再依次找找你看得见的路径。一般是可以看见的。
⑸ 本地文件上传到Linux服务器的几种方法
常见有使用:scp命令、xshell软件里的xftp程序、U盘挂载、服务器自带的lrzsz程序。
一、scp使用说明:
1、把本机的文件传给目的服务器:
[email protected]:/super
备注:把本机get66.pcap拷贝到147这台服务器的super目录下,需要提供147的密码
2、在本机上执行scp,把远端的服务器文件拷贝到本机上:
[email protected]:/super/dns.pcap/
备注:在本机上执行scp,把远端服务器的dns.pcap文件拷贝到本机的根目录下
3、拷贝目录下的所有文件:
scp-r/super/[email protected]:/
备注:把/super/目录下的所有文件,拷贝到145服务器根目录下
二、xshell软件里的xftp程序:
xshell这个软件很好,强烈推荐哦!!!
里面有个xftp小插件,可以支持文件在笔记本和服务器互传,这个小插件需要单独在网上下载,直接网络搜xftp,很方便。
1、点击xshell软件上的xftp图标(前提xftp已经下载好)
四、服务器自带的lrzsz程序
现在大多数Linux服务器都带有lrzsz程序,方便上传下载文件,如果没有,可以直接下载rpm包安装下就好。
lrzsz安装包链接:http://down.51cto.com/data/2322755
1、rz(笔记本上传给服务器)
1选择笔记本上文件传给服务器
2、sz(服务器上的文件拷贝给笔记本)
sz test.tar
把服务器的test.tar拷贝给笔记本。
⑹ 关于将爬虫爬取的数据存入hdfs
先放入linux文件里面,然后使用hdfs命令将本地文件传输到hdfs即可
⑺ 怎么把本地文件上传到linux上
首先在Linux服务器上设置好ssh服务,然后确保能用ssh登录Linux服务器。然后,如果你的系统是Windows,可以用WinSCP这个图形界面的软件上传本地文件到Linux服务器上,用WinSCP连接Linux服务器的时候要注意选择SCP协议。如果你的系统是Linux系统,需要上传文件到另一个Linux服务器(Linux服务器也是要开ssh服务),可以用scp命令上传本地文件,这个命令的用法可以网络一下。
⑻ linux下,如何把整个文件夹上传到服务器(另一台linux)
1、到官网下载mysql的rpm版。
注意事项:
Linux支持多用户,各个用户对于自己的文件设备有自己特殊的权利,保证了各用户之间互不影响。多任务则是现在电脑最主要的一个特点,Linux可以使多个程序同时并独立地运行。
⑼ 如何将本地文件上传到linux
通过你的描述,将本地的文件上传至linux ,可以通过如下方法来进行:
[root@localhost ss2]# rz
通过rz 命令上传文件,相对来说是最方便的。
温馨提示:
1、再使用rz 命令前,要对其进行安装,如果系统没有安装这个命令是没办法使用的,具体安装命令如下:
#查看rz 包的版本,
[root@Backup2 data]# yum provides lrzsz
lrzsz-0.12.20-36.el7.x86_64
#开始安装
[root@Backup2 data]# yum install lrzsz-0.12.20-36.el7.x86_64 -y
2、在使用rz 命令上传文件时,要预先规划好,上传文件的位置,然后在上传文件。
3、当然上传方式还有很多,eg:第三方软件 crt 自带的上传功能也是很好用。
以上就是关于文件上传的具体方式,由于系统环境不同,可能会有出入,如有问题可以 关注 +私信,我会第一时间回复,希望我的回答能对你有所帮助。。。。。。
⑽ 怎么把本地文件上传到HDFS
A 跟非HA,编程都是一样的。
非HA怎么上传,HA就怎么上传。
只不过地址。有些不一样。这个需要查看集群的配置文件