同时并行流水运行和并行的关系,而在虚拟化技术中

2016贵州省专业技术人员大数据学习测试答案(92分)_文档下载
亿万文档 免费下载
当前位置: &
& 2016贵州省专业技术人员大数据学习测试答案(92分)
2016贵州省专业技术人员大数据学习测试答案(92分)
1. ()提供的支撑技术,有效解决了大数据分析、研发的问题,比如虚拟化技术、并行计算、海量存储和海量管理等。(单选题1分)得分:1分
2. 根据周琦老师所讲,高德交通信息服务覆盖全国高速()以上。(单选题1分)得分:1分
3. 根据涂子沛先生所讲,社交媒体是在哪一年出现的?(单选题1分)得分:1分
4.“十二五”规划纲要:首次把()纳入国家规划层面。(单选题1分)得分:1分
A. 质量控制信息化
B. 资源环境信息化
C. 市场流通信息化
D. 生产经营信息化
Word文档免费下载: (下载1-14页,共14页)
贵州省专业技术人员在线学习平台2016公需科目大数据培训考试答案(90分)_IT认证_资格考试/认证_教育专区。2017贵州省专业技术人员在线学习平台公需科目大数据培训考试......贵州省专业技术人员在线学习平台公需科目大数据培训考试习题及答案92分_交规考试_...(判断题 1 分) 分 正确 错误 57.2016 年 3 月 2 日,云上贵州? 大......贵州省2017年专业技术人员公需科目大数据测试题答案(...o 得分:1 分 A.2014 B.2012 C.2010 D.2016 ...从传播学角度解释,新兴的网络平台提供了非常大的开放......2017贵州省专业技术人员在线学习平台公需科目大数据培训考试习题及答案_IT认证_...B 12.阿兰?图灵在哪一年提出图灵测试的概念?(单选题 1 分) o o o o ?......2016年贵州省专业技术人员在线学习平台考试试题及答案1_财会/金融考试_资格考试/...(单选题 1 分) o o o o 得分:1 分 A.大数据等于小数据加上大信息 B.......贵州省专业技术人员在线学习平台2017公需科目大数据培训考试答案_交规考试_资格...(单选题 1 分) 1分 A.2016 年 B.2015 年 C.2014 年 D.2013 年 o o......贵州专业技术人员公需科目大数据培训考试部分试题及参考答案_财会/金融考试_资格...A.2010 B.2014 C.2012 D.2016 4.ENIAC 诞生于哪一年?(单选题 1 分) ......培训考试及答案 91分_城乡/园林规划_工程科技_专业...贵州省专业技术人员在线测试 公需科目大数据培训考试...1 分 A.2013 年 B.2014 年 C.2016 年 D.......贵州省专业技术人员公需科目大数据培训试题及答案100分_城乡/园林规划_工程科技_...(单选题 1 分) o o o o 得分:1 分 A.2014 B.2012 C.2010 D.2016 ......2016-2017 贵州专业技术人员公需科目大数据培训考 试部分试题及参考答案 ? 1.根据周琦老师所讲,高德 2014 年被()全资收购了。(单选题 1 分) 分 o o o o......新手园地& & & 硬件问题Linux系统管理Linux网络问题Linux环境编程Linux桌面系统国产LinuxBSD& & & BSD文档中心AIX& & & 新手入门& & & AIX文档中心& & & 资源下载& & & Power高级应用& & & IBM存储AS400Solaris& & & Solaris文档中心HP-UX& & & HP文档中心SCO UNIX& & & SCO文档中心互操作专区IRIXTru64 UNIXMac OS X门户网站运维集群和高可用服务器应用监控和防护虚拟化技术架构设计行业应用和管理服务器及硬件技术& & & 服务器资源下载云计算& & & 云计算文档中心& & & 云计算业界& & & 云计算资源下载存储备份& & & 存储文档中心& & & 存储业界& & & 存储资源下载& & & Symantec技术交流区安全技术网络技术& & & 网络技术文档中心C/C++& & & GUI编程& & & Functional编程内核源码& & & 内核问题移动开发& & & 移动开发技术资料ShellPerlJava& & & Java文档中心PHP& & & php文档中心Python& & & Python文档中心RubyCPU与编译器嵌入式开发驱动开发Web开发VoIP开发技术MySQL& & & MySQL文档中心SybaseOraclePostgreSQLDB2Informix数据仓库与数据挖掘NoSQL技术IT业界新闻与评论IT职业生涯& & & 猎头招聘IT图书与评论& & & CU技术图书大系& & & Linux书友会二手交易下载共享Linux文档专区IT培训与认证& & & 培训交流& & & 认证培训清茶斋投资理财运动地带快乐数码摄影& & & 摄影器材& & & 摄影比赛专区IT爱车族旅游天下站务交流版主会议室博客SNS站务交流区CU活动专区& & & Power活动专区& & & 拍卖交流区频道交流区
论坛徽章:0
注:这是我附在某一个讨论线索中作为回贴发出的,这几天在整理本版帖子,发现还是有点用,为了便于大家查找,拖出来单独成贴供大家参考。
用VMWare 实现4节点的Lustre 并行文件系统集群
作者:nntp& &最后修改于
==========================================================================
简介: 本文介绍了通过2台物理服务器和vmware系统,虚拟出4个独立的linux服务器实现
环境配置: 2台物理服务器, 4个虚拟节点.
Server1: AMD64 ,&&host OS SLES9SP3+errata x86-64 version, vmware server beta(latest build)
& && && && & vmware guestOS 1 :&&RHEL4U3 x86-64 version& &&&=& mds
& && && && & vmware guestOS 2 :&&RHEL4U3 x86-64 version& &&&=& client
& && && && & lustre的那些rpm包我装的是X86-64的版本(版本1.4.6)
Server2: Intel dual core EM64T, host OS SLES9SP3+errara x86-64 version,vmware server beta(latest build)
& && && && &vmware guestOS 1: RHEL4U3 x86 version& & =& ost1
& && && && &vmware guestOS 1: RHEL4U3 x86 version& & =& ost1
& && && && &lustre的那些rpm包我装的是X86的版本(版本1.4.6)
============================================================================
config.sh 文件内容
# config.sh
# Create nodes
rm -f config.xml
lmc -m config.xml --add net --node node-mds --nid n1 --nettype tcp
lmc -m config.xml --add net --node node-ost1 --nid n3 --nettype tcp
lmc -m config.xml --add net --node node-ost2 --nid n4 --nettype tcp
lmc -m config.xml --add net --node client --nid n2 --nettype tcp
# Cofigure MDS
lmc -m config.xml --add mds --node node-mds --mds mds-test --fstype ldiskfs --dev /tmp/mds-test --size 50000
# Configures OSTs
lmc -m config.xml --add lov --lov lov-test --mds mds-test --stripe_sz 1048576 --stripe_cnt 0 --stripe_pattern 0
lmc -m config.xml --add ost --node node-ost1 --lov lov-test --ost ost1-test --fstype ldiskfs --dev /tmp/ost1-test --size 100000
lmc -m config.xml --add ost --node node-ost2 --lov lov-test --ost ost2-test --fstype ldiskfs --dev /tmp/ost2-test --size 100000
# Configure client (this is a \'generic\' client used for all client mounts)
lmc -m config.xml --add mtpt --node client --path /mnt/lustre --mds mds-test --lov lov-test
===============================================================================
所有4个node 的 /etc/hosts 文件内容
[root@n1 ~]# cat /etc/hosts
# Do not remove the following line, or various programs
# that require network functionality will fail.
127.0.0.1& && && && && &localhost
192.168.0.31& && && && &n1
192.168.0.32& && && && &n2
192.168.0.33& && && && &n3
192.168.0.34& && && && &n4
===============================================================================
产生xml文件之后,分别scp到每个node的/root目录
===============================================================================
root 登陆到ost1,运行 lconf --reformat --node node-ost1 config.xml
root 登陆到ost1,运行 lconf --reformat --node node-ost2 config.xml
root 登陆到mds,运行 lconf --reformat --node node-mds config.xml
root 登陆到client,运行 lconf --node client config.xml
这个时候,在client node 上,用root运行 df -hT 命令, 已经看到 client node的 /mnt/lustre 被mount上了,&&
===============================================================================
启动OST1的时候的屏幕信息
[root@n3 ~]# lconf --reformat --node node-ost1 config.xml
loading module: libcfs srcdir None devdir libcfs
loading module: lnet srcdir None devdir lnet
loading module: ksocklnd srcdir None devdir klnds/socklnd
loading module: lvfs srcdir None devdir lvfs
loading module: obdclass srcdir None devdir obdclass
loading module: ptlrpc srcdir None devdir ptlrpc
loading module: ost srcdir None devdir ost
loading module: ldiskfs srcdir None devdir ldiskfs
loading module: fsfilt_ldiskfs srcdir None devdir lvfs
loading module: obdfilter srcdir None devdir obdfilter
NETWORK: NET_node-ost1_tcp NET_node-ost1_tcp_UUID tcp n3
OSD: ost1-test ost1-test_UUID obdfilter /tmp/ost1-test 100000 ldiskfs no 0 0
OST mount options: errors=remount-ro
[root@n3 ~]#
启动OST2的屏幕信息
[root@n4 ~]# lconf --reformat --node node-ost2 config.xml
loading module: libcfs srcdir None devdir libcfs
loading module: lnet srcdir None devdir lnet
loading module: ksocklnd srcdir None devdir klnds/socklnd
loading module: lvfs srcdir None devdir lvfs
loading module: obdclass srcdir None devdir obdclass
loading module: ptlrpc srcdir None devdir ptlrpc
loading module: ost srcdir None devdir ost
loading module: ldiskfs srcdir None devdir ldiskfs
loading module: fsfilt_ldiskfs srcdir None devdir lvfs
loading module: obdfilter srcdir None devdir obdfilter
NETWORK: NET_node-ost2_tcp NET_node-ost2_tcp_UUID tcp n4
OSD: ost2-test ost2-test_UUID obdfilter /tmp/ost2-test 100000 ldiskfs no 0 0
OST mount options: errors=remount-ro
[root@n4 ~]#
启动MDS的屏幕信息
[root@n1 ~]# lconf --reformat --node node-mds config.xml
loading module: libcfs srcdir None devdir libcfs
loading module: lnet srcdir None devdir lnet
loading module: ksocklnd srcdir None devdir klnds/socklnd
loading module: lvfs srcdir None devdir lvfs
loading module: obdclass srcdir None devdir obdclass
loading module: ptlrpc srcdir None devdir ptlrpc
loading module: mdc srcdir None devdir mdc
loading module: osc srcdir None devdir osc
loading module: lov srcdir None devdir lov
loading module: mds srcdir None devdir mds
loading module: ldiskfs srcdir None devdir ldiskfs
loading module: fsfilt_ldiskfs srcdir None devdir lvfs
NETWORK: NET_node-mds_tcp NET_node-mds_tcp_UUID tcp n1
MDSDEV: mds-test mds-test_UUID /tmp/mds-test ldiskfs no
recording clients for filesystem: FS_fsname_UUID
Recording log mds-test on mds-test
LOV: lov_mds-test 4f3bf_lov_mds-test_f34d7ba738 mds-test_UUID 0
0 [u\'ost1-test_UUID\', u\'ost2-test_UUID\'] mds-test
OSC: OSC_n1_ost1-test_mds-test 4f3bf_lov_mds-test_f34d7ba738 ost1-test_UUID
OSC: OSC_n1_ost2-test_mds-test 4f3bf_lov_mds-test_f34d7ba738 ost2-test_UUID
End recording log mds-test on mds-test
MDSDEV: mds-test mds-test_UUID /tmp/mds-test ldiskfs 50000 no
MDS mount options: errors=remount-ro
[root@n1 ~]#
启动client 的屏幕信息
[root@n2 ~]# lconf --node client config.xml
loading module: libcfs srcdir None devdir libcfs
loading module: lnet srcdir None devdir lnet
loading module: ksocklnd srcdir None devdir klnds/socklnd
loading module: lvfs srcdir None devdir lvfs
loading module: obdclass srcdir None devdir obdclass
loading module: ptlrpc srcdir None devdir ptlrpc
loading module: osc srcdir None devdir osc
loading module: lov srcdir None devdir lov
loading module: mdc srcdir None devdir mdc
loading module: llite srcdir None devdir llite
NETWORK: NET_client_tcp NET_client_tcp_UUID tcp n2
LOV: lov-test e0002_lov-test_a77190f32b mds-test_UUID 0
0 [u\'ost1-test_UUID\', u\'ost2-test_UUID\'] mds-test
OSC: OSC_n2_ost1-test_MNT_client e0002_lov-test_a77190f32b ost1-test_UUID
OSC: OSC_n2_ost2-test_MNT_client e0002_lov-test_a77190f32b ost2-test_UUID
MDC: MDC_n2_mds-test_MNT_client 96c98_MNT_client_ mds-test_UUID
MTPT: MNT_client MNT_client_UUID /mnt/lustre mds-test_UUID lov-test_UUID
检查 client node&&文件系统加载情况
[root@n2 ~]# df -hT
Filesystem& & Type& & Size&&Used Avail Use% Mounted on
/dev/mapper/VolGroup00-LogVol00
& && && && &&&ext3& & 4.1G&&3.0G&&920M&&77% /
/dev/sda1& &&&ext3& &&&99M& &14M& &80M&&15% /boot
none& && && &tmpfs& & 187M& &&&0&&187M& &0% /dev/shm
config lustre_lite& & 190M&&8.5M&&171M& &5% /mnt/lustre
[root@n2 ~]#
[ 本帖最后由 nntp 于
00:21 编辑 ]
稍有积蓄, 积分 376, 距离下一级还需 124 积分
论坛徽章:0
真是不错,要是图文并茂就更好了。
论坛徽章:0
原帖由 chinesecai 于
11:50 发表
真是不错,要是图文并茂就更好了。
你可以动手做完后,把图补上.
稍有积蓄, 积分 222, 距离下一级还需 278 积分
论坛徽章:0
作个记号,明天试试!
家境小康, 积分 1257, 距离下一级还需 743 积分
论坛徽章:0
楼主装的是哪个版本的lustre?1.4.6.1还是???
楼主有尝试做failover么?
白手起家, 积分 43, 距离下一级还需 157 积分
论坛徽章:0
回复 7楼 molecar 的帖子
啊,就做4个节点了,俺两个节点有点问题,向牛人请教:
我安装完oracle cluster软件后的状态
-bash-3.00$ ./crs_stat -t
Name& && && &&&Type& && && &&&Target& & State& &&&Host& && &&&
------------------------------------------------------------
ora.db1.gsd& & application& & ONLINE& & ONLINE& & db1& && && &
ora.db1.ons& & application& & ONLINE& & ONLINE& & db1& && && &
ora.db1.vip& & application& & ONLINE& & ONLINE& & db1& && && &
ora.db2.gsd& & application& & ONLINE& & ONLINE& & db2& && && &
ora.db2.ons& & application& & ONLINE& & ONLINE& & db2& && && &
ora.db2.vip& & application& & ONLINE& & ONLINE& & db2& &
-bash-3.00$ olsnodes -n
-bash-3.00$ ls -l /etc/init.d/init.*
-r-xr-xr-x&&1 root root&&1951 Jul 23 22:09 /etc/init.d/init.crs*
-r-xr-xr-x&&1 root root&&4721 Jul 23 22:09 /etc/init.d/init.crsd*
-r-xr-xr-x&&1 root root 35401 Jul 23 22:09 /etc/init.d/init.cssd*
-r-xr-xr-x&&1 root root&&3197 Jul 23 22:09 /etc/init.d/init.evmd*
完后安装oracle 软件无法选节点,只能装单机,偶不是很明白,请赐教....
小富即安, 积分 3746, 距离下一级还需 1254 积分
论坛徽章:0
楼上这个是啥意思?
另外,请问nntp:
1,--dev /tmp/mds-test --size 50000&&这个是什么意思?
2,lmc -m config.xml --add lov --lov lov-test --mds mds-test --stripe_sz 1048576 --stripe_cnt 0 --stripe_pattern 0
这句中的--stripe_sz 1048576 --stripe_cnt 0 --stripe_pattern 0也没看明白。
3,很明显,这个例子并没说明它并行实际实现,只能算是一个练习。我想ost1和ost2应该分区和为df -h看到的值,这个理解应该是正确的吧?
我刚看完lustre howto,跟multiple nodes例子一样,所以只能请教了。
我明天会去看看mannul,也许到时候可以得到释疑。
lustre文件系统,我初步有了一些印象。
1.mds相当于一个 调度器,为了实现冗余,应该这里做双机(HA),lustre肯定有实现。
2,ost相当于GFS的GNDB servers,它是实际负责IO的服务器。
一个理想的结构应该如下:
& && && &storage1& && &&&storage2
& && && && && && & |& && && && && && &&&|
& && && && && && &----fc switch---
& && && && && && && && && & |
& && && && & __________________
& && && && &|& && & |& && &&&|& && && &|& && & |
& && && &&&ost1&&ost2 ost3& & ost4&&ost5
& && && && &|& && &&&|& && & |& && && &|& && &&&|
& && && && &___________________&&
& && && && && && && && && && &| ethernet Gb
& && && && && & ------------------------
& && && && && && &|& && && && && && &&&|
& && && && && & mds1&&(HA)&&mds2
& && && && && && & |& && && && && && &&&|
& & -------------------------------------------------
& & |& && &&&|& && && & |& && && &&&|& && && &|& && && && && & |
&&client1 client2 client3 client4 client5 ....clientn
小富即安, 积分 3746, 距离下一级还需 1254 积分
论坛徽章:0
ost&&上面一层还应可以考虑lvm2等实现动态分区调整(也许在lustre文件层可以调整)。
家境小康, 积分 1257, 距离下一级还需 743 积分
论坛徽章:0
这个帖子不错,楼主你还没回答我的问题呢
论坛徽章:0
sorry, miss 掉你的post了,
我的是1461, 没有作failover, 因为我装过HP的SFS, MDS默认是HA掉的,SFS是原生在lustre上面的,当时测试的时候想lustre直接做的话,应该差别不大就偷懒掉了.
有空我会再做做的.
北京盛拓优讯信息技术有限公司. 版权所有 京ICP备号 北京市公安局海淀分局网监中心备案编号:22
广播电视节目制作经营许可证(京) 字第1234号
中国互联网协会会员&&联系我们:
感谢所有关心和支持过ChinaUnix的朋友们
转载本站内容请注明原作者名及出处微软主管讨论虚拟化技术:挑战与机遇并行
ZDNet服务器频道时间:作者:董尧 译/Airflying编 |
本文关键词:
第01页:虚拟化技术:挑战与机遇并行(上)第02页:虚拟化技术:挑战与机遇并行(下)
&&& ZDNetChina站 9月26日专访&&公司部门总经理——Mike Neil由于正在研发一项炙手可热的新科技而受到业内人士的关注。由于正在准备明年软件( Server Virtualisation)——以前它是作为一个功能部件,而现在是作为 Server 2008的插件——的发布,所以他被推到了信息技术产业的风口浪尖。
&&& 四年前作为Connectix公司收购业务的一部分加盟到公司的Neil最近就业内评论、市场竞争、许可授权以及特征的延迟发布接受了记者专访。
&&& 问:一些业内观察家现在普遍的看法是公司已经远远落后于公司。你对这些不看好(WSV)的业内人士有什么看法?
&&& 答:我非常不同意这个看法。目前仍旧是一个发展中的市场和技术。由于很大程度上的运用只局限在相关的有限区域,具有代表性的就是例如软件公司的大型端解决方案(ESX Server)这样的大型企业或基础设施产品,所以公司会有更广的发展空间以使可以应用到更广阔的工业领域中。
&&& 问:您是否已经准备好了2008年中期的发布?很多人士都在您作出春季研发路线调整之后对这点表示出了怀疑。
&&& 答:我们作出了路线调整——推迟了一些组件的研发工作——所以我们可以保证进度计划以期可以在确定的期限推出高质量的技术产品: Server 2008外加180天(该将于日正式发运)。
&&& 问:鉴于操作系统的周期性发布循环,此次延迟发布的组件可不可以在下次也许是四年周期以后的系统发布之前推出呢?
&&& 答:的推出是不在()循环内的,虽然我们确实计划在随后的(操作系统)发布中推出所有延迟发布的程序组件,可是我们没有设定特定的时间表,只是希望可以与此周期性循环同步。
&&& 问:是与预定于2009年底进行的 Server R2发布同步还是与2011年下一轮大型的发布同步?
&&& 答:我们的目标是尽快推出这些组件。
&&& 问:一些批评家称可把一台正在运行的虚拟机从一台物理迁移到另一台的热迁移(Live Migration)组件的延迟发布对于试图与虚拟技术公司竞争的公司来说是一个严重的挫折。您怎么看待这个问题?
&&& 答:某种程度上我不赞成这个观点。从竞争的观点看,热迁移组件确实是一个极具诱惑力的组件,听起来也很激动人心。但事实上在公司使用公司产品或其他产品的客户中,只有极少数使用那种类型的功能,这是一项设置起来相对比较高级的科技。我们目前拥有的以及正在发运的能力——群集虚拟机的功能以及快速迁移的能力——将足以满足客户们的需求。
内容导航栏
上一篇:下一篇:
的相关文章
的相关文章
今日推荐阅读:
最受关注的文章:
最新更新文章:
本篇文章共有
- 发表评论 -
重磅专题报道
Copyright& 1997- CNET Networks 版权所有。 ZDNet 是CNET Networks公司注册服务商标。中华人民共和国电信与信息服务业务经营许可证编号:京ICP证010391号 京ICP备号-159京公网安备:

我要回帖

更多关于 如何使线程并行运行 的文章

 

随机推荐