制作Openstack的Linux镜像的基础知识

镜像的磁盘容器格式

• RAW：原始的格式，一个纯二进制镜像光盘映像，非常便携，一个字：裸。由于原生的裸格式，不支持快照
• QCOW2：qcow2(QEMU copy-on-write version 2)是KVN虚拟化常用的格式，附带有多种功能，例如大小经过压缩、支持快照、性能上接近raw、支持zlib的磁盘压缩、支持AES的加密等
• AMI：Amazon Machine Image
• AKI：Amazon Kernel Image
• ARI：Amazon Ramdisk Image
• AMDK：VMware’s ESXi用的格式
• VDI：Oracle VirtualBox用的格式
• VHD:微软的虚拟硬盘文件(Microsoft Hyper-V)
• VHDX也是微软的虚拟硬盘文件(Microsoft Hyper-V)，但支持Microsoft Server 2012，附加一些防止数据损坏的特性

Read More

用Ambari2管理Hadoop_第一部分：环境

就是这个神奇的网站

Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari目前已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等。

Ambari主要给你带来以下内容：

• 通过一步一步的安装向导简化了集群供应。
• 预先配置好关键的运维指标（metrics），可以直接查看Hadoop Core（HDFS和MapReduce）及相关项目（如HBase、Hive和HCatalog）是否健康。
• 支持作业与任务执行的可视化与分析，能够更好地查看依赖和性能。
• 通过一个完整的RESTful API把监控信息暴露出来，集成了现有的运维工具。
• 用户界面非常直观，用户可以轻松有效地查看信息并控制集群。

创建集群

访问Ambari网址，看到登录界面：

用默认的用户名和密码admin/admin登录。

Read More

本系列文章说明

当我脑海里萌发要写这系列的文章时候，其实我是抗拒的！因为我觉得呀……这是大数据呀，我一个屌丝码农哪有这个能耐。但是又觉得博客总得写点内容，装逼装逼也得附和社会呀，加上看了看Evernote记录的内容甚乱，必须写……后来写着写着真觉得很DUANG~DUANG~DUANG~…..
其实在项目中用到Hadoop的功能甚少，一个HDFS来存储非结构数据，一个是Mapreduce来分布计算处理数据。然而，就算写个简单的Hello world也得把环境搭建起来。所以，本系列的文章，权当我从0开始学习Hadoop的笔记，希望能和像我一样的新手分享经验，同时也希望得到高人指点一二三四五…

本部分内容

• Hadoop生态圈
• 本系类文章的环境介绍
• Ambari安装
  • 所有节点基础配置
  • 本地yum源配置
  • Ambari安装
• 一个神奇的网址

  Read More

又一个博客

以前一直有写博客，博客使用WordPress搭建的。写一段时间后，写作热情下降且空间过期，懒得继续折腾而终止，总是持续不了。

最近接触很多新的知识和技术，一直记录在Evernote，且记录得有些凌乱，借此重出江湖，借此整理好感兴趣的内容并发表到博客上，方便自己查看同时也有一丝开源分享的精神，互相学习吧。

理所当然，本博客所有文章默认都遵循 ；如发现文章对你有侵权嫌疑，请联系我。

Read More