bigdata介绍
概述sql可以处理500到1000万的数据,搭建30-100台集群,大数据集群5000台以上上万。无法在一定时间范围内用常规软件工具(mysql,javaEE等)进行捕捉处理/管理的数据集合。需要新的处理模式才能具有更强的决策力/洞察发现力和流程优化能力的海量和高增长和多样化信息资产。海量数据的存储和读取分析计算。 bigData特点 1.volume大量(人类说过的话5EB) 2.velocit
概述sql可以处理500到1000万的数据,搭建30-100台集群,大数据集群5000台以上上万。无法在一定时间范围内用常规软件工具(mysql,javaEE等)进行捕捉处理/管理的数据集合。需要新的处理模式才能具有更强的决策力/洞察发现力和流程优化能力的海量和高增长和多样化信息资产。海量数据的存储和读取分析计算。 bigData特点 1.volume大量(人类说过的话5EB) 2.velocit
docker镜像解析概念轻量级、可执行的独立软件包,用来打包软件环境和基于运行环境开发的软件(整体打包)(层层叠加的整体) uninonFS镜像分层union File system联合文件系统,支持对文件系统的修改作为一次次的提交来一层层叠加。Docker 镜像由一些松耦合的只读镜像层组成,Docker负责堆叠这些镜像层,并且将它们表示为单个统一的对象。 一个tomcat镜像有600M,它包括
生成镜像- docker build -f filename -t name:version . - docker commit -a=’xxx’(作者) -m=’xxxx’(命名空间) 容器id 名字:版本号 docker push步骤(可参考阿里云文档)- 1.创建镜像仓库 - 2.docker login --username= registry.cn-hangzhou.aliyuns.co
前言docker保证运维迁徙后的运行,提交代码带上完整开发环境,把正确的环境由下而上的打包成镜像在集群上发布,一次构建处处运行,docker是基于Go预言实现的开源项目,是解决了运行环境和配置问题软件容器,三要素:仓库、镜像、容器。 定义是什么? 是解决了运行环境和配置问题软件容器,方便持续集成并有助于整体发布的容器虚拟化技术 能干什么? 1.虚拟机技术 模拟整套操作系统带环境、硬件,打印机,但
要求 docker运行在centos7上要求系统64位、系统内核3.10以上centos6.5-64位 2.632-4.31以上,查看->(uname -r)/(cat /etc/redhat-realse) docker-ce要求centos7以上 安装链接 配置阿里云加速 正常从国外的镜像网(hub.docker.com)下载太慢,所以需要加速,网易云同下操作。123456789101
保留字指令- FROM 基础镜像 - MAINTAINER 镜像维护者的名字和邮箱 - RUN 容器构建时需要运行的命令 - EXPOSE 当前容器对外暴露的端口号 - WORKDIR 终端默认进入该容器的工作目录 - ENV 为容器设置环境变量(网络代理) - ENV MY_PATH /usr/mytest - WORKDIR MY_PATH - ADD 拷贝加解压缩,将宿主机目录下的文件拷贝进
帮助命令 docker version docker info docker help 镜像命令 列出镜像 docker images docker images -a(显示所有镜像含中层镜像) docker images -q/-qa docker images –digests 显示摘要信息 docker images –no-trunc 显示完整镜像信息 查找 docker sea
简单docker-compose项目docker-compose up启动服务要求当前路径下有docker-compose.yml 123456789101112131415# need to def a versionversion: "3.0"# the container of this composeservices: tomcat:
文件结构1234567891011121314151617181920dockerweb1/└── myproject ├── apps ├── db.sqlite3 ├── db_tools ├── Dockerfile ├── extra_apps ├── manage.py ├── media ├── mycelery ├──
简介 是什么? docker-compose负责实现对docker容器集群的快速编排,(让多个容器顺序执行)并不能实现精确的资源调度(k8s), 使用docker-compose.yml定义一组相关联的docker容器来作为一个项目服务。 docker单容器模式需要一一启动每个项目容器,然后再统一连接,而docker compse一次性融合所有容器。 核心概念 项目和服务(project、