网站编号：5129

网站URL：https://www.aliyun.com/product/emapreduce

最后点入：2023-12-17 14:05:58 · 加入时间：2023-12-13 16:02:24

网站关键词(26个字符):
hive、 spark、 hadoop、 数据湖、 hdfs、

网站描述词(88个字符):
阿里云E-MapReduce是云原生开源大数据平台，全面支持Hadoop、Spark、HBase、Hive、StarRocks等大数据组件，为客户提供企业级开源大数据平台服务。

关于www.aliyun.com说明：
www.aliyun.com由网友主动性提交被优亿链收录网-www.uel.cc整理收录的，优亿链收录网-www.uel.cc仅提供www.aliyun.com的基础信息并免费向大众网友展示，www.aliyun.com的是IP地址：116.211.220.242 [中国湖北武汉 电信]，www.aliyun.com的百度权重为6、百度手机权重为5、百度收录为0条、360收录为0条、搜狗收录为0条、谷歌收录为0条、百度来访流量大约在13751之间、百度手机端来访流量大约在8462之间、www.aliyun.com的备案号是浙B2-20080101、备案人叫阿里云计算有限公司、被百度收录的关键词有5127个、手机端关键词有627个、迄今为止已经创建16年2月20天。

下载地址: txt下载、docx下载、pdf下载、rar下载、zip下载

本页地址: https://www.uel.cc/links/9885bacc1a977ce9a17d.html

SEO信息	百度来访IP：13751 | 移动端来访IP：8462 | 出站链接：0 | 站内链接：0
IP网速：	IP地址：116.211.220.242 [中国湖北武汉 电信] | 网速：581毫秒
ALEXA排名	世界排名： | 预估IP： | 预估PV：
备案信息	浙B2-20080101 | 名称：阿里云计算有限公司 | 已创建：16年2月20天

收录	百度	360	搜狗	谷歌
查询	0	0	0	0

电脑关键词	手机关键词	页面友好	首页位置	索引	近期收录
5127	627	电脑端优秀		0	0

协议类型HTTP/1.1 200 OK 页面类型text/html; charset=utf-8 服务器类型Tengine 是否压缩是 原网页大小104243 压缩后大小17586 压缩比83.13%

EMapReduce_EMR_大数据框架_大数据阿里云EMapReduce_EMR_大数据框架_大数据阿里云产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台登录/注册开源大数据平台EMapReduce播放视频开源大数据平台EMapReduce（简称“EMR”）是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、StarRocks、Flink、Presto、ClickHouse等开源大数据计算和存储引擎。 EMR计算资源支持灵活的弹性控制。 EMR支持onECS、onACK以及Serverless多种部署形态。 EMRServerlessStarRocks入门版首月59元立即购买管理控制台ServerlessStarRocks快速入门选型配置产品计费产品文档EMR用户社区产品系列产品优势产品功能应用场景客户案例产品动态入门与实践文档与工具近期更新最新发布EMRWorkflow正式开启公测重磅发布全链路数据湖开发治理解决方案2.0重磅升级最新发布阿里云智能数据湖入选第六届数字中国建设峰会“十大硬核科技”最新发布阿里云EMR2.0：重新定义新一代开源大数据平台重磅功能EMR重磅发布智能运维诊断系统(EMRDoctor)——开源大数据平台运维利器重磅功能重磅发布！EMR+DataWorks全链路数据湖开发治理方案最新发布阿里云EMapReduce产品新动态及开源大数据前沿技术20234月刊产品案例喜马拉雅耳朵经济快速增长背后，喜马拉雅数据价值如何释放猿辅导猿辅导基于EMRStarRocks的OLAP演进之路水滴筹水滴筹基于阿里云EMRStarRocks实战分享趣头条降本增效利器！趣头条SparkRemoteShuffleService最佳实践数禾科技数禾云上数据湖最佳实践任意门DeltaLake在Soul的应用实践流利说阿里云EMRDeltaLake在流利说数据接入中的架构和实践产品系列可根据不同业务需求场景进行产品类型选择EMRonECSEMRonECS是指EMR在ECS上运行的方式。 EMRonECS将EMR的大数据处理功能与ECS的容器化部署优势相结合，使得您可以更加灵活地配置和管理EMR集群，从而更好地适应复杂的数据处理和分析场景。 通过EMRonECS，您可以快速创建、管理和运维EMR集群，同时也能够更加高效地使用计算和存储资源。 了解更多EMRonACKEMRonACK提供了全新构建大数据平台的方式。 您可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维投入，以便于您可以更加专注大数据任务本身。 了解更多EMRServerlessStarRocksEMapReduceServerlessStarRocks版是阿里云提供的ServerlessStarRocks全托管服务，提供高性能、全场景、极速统一的数据分析体验，具备开箱即用、弹性扩展、监控管理、慢SQL诊断分析等全生命周期能力。 内核100%兼容StarRocks，性能比传统OLAP引擎提升35倍，助力企业高效构建大数据应用。 了解更多产品优势新一代开源大数据平台稳定可靠易用支持节点故障容忍和补偿；100节点扩容时间存算分离架构按需归档，节省20%40%存储成本；OSSHDFS存储，免运维，免维护;DLF湖管理实现湖数据生命周期管理大幅节约成本基于时间的弹性伸缩能力，抢占式实例可进一步降低成本；支持神龙/AMD等高性价比机型；Onack形态，支持混用资源领先开源生态深度优化Spark，性能提升100%；提供Hadoop、Spark、Hive、Kafka、HBase、Presto、Impala、Hudi、StarRocks等开源组件产品功能集群管理方便快捷的集群管理，快速实现集群创建与扩容集群创建通过控制台页面或OpenAPI即可快速的进行多种类型的集群创建，如Hadoop、Dataflow、Datascience、Druid、ZooKeeper等开源大数据框架，无需关心底层的硬件与软件部署集群扩容通过控制台页面或OpenAPI即可方便地增加或减少已有集群的节点数目服务配置可以快速添加EMR提供的服务，可以监控服务的状态，并对服务组件进行配置和运维操作弹性伸缩通过控制台界面可以方便的增加需要的组件，并进行组件的配置与运维操作动态扩容可以设置多种弹性伸缩策略，自动地对集群计算资源进行动态的伸缩，降低TCO运维中心完善的运维管理工具，方便快速发现和定位集群问题集群监控提供丰富的服务监控指标和主机监控指标展示，通过可视化的方式快速定位服务和主机异常事件中心EMR服务提供丰富的事件类型，包含服务事件、管控服务事件、主机事件，可以更加快速、具体地获取到集群问题，并可以对问题发生链路进行溯源作业列表对集群作业运行情况进行统计，快速对比异常作业，方便作业和集群性能调优诊断分析提供HDFS冷热数据分析和小文件分析功能，对服务性能优化提供依据丰富的组件丰富的组件支持，可以根据需要进行组件的选择DataLake一个更灵活、可靠、高效的大数据计算集群Spark基于内存的新一代分布式开源大数据框架，支持离线，实时计算，也支持SQL语法以及机器学习的处理Hive基于Hadoop的一套离线数据处理系统，在HDFS之上提供了结构化的表数据的管理能力，提供类SQL的查询语法进行数据分析处理KafkaKafka是一种高吞吐量的分布式发布订阅消息系统，具有出色的性能和可靠性Flink针对流数据和批数据的分布式处理引擎，EMR提供基于ApacheFlink的商业化产品VervericaPlatform构建的企业级大数据计算平台提供实时计算服务Presto开源的分布式SQL查询引擎，适用于交互式查询分析ClickHouse开源OLAP分析引擎，主要特性：列式存储、MPP架构、支持SQL、实时的数据更新、支持索引等Hudi一种数据湖的存储格式，提供更新数据和删除数据的能力以及消费变化数据的能力StarRocks开源MPP架构的OLAP分析引擎，支持亚秒级的数据查询和多表Join完善的云上生态支持对阿里云上的产品环境进行了深度的整合支持支持DataWorks为客户提供专业高效、安全可靠的一站式大数据开发与治理平台支持MaxCompute支持阿里云的MaxCompute产品的数据的读写支持ElasticSearch在Hadoop中内置了ESHadoop插件，可以直接支持ES的相关操作支持数据湖构建DLFEMR默认支持使用DLF进行元数据管理，方便数据湖场景下元数据管理。 支持对象存储OSSEMR中所有计算引擎均支持采用OSS作为存储，可以将OSS像HDFS一样使用。 并采用JindoFS对OSS数据读写进行加速。 支持云监控可以在云监控中设置对于EMR服务和操作的监控，方便问题快速告警支持SLS支持将SLS作为实时数据输入源使用，提供了SDK直接操作支持阿里云的消息产品支持如消息队列，消息服务等的读写，提供SDK包装，方便用户使用应用场景大数据搬站云原生数据湖智能推荐交互式分析延续开源技术栈，链接阿里云生态和开源大数据生态大数据搬站会遇到如下挑战：大数据技术栈繁杂，数据规模和任务数量大；开源社区版本迭代演进速度快，且开源组件之间的兼容性和社区bug会影响作业和业务的连续性。 大数据搬站迁移通过EMR可以延续开源技术栈，链接阿里云生态和开源大数据生态能够提供采用社区开源软件场景覆盖程度高，能延续现有技术栈和组织架构，迁移风险和成本低成熟稳定组件采用社区最新的稳定版本，通过组件稳定性和兼容性验证测试，更加稳定可靠与阿里云生态集成可以灵活根据业务需求和技术路线，实现和阿里云生态集成，如数据开发DataWorks+EMR、机器学习PAI+EMR、湖仓一体MaxCompute+DataLakeFormation+EMR多种迁移方案根据数据规模和预算的不同，可以通过闪电立方、专线和公网方式按计划高效率的迁移上云推荐搭配使用云服务器ECS对象存储OSS降低成本，解决资源闲置，适用多种数据分析场景随着企业积累数据规模迅速膨胀，数据分析使用会遇到：数据规模膨胀的成本挑战；计算和存储耦合带来的某项资源闲置问题；由于多种数据分析场景，如离线计算、流式计算、交互式分析、机器学习等，导致多引擎间频繁的引动数据，造成数据不一致和成本问题。 通过EMR及配套云原生数据解决方案，可以有效解决以上问题能够提供计算存储分离数据存储在OSS对象存储，通过EMRJindoFS或Alluxio实现数据湖的加速，实现计算和存储解耦的同时，提升和保障计算效率，避免了资源闲置问题数据分层存储JindoTable结合OSS的分层存储能力，将大数据业务和底层基础能力相结合，根据数据冷、热、温分层，与不同OSS存储类型匹配，最大限度实现成本节省对接多种计算引擎EMR数据湖解决方案，可以对接实时计算、PAI、MaxCompute、ElasticSearch等计算引擎，避免数据重复移动元数据多引擎统一管控通过EMR+DataLakeFormation，实现对元数据的统一管理，DLF可以对EMR不同计算引擎统一进行权限控制推荐搭配使用对象存储OSS数据湖构建DLF通过EMR构建机器学习和算法平台，加速模型训练采集用户行为数据，通过EMR构建机器学习和算法平台，通过Hive/Spark构建机器学习的特征库、模型库和算法库，通过EMRDataScience集群TensorFlow/Pytorch实现模型训练，通过PAIEAS实现将模型在线推理服务能够提供稳定可靠经过业内经大规模生产验证的推荐系统解决方案，实现CTR点击率大幅提升灵活可控适用于离线推荐和实时推荐场景，用户可以根据需求和技术栈方向灵活选择开源技术组件集成性好可以根据PAIEAS/PAIStudio等快速集成，灵活选择合适ECSGPU实例类型推荐搭配使用机器学习平台PAI完全兼容开源版本特性，与EMR其他组件快速集成采集用户在APP上的各种行为数据，通过EMR平台进行数据的加工和分析，写入ClickHouse，支持上层业务灵活、快速的分析，提升业务决策的效率能够支持秒级查询ClickHouse支持秒级的数据查询，支持应用层的快速调用和人工分析灵活查询完整的SQL语句支持，支持灵活的业务逻辑分析易运维半托管集群，提供集群管理、监控、扩容等运维能力，让技术人员更多的投入业务开发推荐搭配使用云服务器ECS客户案例为什么选择EMapReduce?数禾科技数禾科技以大数据技术为驱动，为金融机构提供智能金融解决方案。 随着公司业务的扩张，业务方提出的大量数据需求考验着现有集群的能力。 为了减轻现有集群的压力，数禾使用阿里云EMR落地了适合数禾当前业务的数据湖，可以任意规模存储结构化和非结构化数据，运用不同类型的引擎进行分析，为业务发展提供了更好的决策依据。 查看详情凯叔讲故事凯叔讲故事是中国知名的儿童内容教育品牌。 刚开始凯叔讲故事使用第三方SAAS平台作为运营支撑，周期长、展示死板，个性化开发受到很大局限，很难支撑团队的精细化运营需求。 采用阿里云的EMapReduce大数据平台支撑业务团队后，帮助业务团队做到对用户的精准触达、实时反馈和主动服务，系统上线后业务增量明显。 查看详情Yeahmobi点告Yeahmobi是一家以技术驱动的全球智能营销服务公司，公司主要提供的服务包括了效果营销、品牌服务，以及各个垂类的综合性的营销解决方案。 Yeahmobi点告基于阿里云OSS+EMapReduce所有数据统一OSS存储，动态调整计算资源，并使用EMapReduce支撑离线式分析，满足业务场景要求，整体TOC下降30%。 查看详情流利说流利说是一家科技驱动的教育公司，在离线计算任务中，大部分数据源来自业务DB。 随着数据量增多，无法满足近实时的查询需求。 流利说选择阿里云EMapReduce,采用CDC+DeltaLake之后，成本节省了近80%。 凌晨DB数据接入的时间成本大大降低，确保所有非特殊要求的DB数据接入都能在1个小时内跑完，大大提升了效率。 查看详情开源大数据平台EMapReduce与自建Hadoop集群对比对比维度成本性能易用弹性安全可靠服务阿里云EMapReduce资源按量付费，支持集群资源灵活调整，数据分层存储，资源使用率高。 无额外软件License费用。 较开源版本性能大幅提升，如EMRSparkSQL性能是开源版本6倍。 分钟级别启动Hadoop集群，敏捷响应业务需求。 可根据作业临时启动和销毁集群。 集群资源可根据时间周期或集群负载动态自动调整。 基于JindoFS计算存储分离架构，轻松分别扩展计算和存储资源。 支持企业级多租户资源管理能力，支持对表、列、行级别的权限控制和日志审计，支持数据加密。 大规模、企业级环境的检验，随开源版本升级，并经过专业的兼容性验证测试，提供优于社区版本的使用体验。 专业和资深大数据专家技术服务团队提供售后支持。 自建Hadoop集群提前预估资源，且资源相对固定，资源使用率低。 采用Hadoop发行版，需额外支付License费用。 采用开源社区版本，性能需自行优化。 采购服务器，部署Hadoop生态组件，周期长达数周。 计算和存储耦合，资源相对固定，无法弹性调整资源。 多租户管理能力需自行配置，能力不完善，无法满足企业级需求。 需自行更新和升级开源版本，验证各组件版本兼容性，自行修复社区bug。 社区版本无服务支持，Hadoop发行版，需额外支付License和服务费用。 产品动态查看详情查看详情查看详情20170118新产品EMR支持推出独享套餐查看详情20170118新功能/规格EMR支持Spark2.0查看详情20170223新功能/规格支持统一的Hive表元数据管理查看详情20170426新地域/新可用区EMapReduce华北3地域上线查看详情20170503新功能/规格执行计划调度增强查看详情20170510新功能/规格作业增加重试支持查看详情20170615新功能/规格集群配置管理系统发布查看详情20170729价格调整EMapReduce国际站价格全面下调查看详情20170805新地域/新可用区EMapReduce德国站上线服务查看详情20170808新功能/规格EMR大数据机型整体方案发布查看详情20171123新功能/规格Gateway功能上线查看详情20180103新地域/新可用区EMapReduce产品香港，呼和浩特地域上线服务查看详情20180301新功能/规格细化的权限控制组件Ranger发布查看详情20180303新地域/新可用区EMapReduce印度孟买Region上线服务查看详情20180320功能优化EMapReduce支持机型升配查看详情20180418新功能/规格EMapReduce支持集群从按量装换为包月查看详情20180705新功能/规格Hadoop弹性伸缩能力发布查看详情20180906新功能/规格EMapReduce性能大幅度优化查看详情20180922新功能/规格EMRTensorFlow发布查看详情20181101功能优化EMR云盘数据盘一键扩容查看详情20181101新功能/规格EMR支持抢占式实例查看详情20181207新功能/规格EMRAPM功能发布查看详情20190121新功能/规格EMR升级Hadoop2.8.5查看详情20190315新功能/规格EMRKnox支持Flink并适配YARNtimelineservice查看详情20190608新地域/新可用区EMapReduce成都地域服务上线查看详情20190709新功能/规格EMR工作流新增支持流式作业类型查看详情20190728新功能/规格EMR最新版EMR3.22.0发布查看详情20190728新功能/规格EMR新加入Kudu组件查看详情20190801新功能/规格EMR新发布针对云上存储定制的自研大数据存储服务JindoFS查看详情20191118新功能/规格EMapReduce3.24.0版本发行查看详情20191118新功能/规格EMR支持TensorFlowonspark查看详情20191120新功能/规格EMapReduce3.23.0发行版本查看详情20191121新功能/规格EMR中国站/国际站上线第六代ECS企业级实例查看详情20200630新功能/规格EMapReduce支持ECSD2S新一代大数据实例查看详情20200731新功能/规格阿里云EMapReduce新增ECS大数据实例规格D2C查看详情20210105新功能/规格阿里云EMapReduce新增RemoteShuffleService查看详情20210228新地域/新可用区阿里云EMapReduce在华北6乌兰察布正式开服查看详情20210401新功能/规格阿里云EMapReduce发布Clickhouse集群类型查看详情20210501新功能/规格阿里云EMapReduce上线最新一代本地SSD实例查看详情20210731新功能/规格Emapreduce半托管Clickhouse集群发布查看详情20210930新功能/规格EMapReduceonACK全新发布查看详情20220126功能优化EMapReduce新版控制台重磅发布查看详情20220328新功能/规格StarRocks在新版控制台上线，致力于构建极速统一分析体验查看详情20220415新功能/规格JindoData发布，支持OSSHDFS服务查看详情20220422新功能/规格StarRocks升级至2.1.1版本将大幅提升查询性能查看详情20220616新功能/规格数据湖集群上线查看详情20220715新功能/规格DataWorks支持EMRDataLake集群查看详情20220722新功能/规格Doctor上线查看详情20220804新功能/规格数据服务（DataServing）发布 查看详情20220816新功能/规格新管控平台支持更多高阶特性查看详情20220902新功能/规格添加弹性伸缩规则查看详情20220907新功能/规格开启自动补偿查看详情20220909新功能/规格克隆集群查看详情20221017新功能/规格自定义集群上线查看详情20221117新功能/规格OSSHDFS支持冷热分层存储查看详情20221125新功能/规格DataWorks支持EMR自定义集群查看详情20221220新功能/规格EMRDoctor实时风险检测查看详情20221228新功能/规格EMRDoctor集群日报查看详情20230214新功能/规格访问链接与端口功能升级查看详情20230224新功能/规格支持数据盘加密查看详情20230302新功能/规格弹性伸缩规则新增配置参数查看详情20230308新功能/规格新增应用配置导出功能查看详情20230315新功能/规格事件中心新增系统事件查看详情20230323新功能/规格支持默认创建存算分离集群查看详情20230410新功能/规格ServerlessStarRocks免费公测版发布查看详情20230423新功能/规格支持控制台可视化管理YARN分区查看详情20230515新功能/规格查看集群日报与分析查看详情20230523新功能/规格ServerlessStarRocks商业化发布查看详情20230526新功能/规格支持倚天云服务器（邀测中）查看详情20230621新功能/规格通过SQLEditor操作StarRocks实例查看详情20230704新功能/规格EMRWorkflow公测查看详情20230714新功能/规格支持无状态集群查看详情20230714新功能/规格EMRonACK形态支持DataScience类型集群查看详情20230809新功能/规格新增弹性伸缩管理模块查看详情20230817新功能/规格支持YARN分区和队列关联查看详情20230829新功能/规格新增集群模版功能查看详情20230912新功能/规格StarRocks支持存算分离查看详情查看全部日志入门与实践EMR开源大数据迁移专区HDFS，Hive，Kafka迁移到EMR最佳实践查看详情EMR弹性计算实践EMR弹性低成本离线大数据分析最佳实践查看详情增量数据实时统计实践通过ServerlessStarRocks实现增量数据实时统计查看详情分钟级准实时分析实践通过ServerlessStarRocks分钟级准实时分析查看详情文档与工具产品文档如何上手、使用和开发快速入门快速创建集群并执行作业集群类型不同场景下集群选型规划常见问题常见报错&问题汇总为什么选择阿里云什么是云计算全球基础设施技术领先稳定可靠安全合规分析师报告产品和定价全部产品免费试用产品动态产品定价价格计算器云上成本管理解决方案技术解决方案文档与社区文档开发者社区天池大赛培训与认证权益中心免费试用高校计划企业扶持计划推荐返现计划支持与服务基础服务企业增值服务迁云服务官网公告系统状态信任中心关注阿里云关注阿里云公众号或下载阿里云APP，关注云资讯，随时随地运维管控云服务售前咨询：951871售后服务：4008013260法律声明及隐私权政策Cookies政策廉正举报安全举报联系我们加入我们阿里巴巴集团淘宝网天猫全球速卖通阿里巴巴国际交易市场1688阿里妈妈飞猪阿里云计算AliOS万网高德UC友盟优酷钉钉支付宝达摩院淘宝海外阿里云盘饿了么©20092023Aliyun.com版权所有增值电信业务经营许可证：浙B220080101域名注册服务机构许可：浙D320210002京D320220015浙公网安备33010602009975号浙B2200801014关注我们：新浪微博联系我们©20092023Aliyun.com版权所有增值电信业务经营许可证：浙B220080101域名注册服务机构许可：浙D320210002京D320220015

做上本站友情链接,在您站上点击一次,即可自动秒收录并自动排在本站第一位！
<a href="https://www.uel.cc/" target="_blank">优亿链收录网-www.uel.cc</a>