大数据

#大数据#

已有286人关注此标签

内容分类

1431217598807608

想做自己的电商平台 恳请各位大师指点指点

大神们总说大数据就是一把双刃剑,杀敌一千自勋八百, 从策划 到实施落地 我都需要准备哪些 注意哪些,恳请阿里各位大师指点一二。

江湖一游侠

阿里云大学学习疑惑?

零基础,文科生,对信息化很感兴趣。想通过阿里云大学学点知识。大数据,物联网,云计算,那个更加适合新手呢?

株莉

云上合规太严苛?一键拥有您的专属合规保护伞

2019年5月13日下午,国家标准新闻发布会召开,网络安全等级保护制度2.0标准正式发布,实施时间为2019年12月1日。 等保2.0从基本、评测和设计三个方面做出规定;对云计算平台做了扩展规定。 规定了哪些行为、事件需要审计:-网络边界、重要网络节点进行审计。-覆盖每个用户、支持重要用户行为、重要安全事件进行审计。-对远程访问的用户行为、访问互联网用户行为等单独行为进行审计。-对网络系统操作、重要存储操作、计算系统操作、安全系统操作需记录详细信息与审计。-审计管理员的操作本身也需要记录并审计。 对审计系统提出要求:-集中收集、集中分析,集中存储时长要求(180天以上)。-对审计数据的保护(防修改、防中断等)。-需提供分析、监控报警等支持可疑行为发现。-需要提供数据汇集接口,供第三方审计。 阿里云日志服务审计服务,提供多账户下跨多云产品审计相关日志进行实时自动化中心化采集,并提供审计需要的存储、查询、信息汇总支持。覆盖Actiontrail、OSS、SLB、RDS、API网关等基础产品并支持自由对接到其他生态产品或自有SOC中心,更好的支持上云的客户对于等保规范的支持。-实时采集多个云产品审计相关日志:从Actiontrail、OSS、NAS、SLB到RDS(MySQL)、API网关等。-跨多个主账号采集、自动覆盖全区域,并支持中心化存储。-丰富的阿里云大数据产品(OSS、MC、EMR、ADB等)、开源生态(Flink、Spark等)集成能力,降低数据分析门槛。 立即查看:产品发布页产品发布直播关于日志服务 互动话题:1.分享等保2.0标准的实施对您所在公司或行业的挑战、影响与帮助是什么?2.您最关心的日志审计服务的功能与支持是什么?

韩俊强

【福利】听说你们这一届的云栖大会干货最多, 你最期待哪一个?

一年一度的云栖大会再次拉开了帷幕,作为中国最早的开发者创新展示平台、全球开发者领域的重大科技盛会,今年云栖大会为全球开发者准备一场菜品齐全、口味齐全的全家桶套餐。 大会以全球开发者为主角,将呈现数百场技术分享,聚焦技术话题一千有余。关注产品技术的你,请进门左转,云原生、云存储、网络、数据库、基础设施、IoT、安全、大数据计算、弹性计算、基础软件等菜品应有尽有。 相信大家和我一样,每年都如约参加这场盛宴,时刻拥抱变化,拥抱技术的变革,本次大会聚焦技术话题一千有余,一定有你想要的干货,那么你最期待哪个一个技术Topic呢? 精彩评论将送出(云栖大会单日门票), 赶快来参与讨论吧~ 问题:1.云栖大会你最期待的技术领域是什么? 你期待能帮你解开哪些困惑?2.技术革新日新月异,你最期待你关注的领域做出哪些改变?

云攻略小攻

“基因行业解决方案”全民大讨论,“高富帅”走下神坛更撩人

8月28日14:00《阿里云基因行业解决方案技术解读发布会》带给你不一样的知识体验!基因测序技术日新月异,围绕着基因组学的基础科学研究和临床医学应用,也正在取得突破性的进展。阿里云为海量基因组学数据的管理、计算和大数据分析提供高效安全的完整解决方案,帮助生物科技公司,科研人员和医疗健康机构等构建广泛可靠、敏捷智能的基础平台和业务系统。 阿里云基因行业产品与解决方案介绍作为基因行业云计算市场的引领者,首次完整介绍阿里云相关的产品和解决方案。从测序服务商到临床检验所,从basecalling到数据湖分析,涵盖不同客户类型,不同业务场景。 敏捷基因计算-阿里云超算E-HPC通过弹性伸缩&并行优化加速Lifescience上云敏捷的超算,告别线下固定拥挤集群,无需修改任何生信流程,借助弹性伸缩和并行优化加速技术,轻松应对您的基因数据分析难题。 容器化基因分析工作流和容器混合云的最佳实践一家大型基因测序功能公司每日会产生 10TB 到100TB 的下机数据,大数据生信分析平台需要达到 PB 级别的数据处理能力。这背后是生物科技和计算机科技的双向支撑:测序应用从科研逐步走向临床应用,计算模式从离线向在线演进,交付效率越来越重要。 WDL标准流程描述语言应用阿里云最佳实践如果您有100种方式来编写您自己的生物信息分析流程,那么加上WDL(Workflow Description Language)后有多少种?我们希望是1种。作为GA4GH官方支持的流程描述语言之一,您可以用它来规范自己的生物信息流程开发、测试和生产工作,保证应用的可迁移性和可重复性。阿里云作为Broad官方的合作者,我们来告诉您这一切如何去做。 数据湖分析在基因和临床表等多种数据源的分析应用基因是天生的大数据科学,除了基础的存储和服务器资源,您需要全新的数据管理方式和计算分析平台来处理成千上万个样本的数据分析需求。数据湖分析是开启不同类型的基因数据,不同来源复杂多变的临床表型数据分析的新典范。 使用阿里数据智能工具箱帮助机器学习“图形化”人工智能是未来精准医学的Game Changer。阿里云数据智能工具箱可以让生物学家,临床医生不受IT技术和基础设施的限制,凭借自己的领域知识和对数据的理解,点点鼠标完成科学前沿的探索。《阿里云基因行业解决方案技术解读发布会》,8月28日14:00即将C位出道! 那么问题来了1.基因行业作为基于大数据的行业,数据安全是重中之重,可能存在哪些风险,以及如何管控?2.当基因数据分析遇上云容器,如何高效大规模的使用容器进行基因数据分析?3.基因计算面临哪些挑战,容器混合云是如何应对基因测序的IT挑战的?4.阿里云数据智能工具箱是如何打破生物科学研究与IT技术壁垒的?

山石_rock

Dataphin与阿里集团自用的数据中台有哪些不同?

Dataphin相较阿里集团自用的数据中台,做了哪些更适应客户的调整?我即将入职菜鸟旗下的一家公司做数据产品,今天了解到他们还没有接入集团的数据中台,所以在想未来是走集团内部对接还是直接买Dataphin。

fanzm

QUICK BI 计算字段后的字段如何做关联到其他数据源

QUICK BI 计算字段后的字段如何做关联到其他数据源

游客7522tkzcn6pw4

酒店选址大数据

酒店选址请指教应该用那个产品解决方案

unliklll

PyODPS脚本任务不定时出现 IncompleteRead问题

from odps import ODPSfrom odps import options options.tunnel.use_instance_tunnel = Trueoptions.tunnel.limit_instance_tunnel = False sql_query="select * from dwd.table_name where day='20190101'"instance = o.run_sql(sql_query)instance.wait_for_success() with instance.open_reader() as reader: print(u'共加载到%d条数据' % reader.count) for item in reader: print (item) 使用上述方法读取odps上的数据时,会不定时的出现: ...... http.client.IncompleteRead: IncompleteRead(284 bytes read, 2785 more expected) During handling of the above exception, another exception occurred: ...... raise ProtocolError('Connection broken:%r' %e, e) urllib3,exceptions.ProtocolError:('Connection broken:IncompleteRead(7455 bytes read)',IncompleteRead(7455 bytes read) ) 安装pyodps时,需要urllib3依赖,从错误日志中可以看出,上述现象和odps.tunnel.io.reader_c.TunnelRecordReader.__next__odps.tunnel.io.reader_c.BaseTunnelRecordReader.read 有关系。 请问,这是什么原因导致的,怎样解决?

迷茫君

游客uzzphpof6vkha

hbase新加列族时,需要disable表吗

hbase新加列族时,需要disable表吗。我本地试了下,不disable也能新家列族。如果不disable,会导致什么问题。

z7one

CDH 可以部署spark-sql吗?

CDH 可以部署spark-sql吗?

游客cpqnvmxj5f65u

2019年马云会参加杭州的云栖大会吗?

想知道2019年云栖大会具体安排以及马云是否会来现场及具体在哪个会场

游客evqqr7nnmkzcs

大数据如何应用在航空领域?

大数据如何应用在航空领域?

诺诺罗亚

新的技术,比如大数据、AI如何应用在航空行业?

新的技术,比如大数据、AI如何应用在航空行业?

拼夕夕小马

机器学习PAI中数据视图组件怎么查看100条以后的数据

在机器学习pai的项目中会用到一些组件可以查看数据,但只能查看前100条,比如数据视图组件,请问如何查看到100条以后的所有数据

豇心

如何在阿里云打开有个黑色的界面里面有大数据,算法维度……找不到那个页面了。

想用大数据查很多问题,比如目前的主要经济分类,人们健康饮食和和上网每天时间用在什么内容里?

Snorlax

Logstash采集文件名称以及自定义格式的日志文件采集

filebeat或者Logstash支持采集自定义格式的文件吗?比如日志文件后缀是xml和一些自定义后缀的文本文件,或者单纯的采集文件名称吗?

安静点i

spring data es 怎么连接阿里云提供的ES服务

如果是自己在服务器上的搭建的ES 可以直接连接, 但是如果用阿里云的提供的ES服务 怎么用spring data es 来操作ES呢