大数据

#大数据#

已有270人关注此标签

内容分类

韩俊强

【福利】听说你们这一届的云栖大会干货最多, 你最期待哪一个?

一年一度的云栖大会再次拉开了帷幕,作为中国最早的开发者创新展示平台、全球开发者领域的重大科技盛会,今年云栖大会为全球开发者准备一场菜品齐全、口味齐全的全家桶套餐。 大会以全球开发者为主角,将呈现数百场技术分享,聚焦技术话题一千有余。关注产品技术的你,请进门左转,云原生、云存储、网络、数据库、基础设施、IoT、安全、大数据计算、弹性计算、基础软件等菜品应有尽有。 相信大家和我一样,每年都如约参加这场盛宴,时刻拥抱变化,拥抱技术的变革,本次大会聚焦技术话题一千有余,一定有你想要的干货,那么你最期待哪个一个技术Topic呢? 精彩评论将送出(云栖大会单日门票), 赶快来参与讨论吧~ 问题:1.云栖大会你最期待的技术领域是什么? 你期待能帮你解开哪些困惑?2.技术革新日新月异,你最期待你关注的领域做出哪些改变?

云攻略小攻

“基因行业解决方案”全民大讨论,“高富帅”走下神坛更撩人

8月28日14:00《阿里云基因行业解决方案技术解读发布会》带给你不一样的知识体验!基因测序技术日新月异,围绕着基因组学的基础科学研究和临床医学应用,也正在取得突破性的进展。阿里云为海量基因组学数据的管理、计算和大数据分析提供高效安全的完整解决方案,帮助生物科技公司,科研人员和医疗健康机构等构建广泛可靠、敏捷智能的基础平台和业务系统。 阿里云基因行业产品与解决方案介绍作为基因行业云计算市场的引领者,首次完整介绍阿里云相关的产品和解决方案。从测序服务商到临床检验所,从basecalling到数据湖分析,涵盖不同客户类型,不同业务场景。 敏捷基因计算-阿里云超算E-HPC通过弹性伸缩&并行优化加速Lifescience上云敏捷的超算,告别线下固定拥挤集群,无需修改任何生信流程,借助弹性伸缩和并行优化加速技术,轻松应对您的基因数据分析难题。 容器化基因分析工作流和容器混合云的最佳实践一家大型基因测序功能公司每日会产生 10TB 到100TB 的下机数据,大数据生信分析平台需要达到 PB 级别的数据处理能力。这背后是生物科技和计算机科技的双向支撑:测序应用从科研逐步走向临床应用,计算模式从离线向在线演进,交付效率越来越重要。 WDL标准流程描述语言应用阿里云最佳实践如果您有100种方式来编写您自己的生物信息分析流程,那么加上WDL(Workflow Description Language)后有多少种?我们希望是1种。作为GA4GH官方支持的流程描述语言之一,您可以用它来规范自己的生物信息流程开发、测试和生产工作,保证应用的可迁移性和可重复性。阿里云作为Broad官方的合作者,我们来告诉您这一切如何去做。 数据湖分析在基因和临床表等多种数据源的分析应用基因是天生的大数据科学,除了基础的存储和服务器资源,您需要全新的数据管理方式和计算分析平台来处理成千上万个样本的数据分析需求。数据湖分析是开启不同类型的基因数据,不同来源复杂多变的临床表型数据分析的新典范。 使用阿里数据智能工具箱帮助机器学习“图形化”人工智能是未来精准医学的Game Changer。阿里云数据智能工具箱可以让生物学家,临床医生不受IT技术和基础设施的限制,凭借自己的领域知识和对数据的理解,点点鼠标完成科学前沿的探索。《阿里云基因行业解决方案技术解读发布会》,8月28日14:00即将C位出道! 那么问题来了1.基因行业作为基于大数据的行业,数据安全是重中之重,可能存在哪些风险,以及如何管控?2.当基因数据分析遇上云容器,如何高效大规模的使用容器进行基因数据分析?3.基因计算面临哪些挑战,容器混合云是如何应对基因测序的IT挑战的?4.阿里云数据智能工具箱是如何打破生物科学研究与IT技术壁垒的?

山石_rock

Dataphin与阿里集团自用的数据中台有哪些不同?

Dataphin相较阿里集团自用的数据中台,做了哪些更适应客户的调整?我即将入职菜鸟旗下的一家公司做数据产品,今天了解到他们还没有接入集团的数据中台,所以在想未来是走集团内部对接还是直接买Dataphin。

fanzm

QUICK BI 计算字段后的字段如何做关联到其他数据源

QUICK BI 计算字段后的字段如何做关联到其他数据源

游客7522tkzcn6pw4

酒店选址大数据

酒店选址请指教应该用那个产品解决方案

unliklll

PyODPS脚本任务不定时出现 IncompleteRead问题

from odps import ODPSfrom odps import options options.tunnel.use_instance_tunnel = Trueoptions.tunnel.limit_instance_tunnel = False sql_query="select * from dwd.table_name where day='20190101'"instance = o.run_sql(sql_query)instance.wait_for_success() with instance.open_reader() as reader: print(u'共加载到%d条数据' % reader.count) for item in reader: print (item) 使用上述方法读取odps上的数据时,会不定时的出现: ...... http.client.IncompleteRead: IncompleteRead(284 bytes read, 2785 more expected) During handling of the above exception, another exception occurred: ...... raise ProtocolError('Connection broken:%r' %e, e) urllib3,exceptions.ProtocolError:('Connection broken:IncompleteRead(7455 bytes read)',IncompleteRead(7455 bytes read) ) 安装pyodps时,需要urllib3依赖,从错误日志中可以看出,上述现象和odps.tunnel.io.reader_c.TunnelRecordReader.__next__odps.tunnel.io.reader_c.BaseTunnelRecordReader.read 有关系。 请问,这是什么原因导致的,怎样解决?

迷茫君

游客uzzphpof6vkha

hbase新加列族时,需要disable表吗

hbase新加列族时,需要disable表吗。我本地试了下,不disable也能新家列族。如果不disable,会导致什么问题。

z7one

CDH 可以部署spark-sql吗?

CDH 可以部署spark-sql吗?

游客cpqnvmxj5f65u

2019年马云会参加杭州的云栖大会吗?

想知道2019年云栖大会具体安排以及马云是否会来现场及具体在哪个会场

游客evqqr7nnmkzcs

大数据如何应用在航空领域?

大数据如何应用在航空领域?

诺诺罗亚

新的技术,比如大数据、AI如何应用在航空行业?

新的技术,比如大数据、AI如何应用在航空行业?

拼夕夕小马

机器学习PAI中数据视图组件怎么查看100条以后的数据

在机器学习pai的项目中会用到一些组件可以查看数据,但只能查看前100条,比如数据视图组件,请问如何查看到100条以后的所有数据

豇心

如何在阿里云打开有个黑色的界面里面有大数据,算法维度……找不到那个页面了。

想用大数据查很多问题,比如目前的主要经济分类,人们健康饮食和和上网每天时间用在什么内容里?

Snorlax

Logstash采集文件名称以及自定义格式的日志文件采集

filebeat或者Logstash支持采集自定义格式的文件吗?比如日志文件后缀是xml和一些自定义后缀的文本文件,或者单纯的采集文件名称吗?

安静点i

spring data es 怎么连接阿里云提供的ES服务

如果是自己在服务器上的搭建的ES 可以直接连接, 但是如果用阿里云的提供的ES服务 怎么用spring data es 来操作ES呢

pengchao

MaxCompute tunnel upload报错

odps@ demo987654321>tunnel upload C:/work/BI/odpscmd_public_May/ipdata.txt.utf8 ipresource;ERROR: TunnelException - ErrorCode=Local Error, ErrorMessage=400FAILED: error occurred while running tunnel commandodps@ demo987654321>tunnel upload C:/work/BI/odpscmd_public_May/ipdata.txt.utf8 ipresource;ERROR: TunnelException - ErrorCode=Local Error, ErrorMessage=400FAILED: error occurred while running tunnel commandodps@ demo987654321>a 使用studio import data同样报错

数据智能小二

年中钜惠,数据智能双叒叕送折扣啦~

不知不觉,时间来到了6月。阿里云数据智能也借此搞了一波年中钜惠,将继续助力企业数字转型,用AI和大数据实现业务增长。 Section 1:新品上线 DataV专业版以包年6折,包月7折超低折扣回馈用户,企业版推出了包年/包月7折最优回馈。基础版也降至包年8折购,换算下来就是48元/年就可以体验到神乎其技的数据可视化哦~ 云呼叫中心作为最新加入数据智能团队的萌新,可让用户自助开通呼叫中心,轻松设置IVR流程,管理并追踪客服绩效。此次钜惠季中,云呼所有400语音呼入包统统8折,仅限一单哦~ Section 2:66特惠 特惠专区,我们精选了几款热销折扣产品,款款以最低价折扣冲击你的视野!折扣仅限本月有效,活动期结束后将自动恢复原价! Section 3:爆款推荐 本专区我们精选了一些AI好物。如语音自学习平台,能够帮助提高语音的识别效果,数分钟内即可完成专属定制模型的优化,原价800元/个,现价可8折优惠购;人脸识别、图像识别均可支持实时识别,目前活动期间,可享受前5000次免费体验。 Section 4:云市场折扣专区 针对云市场我们也推出了相应活动,刷脸年付7折,印刷文字识别低至3折起! 活动地址:https://promotion.aliyun.com/ntms/act/ai/dacu.html?wh_ttid=pc 钉钉入群: 话题讨论 你认为智能产品有哪些应用场景?哪款产品会对你的工作产生帮助?

阿里云活动小秘书

获奖公布!《618上云接力赛——书写你的云上故事,赢取6.18万大奖》获奖名单发布!

云计算时代,越来越多的企业和个人步入云端。与传统的方式相比,云计算可以让你从繁重的基础设施购置与维护中解放出来,从而专注于产品的开发和运营。 越来越多的企业和开发者选择阿里云平台,为了更好地展示这些优秀的企业和案例,同时为其他企业提供上云建议,这次阿里云特此举办了“618上云接力赛之书写你的云上故事”活动。 云计算时代,越来越多的企业和个人步入云端。与传统的方式相比,云计算可以让你从繁重的基础设施购置与维护中解放出来,从而专注于产品的开发和运营。 越来越多的企业和开发者选择阿里云平台,为了更好地展示这些优秀的企业和案例,同时为其他企业提供上云建议,这次阿里云特此举办了“618上云接力赛之书写你的云上故事”活动。 以下为本次活动获奖名单: 故事创建#获奖用户 ①排名第一的故事,作者可获得6.18万元无门槛云产品通用代金券; ②排名第二至第五的故事,作者每人可获得6180元的无门槛云产品通用代金券; ③排名第六至第三十的故事,作者每人可获得618元的无门槛云产品通用代金券; *④排名第三十一至第一百的故事,作者每人可获得200元的无门槛云产品通用代金券。 备注:当赞数一致时,故事发布时间越早,排名越靠前。 故事点赞#获奖用户 以下用户每人可获得100元的无门槛云产品通用代金券。 故事分享#获奖用户 以下用户每人可获得100元的无门槛云产品通用代金券。 恭喜以上获奖者!