利用交互式分析(Hologres)进行数据查询
场景描述：随着收集数据的方式不断丰富，企业信息化 程度越来越高，企业掌握的数据量呈TB、 PB或EB级别增长。同时，数据中台的快 速推进，使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力，为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
II 文档版本：20150122（发布日期）文档版本：20240417（发布日期）利用交互式分析工具进行数据查询 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 利用交互式分析工具进行数据查询最佳实践 文档编号 176 文档版本 V1.9 版本日期 2022-04-25 文档状态 外部发布 制作人 六稻，阿瑟 审阅人 扬流 文档变更记录 版本...
RI和SCU全链路使用实践
场景描述 随着云计算的不断发展，更多的企业会使用云计算，且会有越来 越多的企业和用户开始重视云上使用成本。 其中计算和存储是云资源使用的主要服务之一。采用预留实例券 业务架构（RI）和存储容量单位包（SCU）可以帮助客户灵活的节省成本。 本文提供全链路使用实践，帮助客户快速验证云上服务，更合理 的使用RI/SCU。借助覆盖率指标和智能推荐，有效管理云上资 源成本。 用户价值 使用RI 和SCU，可以灵活抵扣相关资源。随时创建释放， 稳态业务资源效率提高。 一份RI 可以抵扣ECS+ACK+EMR+ECI 等服务，跨服务高 度灵活，无需再分开购买。 SCU可以跨可用区抵扣某个地域下所有类型的按量付费云 盘，简化购买与管理复杂度。 RI+SCU 大幅降低按量场景的计算和存储成本。 产品列表 专有网络VPC、容器服务Kubernetes 版ACK 云服务器ECS、预留实例券RI、存储容量单位包SCU
成本节省对比 本章节仅供理论参考，提供成本节省对比模型，不做实践的操作验证。实际情况根据已有资源评估、购买 RI/SCU规格等进行横向对比。重点是控制一个合 理的使用水位。借助覆盖率指标智能监控和使用推荐，有效管理云上资源成本。2.1.业务场景推荐 1.针对相对固定业务：比如自有的业务（从他云或 IDC迁移过来），已经...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
自然语言处理的训练场景，训练出的模型可以用于预测、分 类、文本分析和文本对答等。方案架构 本方案使用了sccgn6机型的GPU云服务器，是一种弹性裸金属的神龙服务器，每台配置8个V100的GPU，并配置50Gb/s的RDMA网络。 并行文件系统CPFS作为共享存储，提供高带宽低延迟的数据访问服务。 Ali-Perseus框架加速分布式...
医学NLP
对医学领域文本内容进行分析，识别文本中的医学术语及属性。目前支持16种核心医学实体、6种医学属性的抽取。 医疗大数据是医疗前沿重要的发展方向，大数据与医疗结合，不仅会提升临床诊疗效果，还会对保险、药品研发等多个医疗健康领域产生深远影响。 但医疗大数据面临严重的质量问题，主要体现在数据统一性、完整度、准确性三个方面。因此，要想将大数据与医疗深度结合，底层数据和上层应用能力都必不可少。
通过海量药品数据，构建药品知识图谱，通过分析病历文本及费用清单，判断用药合理性.根据病历文本，推荐诊断及手术编码，结合病患基本信息及其他诊疗信息进行编码预测，辅助把控诊疗质量.打通各个机构之间的数据壁垒，将被割裂在区域内各个医疗，养老，体检等机构内健康数据实现互联互通，让个人健康档案变得更全面.分析...
来自：
云产品
人工智能-自然语言处理-情感分析
又称倾向性分析，或意见挖掘，它是对带有情感色彩的主观性文本进行分析、处理、归纳和推理的过程。利用情感分析能力，可以针对带有主观描述的自然语言文本，自动判断该文本的情感正负倾向并给出相应的结果。支持英语，泰语，越南语，印尼语。
基于百亿级别的数据反馈建立分析模型，提升模型的精度和适配性.海量数据建模.通过多年的语料及算法研发积累，可在短时间内分析海量文本，帮助客户更好更精确的挖掘出文本价值.服务可用性高达 99.9%，根据调用量动态调整，支持上亿量级的调用及数据监控.标准化接口封装，大大降低研发人力投入.支持文本实体抽取、文本分类等...
来自：
云产品
地址标准化
地址标准化（Address Purification）是依托阿里云海量的地址语料库，及超强的NLP算法实力所沉淀出的高性能、高准确率、功能覆盖最全的标准地址算法服务。可为企业、政府机关及开发者提供地址数据清洗。地址标准化通过地址解析、补全、匹配等赋能业务的上层应用。
自然语言处理是为各类企业及开发者提供的用于文本分析及挖掘的核心工具，已经广泛应用在电商、文化娱乐、金融、物流等行业客户的多项业务中。自然语言处理API可帮助用户搭建内容搜索、内容推荐、舆情识别及分析、文本结构化、对话机器人等智能产品，也能够通过合作，定制个性化的解决方案.自然语言处理.将输入的地址文本...
来自：
云产品
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例，使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer，模拟应用中的关键页面，比如登 录、课程内容等，之后构造若干用户使用的模拟 日志数据，投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖（EMR+OSS）搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
数据湖-在线学习场景数据分析 最佳实践 场景描述 业务架构 本场景以在线教育中一个答题闯关类的应用为例，使用WebServer来模拟演示这类日志数据的分析 处理。通过Nginx和Python flask搭建Web Server，模拟应用中的关键页面，比如登录、课程 内容等，之后构造若干用户使用的模拟日志数据，投递到数据湖进行分析后获取应用PV...
人工智能平台 PAI
阿里云人工智能平台 PAI 涵盖交互式建模、可视化建模、分布式训练到模型在线部署全流程；快速搭建人工智能推荐系统；深度学习模型训练速度提升数十倍；减少50%GPU成本
您可以根据不同的需求快速自定义构建各种类型的智能文创模型，针对不同的文本输入进行快速创作型应用，服务于文本创作场景需求.支持文本摘要、新闻标题生成模型构建，并持续扩展功能池.多类型任务支持.根据自有业务场景，选择性地进行模型调优和线上部署.定制化模块构建.推荐搭配使用.智能文创解决方案.查看详细方案介绍....
来自：
云产品
人工智能-自然语言处理-命名实体
我们为您提供的命名实体服务，可以帮助您快速识别文本中的实体，进而挖掘各实体间的关系，是进行深度文本挖掘，知识库构建等常用自然语言处理领域里的必备工具。目前主要针对电商领域，识别品牌、产品、型号等，同时也包括一些通用领域实体如人名、地名、机构名、时间日期等。
基于百亿级别的数据反馈建立分析模型，提升模型的精度和适配性.海量数据建模.结合细分领域，构建细粒度标签，实体类别超过50个.应对层出不穷的新品牌、新品类、新电影等，构建自动的专名识别机制，定期增量更新.灵活的更新机制.自然语言处理.NLP自学习平台.文本信息抽取.智能文本分类.商品评价解析.我们为您提供的命名实体...
来自：
云产品
人工智能-自然语言处理-中心词识别
多语言中心词（目前支持中文及英文）基于海量数据，使用电商标题中心词以及类目进行训练，通过给每个词计算一个相关性分数来衡量每个词与句子的相关性程度，进而识别并提取出句子的中心词。适用于提取电商搜索query、标题及其他类似短文本（一般小于25个词）的中心词。
基于电商行业的大量语料研发，对消费者历史评价和新增评价的商品维度属性自动解析，将文本转化为结构化属性字段，高效甄别正负面评价，同时根据情感强烈程度进行-1分~1分的打分，可统计可分析，大幅度节省客服人工.商品评价解析.将连续的自然语言文本，切分成具有语义合理性和完整性的词汇序列，同时保持对数据、模型的不断...
来自：
云产品
基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
最佳实践 文档版本：20201224 文档版本：20150122（发布日期）II 基于 Flink+ClickHouse构建实时游戏数据分析 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 基于 Flink+ClickHouse构建实时游戏数据分析 文档编号 188 文档版本 V1.0 版本日期 2020-12-24 文档状态 对外发布 制作人 七凌、凤豪、胡零 审阅人 阿瑟...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
基于 MaxCompute的大数据 BI分析 最佳实践 场景描述 业务架构 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做 ETL之后，同步到 Hologres进行实时分 析，之后通过 Quick BI进行快速可视化展示。解决问题 1.互联网行业、电商、游戏行业等网站、App、小程 序应用内 BI分析场景。2.可扩展到各类网站 BI分析场景...
人工智能-自然语言处理-词性标注
通过词性标注服务，用户可以快速的为每一个词附上对应的词性，结合分词服务，可以快速进行更深层次的文本挖掘处理，无需担心新词发现、歧义消除等问题。
基于电商行业的大量语料研发，对消费者历史评价和新增评价的商品维度属性自动解析，将文本转化为结构化属性字段，高效甄别正负面评价，同时根据情感强烈程度进行-1分~1分的打分，可统计可分析，大幅度节省客服人工.商品评价解析.将连续的自然语言文本，切分成具有语义合理性和完整性的词汇序列，同时保持对数据、模型的不断...
来自：
云产品
人工智能-自然语言处理-多语言分词
将连续的自然语言文本，切分成具有语义合理性和完整性的词汇序列，同时保持对数据、模型的不断迭代更新，目前支持简体中文、英文、泰文及越南语。
基于电商行业的大量语料研发，对消费者历史评价和新增评价的商品维度属性自动解析，将文本转化为结构化属性字段，高效甄别正负面评价，同时根据情感强烈程度进行-1分~1分的打分，可统计可分析，大幅度节省客服人工.商品评价解析.又称倾向性分析，或意见挖掘，它是对带有情感色彩的主观性文本进行分析、处理、归纳和推理的...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您