e_tablestore_map 以阿里云表格存储（Tablestore）作为维表数据对原始日志进行富化。e_redis_map 以阿里云Redis作为维表数据对原始日志进行富化。e_search_dic_map 对关键字（查询字符串）以及其匹配的值的字典数据进行映射。e_search_...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
阿里云日志服务提供服务日志功能，支持记录Project内的用户操作日志等多种日志数据，并提供多种分析维度的仪表盘。您可以通过多种方式实时掌握日志服务的使用状况、提高运维效率。默认配置 默认配置项 配置内容 Logstore 当前Project产生的...
日志服务开放了大量的OpenAPI，支持用户通过OpenAPI门户的阿里云SDK等方式进行集成，同时为了更好的采集和使用数据，日志服务自研了日志服务SDK和日志服务CLI，如满足嵌入式/智能设备轻量化采集日志等场景。OpenAPI集成 日志服务 提供日志...
本文介绍如何创建外部存储，建立日志服务与MySQL数据库的关联。前提条件 已采集数据到日志服务。具体操作，请参见 数据采集。已存储数据到MySQL数据库。MySQL数据库在阿里云VPC内网域内。背景信息 日志服务外部存储功能支持日志服务与阿里...
概述 日志服务不支持直接关闭，若您不再需要使用日志服务，可以通过删除所有数据，将不会再产生不必要的计费。本文主要介绍如何不再使用日志服务。详细信息 请删除所有Project和Logstore以清除所有的日志数据，具体操作请参见 日志服务如何...
日志服务不支持直接删除日志，您可以通过调整Logstore的数据保存时间，从而实现日志删除。当日志保存时间达到您所设置的保存时间后，日志将被删除。本文介绍如何调整Logstore的数据保存时间。操作步骤 登录 日志服务控制台。在Project列表...
阿里云日志服务和友盟联合推出实时日志订阅功能，将友盟数据开放平台U-DOP的各类明细数据一键实时同步至日志服务，实现日志实时查询、可视化分析、告警、投递、加工等操作。本文介绍友盟相关日志的资源说明、费用说明和使用限制。资源说明 ...
如何排查容器日志采集异常 查询本地采集状态 如何在日志样例中设置不可见字符 如何查看Logtail采集错误信息 日志服务采集数据常见的错误类型 如何调试正则表达式 如何优化正则表达式的性能 如何通过完整正则模式采集多种格式日志 如何采集K...
阿里云日志服务联合数据库MongoDB推出日志审计功能，将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...
本文介绍如何在服务网格ASM控制台中配置控制平面日志采集和告警，将日志推送到日志服务的LogStore中进行存储、查询分析并配置日志告警。前提条件 阿里云账号已开通阿里云日志服务SLS。具体操作，请参见 开通日志服务。重要 将日志采集到ASM...
如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致任务失败，极端情况下甚至可能会导致数据不一致或丢失。...
在数据库审计系统查看到的会话日志来源是日志服务，您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的会话日志数据。操作步骤 登录 日志服务控制台。在Project列表处，查看数据库审计相关的Project，单击...
函数计算 支持与 日志服务 进行集成，为函数配置日志后，函数计算 会自动收集日志，并把日志投递到指定的日志库。您可以在 函数计算 控制台查看单请求日志、实例日志、函数日志，也可以在 日志服务 控制台利用日志分析能力对日志进行自定义...
配置日志功能 使用函数计算控制台配置日志 前提条件 函数计算 创建服务 可选：日志服务SLS 创建日志项目和日志库 操作步骤 登录 函数计算控制台，在左侧导航栏，单击 服务及函数。在顶部菜单栏，选择地域，然后在 服务列表 页面，单击目标...
目标Logstore：client-information RDS资源 数据库：client-db 数据库表：client 数据样例如下所示：数据库用户名和密码：test/test1234@数据库外网地址：rm-bp1k*tp8o.mysql.rds.aliyuncs.com 操作步骤 登录 日志服务控制台。进入数据加工...
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
PolarDB 支持手动更换主可用区或备可用区，您可以通过该功能将数据库集群计算节点迁移到其他可用区。使用场景和注意事项 更换主可用区 更换集群主可用区的功能适用于灾难恢复或者让ECS就近访问的场景。主备可用区切换过程中，会出现1~2次约...
本文介绍如何在数据库审计控制台上开通日志功能，将日志保存到日志服务中。前提条件 已开通日志服务。具体操作请参见 管理服务日志。已开通数据库审计。具体操作请参见 购买数据库审计实例。操作步骤 重要 如果您使用RAM用户开通日志功能，...
如果您需要获取 Project内 的资源操作日志（创建、修改、更新、删除）和任务执行日志（定时SQL、数据导入、数据投递），Logstore内 消费组消费延时日志以及Logtail的错误、心跳和统计日志，可以使用服务日志功能。本文介绍如何开通、关闭...
在日志服务控制台查看会话日志 日志服务存储了数据库审计系统审计到的数据库操作日志，在数据库审计系统查看到的会话日志来源是日志服务，您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的会话日志数据。...
原始日志_topic_:db_name:db-01 db_version:5.6_topic_:db_name:db-02 db_version:5.7 加工规则 e_output(name="target1",hash_key_field="db_version")加工结果#假设存储目标target1一共有2个Shard。Shard 0的范围...
传输加速 如果业务服务器、日志服务Project分别属于国内地域和国外地域，使用公网传输数据可能会出现网络延迟高、传输不稳定等问题，您可以选择传输加速传输数据。更多信息，请参见 管理传输加速。场景 网络类型 ECS实例和Project属于同一...
日志可以通过日志主题（Topic）来划分，您可以在日志服务控制台上创建Logtail配置时设置日志主题，也可以在使用API或SDK上传数据时设置日志主题。空-不生成Topic 机器组Topic属性 文件路径正则 静态主题生成 空-不生成Topic 设置 Topic生成...
日志服务联合传统型负载均衡CLB推出7层访问日志功能，用于记录所有发送到CLB的请求的详细信息，包括请求时间、客户端IP地址、延迟、请求路径和服务器响应等。您可以通过7层访问日志分析了解客户端用户行为、客户端用户地域分布和进行问题...
阿里云对象存储（OSS）联合日志服务推出OSS访问日志实时查询功能，帮助您完成OSS的操作审计、访问统计、异常事件回溯和问题定位等工作。本文介绍OSS日志实时查询功能相关的功能优势、资产详情、费用说明以及使用限制。重要 日志服务还联合...
table table1 为Logstore，table2 为Logstore、MySQL数据库或OSS Bucket。更多信息，请参见 关联MySQL数据源、关联OSS数据源。示例 在某个Project下，名为internal-diagnostic_log的Logstore用于记录各个Logstore的消费延时、告警、采集等...
日志模板匹配通过在线匹配日志和模板，监控日志模板的统计信息，例如数量变化。本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所...
您可以根据自身业务特点，设置MyBase MySQL主备实例之间的数据复制方式，以提高数据库可用性。前提条件 实例要求如下：MySQL 8.0高可用版（本地SSD盘）MySQL 5.7高可用版（本地SSD盘）MySQL 5.6高可用版（本地SSD盘、ESSD云盘）复制方式...
本文将介绍如何使用 PyMySQL 库和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、查询数据和删除表等。点击下载 python-pymysql 示例工程 前提条件 您已安装 Python 3.x 和 pip。您已安装 OceanBase ...
本文介绍如何在EDAS控制台中配置日志采集功能，将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志采集到日志服务进行查询分析。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群、创建...
如果在12:02:50秒写入日志，这些日志时间为12:02:20、12:02:50等，那么这些日志的索引可能落盘在12:02:20这个时间点，导致在[12:02:30,12:03:30)期间查询不到日志。如果对告警的准确性要求高（不重复报警，不漏报），查询和分析的时间范围...
购买并启用数据库审计实例后，您可以在云盾数据库审计管理控制台管理您的数据库审计实例。本文介绍如何为数据库实例配置白名单、管理存储容量、升级和续费。前提条件 已启用数据库审计实例。具体操作，请参见 启用数据库审计实例。操作步骤...
购买日志分析存储容量后，云安全中心默认开启了安全日志、网络日志、主机日志，分别记录系统中的安全事件、网络流量情况和主机的活动。本文介绍云安全中心支持的日志类型以及每种日志类型的字段说明。日志分类 云安全中心分为安全日志、...
i)^production$"#accept by default accept"*"复杂场景 例如：只采集RDS MySQL实例日志，但是如果标签打上 level:high 的实例，无论数据库类型是MySQL、SQL Server或PostgreSQL，都采集，采集策略如下所示。accept all high level ...
因此，在异步数据复制方式下，备实例不可用时不会影响主实例上的操作，而主实例不可用时可能会导致主备实例数据不一致。查看数据复制方式 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中，单击 服务可用性 查看...
您可以在微服务引擎MSE控制台中，为云原生网关开启日志投递功能，将日志投递到日志服务中。通过分析云原生网关的访问日志了解客户端用户行为、客户端用户的地域分布，方便排查问题。前提条件 已创建云原生网关实例。具体操作，请参见 新建...
阿里云弹性公网（Elastic IP Address，简称EIP）联合日志服务推出高精度秒级监控功能，以日志形式将高精度网络带宽监控数据推送到日志服务，帮助您实时监控互联网业务流量变化，及时调整弹性公网IP的带宽峰值。本文介绍弹性公网IP日志相关...
日志服务将日志投递到OSS后，支持存储为不同的文件格式。本文介绍CSV格式。参数配置 在 创建OSS投递任务（新版）时，选择 存储格式 为 csv，对应的参数配置如下所示。参数说明如下所示。更多信息，请参见 CSV标准 和 postgresql CSV说明。...