Canal 是阿里巴巴开源的一款基于 MySQL 数据库的数据变更捕获与同步工具。通过整合 Canal 客户端，我们可以实现对 MySQL 数据库变更的实时监听，以便及时获取插入、更新和删除等操作的变更信息，从而进行相应的业务处理。下面我将通过样例进行演示......
Big Data Tools 插件可用于 Intellij Idea 2019.2 及以后的版本。它提供了使用 Zeppelin，AWS S3，Spark，Google Cloud Storage，Minio，Linode，Microsoft Azure 和 Hadoop 分布式文件系统（HDFS）来监视和处理数据的特定功能。 1，插件安装 在 IntelliJ IDEA 官方插件市场中搜索......
在前两篇文章中，我们已经搭建了 YOLO 模型的训练环境（点击查看）并准备好了数据集（点击查看）。本文我将介绍如何进行模型训练，并使用训练好的模型进行目标检测。 三、模型训练 1，修改配置文件 （1）首先在项目的 data 路径下找到 coco128.yaml 文件，复制到 own_datas 路径下......
我在前文演示了如何在 Windows 环境下搭建 YOLO 模型的训练环境，接下来我将演示如何标注样本并准备用于训练的数据集。 二、样本标注、数据集准备 1，准备样本图片 （1）为方便后续操作与管理，首先我们可以在项目中创建如下层级的空目录： （2）然后将样本图片放到 own_datas\images\train 文件夹下作为训练集......
YOLO 是一种流行的目标检测算法，其快速而准确的特性使其成为计算机视觉领域的热门选择。本文将详细介绍在 Windows 操作系统下如何搭建 YOLO 模型训练环境。 一、训练环境搭建 1，安装 Anaconda （1）Anaconda 是一个开源的 Python 发行版本，它包含了 conda、Python......
一、基本介绍 1，什么是 Canal？ （1）Canal 由阿里巴巴开源的一个基于 MySQL 数据库的增量日志（Binary Log）解析工具，可以提供增量数据订阅和消费，支持将 MySQL 中的增量数据采集到 Kafka、RabbitMQ、Elasticsearch 及 HBase 中。 以下业务可以基于日志增量订阅和消费来实现......
一、基本介绍 1，什么是 Maxwell？ （1）Maxwell 是由 Zendesk 开源的一个基于 MySQL 数据库的增量日志（Binary Log）解析工具，它可以实时读取 MySQL 增量日志（Binary Log），并生成 JSON 格式的数据，作为生产者将数据发送给 Kafka、Kinesis、RabbitMQ、Redis 或其他平台的应用程序......
三、实现 MySQL 与 HBase 之间数据同步 1，准备工作 （1）首先我们需要开放 MySQL 的远程访问权限，这样 DataX 可以连接远程机器上的 MySQL 服务。 （2）接着我们在 MySQL 中创建 user 和 user2 这两张表，它们的表结构是一样的： （3）为了能够自动生成一些模拟数据，我们定义一个存储过程......
二、实现 MySQL 之间数据同步 1，准备工作 （1）首先我们需要开放 MySQL 的远程访问权限，这样 DataX 可以连接远程机器上的 MySQL 服务。具体操作步骤可以参考我之前写的文章： MySQL - 让mysql数据库支持远程连接 （2）接着我们在 MySQL 中创建 user 和 user2 这两张表，它们的表结构是一样的......
一、基本介绍 1，什么是 DataX？ （1）DataX 是阿里云 DataWorks 数据集成的开源版本，主要就是用于实现数据间的离线同步。目前 DataX 在阿里巴巴集团内被广泛使用。 （2）DataX 致力于实现包括关系型数据库（MySQL、Oracle 等）、HDFS、Hive、ODPS、HBase、FTP 等 各种异构数据源......