Intellij IDEA - 大数据插件Big Data Tools安装使用详解（操作HDFS）
作者：hangge | 2024-04-26 08:45
Big Data Tools 插件可用于 Intellij Idea 2019.2 及以后的版本。它提供了使用 Zeppelin，AWS S3，Spark，Google Cloud Storage，Minio，Linode，Microsoft Azure 和 Hadoop 分布式文件系统（HDFS）来监视和处理数据的特定功能。
1，插件安装
在 IntelliJ IDEA 官方插件市场中搜索 Big Data Tools 插件并安装即可。
2，插件使用
（1）安装后在 IDEA 界面右侧就会显示出了 Big Data Tools 面板，我们可选择各种需要连接或者监控的组件，比如 Kafka、Hadoop、Spark 等：
（2）比如我们选择 HDFS，在弹出的填写相关的连接信息后点击确定即可。
（3）这样直接就可以查看 HDFS 上的目录及文件，就不用在登录 HDFS-Web 去查看文件了。并且可以进行文件的上传下载等操作，十分方便。
附：监控 Kafka
（1）监控 Kafka，我们只需点击该插件的加号选择 Kafka 然后设置一下 Kafka 集群的 broker list，然后确定即可。
（2）连接后我们就可以看到所有 topic 的详细信息，包括 partition，replicas 等，还可以查看 Consumers 的情况，
全部评论（0）