The JetBrains Blog

Blog

Skip to content
  • Blogs by Topic
  • Search
  • Language
    • English
    • 한국어
    • Русский
    • 简体中文
Burger menu icon
  • IDEs

    • AppCode
    • CLion
    • DataGrip
    • DataSpell
    • Fleet
    • GoLand
    • IntelliJ IDEA
    • PhpStorm
    • PyCharm
    • Rider
    • RubyMine
    • WebStorm
  • Plugins & Services

    • Big Data Tools
    • Code With Me
    • Quality Assurance
    • Rust
    • JetBrains Platform
    • Scala
    • Toolbox App
    • Writerside
  • Team Tools

    • Datalore
    • Space
    • TeamCity
    • Upsource
    • YouTrack
    • Hub
    • Qodana
  • .NET & Visual Studio

    • .NET Tools
    • ReSharper C++
  • Languages & Frameworks

    • Kotlin
    • Ktor
    • MPS
  • Education & Research

    • JetBrains Academy
    • Research
  • Company

    • Company Blog
    • Security
Big-data-tools logo

The Big Data Tools Blog

A data engineering plugin

Follow
  • Follow:
  • Twitter Twitter
  • RSS RSS
Get Plugin
  • All
  • Releases

Big Data Tools 2023.1 现已发布!

我们的最新版本包含多项新功能和基于用户反馈的改进。 在此版本中,我们在 Big Data Tools 中添加了与 Kafka 架构注册表、Kerberos 身份验证的集成,并扩展了对所有云存储的支持。 继续阅读以了解 Big Data Tools 插件中最重要的变化,或者通过将其安装到 IntelliJ IDEA Ultimate、PyCharm Professional、DataSpell 或 DataGrip 2023.1 以立即试用。 新功能:Kafka 架构注册表连接 应大量请求,我们已将 Kafka 架构注册表连接集成到 2023.1 版本的 Big Data Tools 插件中。 架构注册表定义数据结构并帮助您的 Kafka 应用程序与数据更改保持同步。 通过这项最新更新,您可以直接从 IDE 探索以 Avro 或 Protobuf 序列化的 Kafka 主题。 我们还通过安全的 SSH 隧道实现了与架构注册表的连接,以帮助您从本地机器使用和生产消息。 使用云存储更加方便 我们已在所有受支持的远程文件存储(例如 Amazon S3、Google Cloud Storage 和 Microsoft Azure Blob Storage)之间对我们的功能集进行了统一调整。 以下是最为显著的改进: 您现在可以直接在 IDE 中查看和管理存储桶对象的版本。 如果您使用对象或

Sue Sue

Big Data Tools 1.5:Amazon EMR 支持、阿里云 OSS 集成等

在此新版本的 Big Data Tools 中,我们为数据工程师增加了对更多工具的支持,包括 Amazon EMR 数据处理平台和阿里云对象存储服务。 现在,您可以直接从 IDE 中使用它们。 下文介绍了此版本引入的以上功能和其他增强功能。 Amazon EMR 支持 现在,您可以监控 Amazon EMR 数据处理平台中的群集和节点。 人性化的简单 UI 界面助力使用群集。 点击一下,即可创建到以下位置的连接: HDFSHadoop 和 Spark 监控ZeppelinAWS S3SFTP 主节点和数据节点 您还可以通过自动创建的 SSH 隧道打开内部群集服务网页(如 Ganglia)。 在 Amazon EMR 上使用 Spark Submit 运行应用程序 您可以在 IDE 中配置所有 Spark-Submit 参数,无需使用控制台,还可以将 jar 从本地机器上传到 S3 或类似群集。 远程文件系统支持改进 阿里云对象存储服务支持 阿里云 OSS 已被添加到插件支持的远程和云文件存储列表,列表中包括 AWS S3、Google Cloud Storage、Microsoft Azure 等。 

Sue Sue

Subscribe to Blog updates

By submitting this form, I agree that JetBrains s.r.o. ("JetBrains") may use my name, email address, and location data to send me newsletters, including commercial communications, and to process my personal data for this purpose. I agree that JetBrains may process said data using third-party services for this purpose in accordance with the JetBrains Privacy Policy. I understand that I can revoke this consent at any time in my profile. In addition, an unsubscribe link is included in each email.

Thanks, we've got you!

  • Privacy & Security
  • Terms of Use
  • Legal
  • Genuine tools
Language
  • English
  • 한국어
  • Русский
  • 简体中文
  • Twitter
  • Facebook
  • Linkedin
  • Instagram
  • Youtube
  • RSS
  • Tiktok
Copyright © 2000 JetBrains s.r.o.