HazelcastReplicatedMapBINARY使用详解

本篇文章给大家分享《Hazelcast ReplicatedMap BINARY格式使用指南》，覆盖了文章的常见基础知识，其实一个语言的全部知识点一篇文章是不可能说完的，但希望通过这些问题，让读者对自己的掌握程度有一定的认识(B 数)，从而弥补自己的不足，更好的掌握它。

本文旨在解决Hazelcast ReplicatedMap在使用InMemoryFormat.BINARY格式时，因内部指标收集机制引发的ClassCastException（String无法转换为HeapData）问题。核心在于理解Hazelcast内部数据存储的二进制格式Data，并相应地将ReplicatedMap的泛型类型从String, String调整为Data, Data，以确保内部操作与实际存储类型匹配，从而消除类型转换错误。

1. 问题描述与现象

在使用Hazelcast 4.2.5版本的ReplicatedMap，并将其配置为InMemoryFormat.BINARY时，应用程序日志中频繁出现java.lang.ClassCastException: class java.lang.String cannot be cast to class com.hazelcast.internal.serialization.impl.HeapData错误。此异常通常发生在Hazelcast的内部指标收集线程中，具体堆栈信息如下：

java.lang.ClassCastException: class java.lang.String cannot be cast to class com.hazelcast.internal.serialization.impl.HeapData (...)
        at com.hazelcast.replicatedmap.impl.LocalReplicatedMapStatsProvider.getLocalReplicatedMapStats(LocalReplicatedMapStatsProvider.java:85)
        at com.hazelcast.replicatedmap.impl.ReplicatedMapService.getLocalReplicatedMapStats(ReplicatedMapService.java:197)
        at com.hazelcast.replicatedmap.impl.ReplicatedMapService.getStats(ReplicatedMapService.java:357)
        at com.hazelcast.replicatedmap.impl.ReplicatedMapService.provideDynamicMetrics(ReplicatedMapService.java:387)
        at com.hazelcast.internal.metrics.impl.MetricsCollectionCycle.collectDynamicMetrics(MetricsCollectionCycle.java:88)
        ... (metrics collection related stack trace)

错误发生在LocalReplicatedMapStatsProvider尝试计算内存使用量时，它预期获取HeapData类型的数据进行操作，但实际获取到了String类型，导致类型转换失败。

当前的Hazelcast配置示例如下：

import com.hazelcast.config.Config;
import com.hazelcast.config.InMemoryFormat;
import com.hazelcast.config.JoinConfig;
import com.hazelcast.config.NetworkConfig;
import com.hazelcast.config.ReplicatedMapConfig;
import com.hazelcast.core.Hazelcast;
import com.hazelcast.core.HazelcastInstance;
import com.hazelcast.replicatedmap.ReplicatedMap;

public class HazelcastConfigExample {

    private static HazelcastInstance setupHazelcastConfig() {
        Config config = new Config();
        config.setInstanceName("rogueUsers");
        NetworkConfig network = config.getNetworkConfig();
        network.setPort(5701).setPortCount(20);
        network.setPortAutoIncrement(true);
        JoinConfig join = network.getJoin();
        join.getMulticastConfig().setEnabled(true);

        HazelcastInstance hz = Hazelcast.getOrCreateHazelcastInstance(config);

        ReplicatedMapConfig replicatedMapConfig =
                config.getReplicatedMapConfig("rogueUsers");

        replicatedMapConfig.setInMemoryFormat(InMemoryFormat.BINARY); // <-- 配置为BINARY
        replicatedMapConfig.setAsyncFillup(true);
        replicatedMapConfig.setStatisticsEnabled(true); // <-- 开启了统计
        replicatedMapConfig.setSplitBrainProtectionName("splitbrainprotection-name");

        // 问题所在：此处泛型为 String, String
        ReplicatedMap<String, String> map = hz.getReplicatedMap("rogueUsers");
        // map.addEntryListener(new RogueEntryListener()); // 假设有监听器

        return hz;
    }
}

2. 根本原因分析

此ClassCastException的根本原因在于对InMemoryFormat.BINARY的理解与ReplicatedMap泛型类型声明之间的不匹配。

1. InMemoryFormat.BINARY的含义： 当ReplicatedMapConfig的inMemoryFormat设置为InMemoryFormat.BINARY时，Hazelcast会将存储在ReplicatedMap中的所有对象（键和值）序列化为其内部的二进制格式。这种内部二进制表示通常是com.hazelcast.internal.serialization.Data接口的实现类，例如com.hazelcast.internal.serialization.impl.HeapData（当数据存储在堆内存中时）。这意味着，无论您实际存入的是String、Integer还是自定义对象，它们在Hazelcast内部都会被转换为Data对象进行存储。
2. 指标收集机制： Hazelcast的内部指标收集服务（MetricsService）在收集ReplicatedMap的统计信息（例如内存使用量）时，会直接访问其内部存储的数据。当InMemoryFormat.BINARY被启用时，指标收集逻辑会预期从内部存储中获取到Data类型的对象（特别是HeapData），以便计算其堆成本（getHeapCost()）。
3. 类型不匹配： 在示例代码中，ReplicatedMap被声明为ReplicatedMap。尽管Hazelcast在您通过map.put("key", "value")操作时会透明地将String序列化为Data并存储，但在某些内部场景（如本例中的指标收集）下，如果ReplicatedMap的声明类型与实际内部存储类型不一致，可能会导致混淆。ClassCastException: String cannot be cast to HeapData表明，在指标收集尝试访问数据时，它在不应该获取String对象的地方，却意外地获取到了一个String对象，而不是预期的Data或HeapData对象，从而导致类型转换失败。这可能是因为ReplicatedMap的泛型声明在某种程度上影响了内部组件对实际存储类型的判断或访问方式。

根据Hazelcast的com.hazelcast.internal.serialization.Data类Javadoc，Data是序列化的基本单元，它存储了对象经SerializationService.toData(Object)序列化后的二进制形式。因此，当InMemoryFormat.BINARY生效时，内部操作理应处理Data类型。

3. 解决方案

要解决此ClassCastException，需要确保ReplicatedMap的泛型类型与InMemoryFormat.BINARY所指示的内部存储格式保持一致。这意味着，当数据以二进制形式存储时，ReplicatedMap的键和值类型都应该声明为Data。

将ReplicatedMap的声明从ReplicatedMap修改为ReplicatedMap：

import com.hazelcast.config.Config;
import com.hazelcast.config.InMemoryFormat;
import com.hazelcast.config.JoinConfig;
import com.hazelcast.config.NetworkConfig;
import com.hazelcast.config.ReplicatedMapConfig;
import com.hazelcast.core.Hazelcast;
import com.hazelcast.core.HazelcastInstance;
import com.hazelcast.replicatedmap.ReplicatedMap;
import com.hazelcast.internal.serialization.Data; // 导入 Data 类
import com.hazelcast.spi.serialization.SerializationService; // 可能需要，用于手动序列化

public class HazelcastConfigFixedExample {

    private static HazelcastInstance setupHazelcastConfig() {
        Config config = new Config();
        config.setInstanceName("rogueUsers");
        NetworkConfig network = config.getNetworkConfig();
        network.setPort(5701).setPortCount(20);
        network.setPortAutoIncrement(true);
        JoinConfig join = network.getJoin();
        join.getMulticastConfig().setEnabled(true);

        HazelcastInstance hz = Hazelcast.getOrCreateHazelcastInstance(config);

        ReplicatedMapConfig replicatedMapConfig =
                config.getReplicatedMapConfig("rogueUsers");

        replicatedMapConfig.setInMemoryFormat(InMemoryFormat.BINARY);
        replicatedMapConfig.setAsyncFillup(true);
        replicatedMapConfig.setStatisticsEnabled(true);
        replicatedMapConfig.setSplitBrainProtectionName("splitbrainprotection-name");

        // 修正：将泛型类型改为 Data, Data
        ReplicatedMap<Data, Data> map = hz.getReplicatedMap("rogueUsers");
        // map.addEntryListener(new RogueEntryListener()); // 监听器可能需要调整以处理 Data 类型

        return hz;
    }
}

4. 注意事项与影响

将ReplicatedMap的泛型类型从String, String改为Data, Data虽然可以解决ClassCastException，但这会改变应用程序与ReplicatedMap交互的方式。

1. 数据存取方式改变：

   • 之前： 您可以直接存入和取出String对象，Hazelcast会透明地处理序列化和反序列化。

     // 之前
     ReplicatedMap<String, String> map = hz.getReplicatedMap("rogueUsers");
     map.put("key1", "value1");
     String value = map.get("key1");

   • 之后： 您需要手动将要存储的String或其他对象序列化为Data对象，再存入Map。同样，从Map中取出的是Data对象，需要手动反序列化回原始类型。

     // 之后
     ReplicatedMap<Data, Data> map = hz.getReplicatedMap("rogueUsers");
     // 获取Hazelcast的序列化服务
     SerializationService serializationService = ((HazelcastInstanceProxy) hz).getSerializationService();
     
     // 存入数据
     Data keyData = serializationService.toData("key1");
     Data valueData = serializationService.toData("value1");
     map.put(keyData, valueData);
     
     // 取出数据
     Data retrievedValueData = map.get(keyData);
     String retrievedValue = serializationService.toObject(retrievedValueData);

     这会增加应用程序代码的复杂性，因为您现在需要直接处理Hazelcast的内部Data类型。

2. 监听器（EntryListener）的影响： 如果您注册了EntryListener，其onEntryEvent方法接收的键和

文中关于的知识介绍，希望对你的学习有所帮助！若是受益匪浅，那就动动鼠标收藏这篇《HazelcastReplicatedMapBINARY使用详解》文章吧，也可关注golang学习网公众号了解相关技术文章。