Запуск запроса Gemfire во время транзакции в поле без индекса запроса

Мы видим ниже исключение при запросе поля в регионе во время транзакции GF в клиенте gemfire.

java.lang.ClassCastException: com.gemstone.gemfire.internal.cache.EntrySnapshot cannot be cast to com.gemstone.gemfire.internal.cache.LocalRegion$NonTXEntry

at com.gemstone.gemfire.internal.cache.EntriesSet$EntriesIterator.moveNext(EntriesSet.java:183) 
at com.gemstone.gemfire.internal.cache.EntriesSet$EntriesIterator.<init>(EntriesSet.java:121) 
at com.gemstone.gemfire.internal.cache.EntriesSet.iterator(EntriesSet.java:85) 
at com.gemstone.gemfire.cache.query.internal.ResultsCollectionWrapper.iterator(ResultsCollectionWrapper.java:181) 
at com.gemstone.gemfire.cache.query.internal.QRegion.iterator(QRegion.java:225) 
at com.gemstone.gemfire.cache.query.internal.CompiledSelect.doNestedIterations(CompiledSelect.java:712) 
at com.gemstone.gemfire.cache.query.internal.CompiledSelect.doIterationEvaluate(CompiledSelect.java:577) 
at com.gemstone.gemfire.cache.query.internal.CompiledSelect.evaluate(CompiledSelect.java:413) 
at com.gemstone.gemfire.cache.query.internal.DefaultQuery.executeUsingContext(DefaultQuery.java:529) 
at com.gemstone.gemfire.cache.query.internal.DefaultQuery.execute(DefaultQuery.java:365)

Благодаря нашим методам проб и ошибок, это происходит только тогда, когда он соответствует критериям ниже

  1. Транзакция выполняется: т. е. вызывается gemfireCache.getCacheTransactionManager().begin(), а затем выполняется запрос.

  2. Не создавать функциональный индекс для запроса / поля: т. е. QueryService.createIndex(String, String, String) не вызывается в конкретном поле во время инициализации.

3. где условие имеет поле, которое может быть пустым в данных области: т.е. если запустить "SELECT * FROM /REGIONNAME WHERE fieldName = $1", если fieldName в некоторой записи имеет значение null, оно генерирует указанное выше исключение, в противном случае все в порядке.

Мы используем скомпилированный запрос, полученный от QueryService.newQuery("SELECT * FROM /REGIONNAME WHERE fieldName = $1"). и служба запросов является локальной, если я не ошибаюсь, не выполняет запрос на сервере.

Мы используем Gemfire 8.2.1.

прокомментируйте ниже, если вам нужна дополнительная информация.

--- Обновление 12.05.2016 ---

Наконец, найдите время, чтобы собрать простой тестовый пример, чтобы проиллюстрировать проблему:

Запускаю процесс с помощью JUnit, просто по личной привычке. Первый тестовый пример запускает сервер с совмещенным локатором на порту 40001.

Второй тестовый пример запускает клиентский процесс и выполняет запрос без индекса внутри транзакции.

public class GemfireQueryInTXTest {

@Test
public void startServer() throws Exception {
    Properties props = new Properties();
    System.setProperty("gemfirePropertyFile", "query_in_tx/gfserver-query-in-tx.properties");
    String file = DistributedSystem.getPropertyFileURL().getFile();
    props.load(new FileReader(file));

    Cache cache = new CacheFactory(props).create();
    RegionFactory<String, ValueEntry> factory = cache
            .<String, ValueEntry>createRegionFactory("REPLICATE")
            .setKeyConstraint(String.class)
            .setValueConstraint(ValueEntry.class);

    Region<String, ValueEntry> valueEntryRegion = factory.create("VALUEENTRY");

    valueEntryRegion.put("first", new ValueEntry("firstEntry", "NotNull"));
    valueEntryRegion.put("second", new ValueEntry("secondEntry", null));

    CacheServer server = cache.addCacheServer();
    server.setPort(40000);

    server.start();

    Thread.sleep(1000000L);
}

@Test
public void testRunningQueryDuringTransactionOnNullableField() throws Exception {
    Properties props = new Properties();
    System.setProperty("gemfirePropertyFile", "query_in_tx/gemfire-query-in-tx.properties");
    String file = DistributedSystem.getPropertyFileURL().getFile();
    props.load(new FileReader(file));

    ClientCache cache = new ClientCacheFactory(props).create();
    ClientRegionFactory<String, ValueEntry> factory = cache
            .<String, ValueEntry>createClientRegionFactory("DEFAULT")
            .setKeyConstraint(String.class)
            .setValueConstraint(ValueEntry.class);

    Region<String, ValueEntry> valueEntryRegion = factory.create("VALUEENTRY");
    valueEntryRegion.registerInterest(".*", InterestResultPolicy.KEYS_VALUES);

    CacheTransactionManager cacheTransactionManager = cache.getCacheTransactionManager();

    QueryService localQueryService = cache.getLocalQueryService();
    Query query = localQueryService.newQuery("SELECT * from /VALUEENTRY WHERE nullable = $1");
    // No Exception will be thrown if create index for the field (uncomment below);
    // localQueryService.createIndex("IndexName", "nullable", "/VALUEENTRY");

    // ... Or run without transaction (comment below tx opening and closing)
    cacheTransactionManager.begin();
    System.out.println("Before Query Executed");
    query.execute(new Object[]{"1"});
    System.out.println("After Query Executed");
    cacheTransactionManager.commit();
}
}

Объект домена: ValueEntry.java

public class ValueEntry implements DataSerializable {
private String notNull;
private String nullable;

public ValueEntry() {
}

public ValueEntry(String notNull, String nullable) {
    this.notNull = notNull;
    this.nullable = nullable;
}

public String getNotNull() {
    return notNull;
}

public String getNullable() {
    return nullable;
}

@Override
public void toData(DataOutput dataOutput) throws IOException {
    DataSerializer.writeString(notNull, dataOutput);
    DataSerializer.writeString(nullable, dataOutput);
}

@Override
public void fromData(DataInput dataInput) throws IOException, ClassNotFoundException {
    this.notNull = DataSerializer.readString(dataInput);
    this.nullable = DataSerializer.readString(dataInput);
}
}

Свойства сервера и xml:

cache-xml-file=query_in_tx\\cache-server.xml
start-locator=40001
locators=localhost[40001]
log-file=logs\\server.log
log-level=config
mcast-port=0
name=server

<cache>
<serialization-registration>
    <instantiator id="999">
        <class-name>com.testing.gemfire.domain.ValueEntry</class-name>
    </instantiator>
</serialization-registration>
</cache>

Клиентские права и xml:

cache-xml-file=query_in_tx\\cache-query-in-tx.xml
log-disk-space-limit=100
log-file-size-limit=20
log-file=logs\\cache.log
log-level=config
mcast-port=0
name=gemfire-playground

<client-cache>
    <pool name="Zero" subscription-enabled="true" read-timeout="3000"
          retry-attempts="5" socket-buffer-size="65536">
        <locator host="localhost" port="40001" />
    </pool>

    <region-attributes id="DEFAULT" refid="CACHING_PROXY" pool-name="Zero"/>
</client-cache>

person Xiawei Zhang    schedule 30.09.2016    source источник
comment
Вы пробовали использовать PDX?   -  person Swapnil    schedule 30.09.2016
comment
@Swapnil, мы не использовали это с самого начала, поэтому не думайте, что это произойдет, учитывая масштаб проекта и усилия по переключению. Для этой конкретной проблемы мы можем решить эту проблему, создав функциональный индекс для поля. Но мне просто интересно, интересная ли это ошибка в gemfire? или я упускаю определенную информацию в документации, что заставляет меня использовать ее неправильно?   -  person Xiawei Zhang    schedule 30.09.2016
comment
Я обновил свой вопрос образцом кода   -  person Xiawei Zhang    schedule 05.12.2016


Ответы (1)


После общения с командой Pivotal выяснилось, что это ошибка в клиенте Gemfire. Как упоминалось в описании вопроса, создание индекса остановит создание этого исключения.

Я обновлю еще раз, если это будет исправлено в будущей версии.

person Xiawei Zhang    schedule 18.12.2016