Ignite 卡法拖缆,随时间变慢
我正在使用kafka streamer,它一开始以每秒10k记录的速度运行,在缓存中存储大约100万条记录后,速度会降低到每秒2000rec,达到500到100。我不知道哪里出了问题。 如果它与数据页、线程或其他东西有关 以下是日志:Ignite 卡法拖缆,随时间变慢,ignite,Ignite,我正在使用kafka streamer,它一开始以每秒10k记录的速度运行,在缓存中存储大约100万条记录后,速度会降低到每秒2000rec,达到500到100。我不知道哪里出了问题。 如果它与数据页、线程或其他东西有关 以下是日志: Metrics for local node (to disable set 'metricsLogFrequency' to 0) ^-- Node [id=367b9688, uptime=00:50:00.246] ^-- H/N/C [ho
Metrics for local node (to disable set 'metricsLogFrequency' to 0)
^-- Node [id=367b9688, uptime=00:50:00.246]
^-- H/N/C [hosts=5, nodes=6, CPUs=80]
^-- CPU [cur=4.6%, avg=23.52%, GC=0%]
^-- PageMemory [pages=12052]
^-- Heap [used=3222MB, free=77.04%, comm=4085MB]
^-- Off-heap [used=47MB, free=99.93%, comm=10576MB]
^-- sysMemPlc region [used=0MB, free=99.21%, comm=40MB]
^-- default region [used=0MB, free=100%, comm=256MB]
^-- 500MB_Region region [used=46MB, free=99.91%, comm=10240MB]
^-- TxLog region [used=0MB, free=100%, comm=40MB]
^-- Outbound messages queue [size=0]
^-- Public thread pool [active=0, idle=0, qSize=0]
^-- System thread pool [active=0, idle=6, qSize=0]
[2020-01-27 09:48:19,368][INFO ][grid-timeout-worker-#39][IgniteKernal] FreeList [name=null, buckets=256, dataPages=8527, reusePages=0]
点火和数据区域配置
<bean class="org.apache.ignite.configuration.IgniteConfiguration">
<property name="publicThreadPoolSize" value="64"/>
<property name="systemThreadPoolSize" value="32"/>
<property name="dataStorageConfiguration">
<bean class="org.apache.ignite.configuration.DataStorageConfiguration">
<property name="dataRegionConfigurations">
<list>
<bean class="org.apache.ignite.configuration.DataRegionConfiguration">
<property name="name" value="500MB_Region"/>
<property name="initialSize" value="#{10L * 1024 * 1024 * 1024}"/>
<property name="maxSize" value="#{50L * 1024 * 1024 * 1024}"/>
</bean>
</list>
</property>
</bean>
</property>
缓存配置
<property name="cacheConfiguration">
<list>
</bean>
<bean class="org.apache.ignite.configuration.CacheConfiguration">
<property name="name" value="AllEvents"/>
<property name="dataRegionName" value="500MB_Region"/>
<property name="cacheMode" value="PARTITIONED"/>
<property name="queryParallelism" value="25"/>
<property name="affinity">
<bean class="org.apache.ignite.cache.affinity.rendezvous.RendezvousAffinityFunction">
<property name="excludeNeighbors" value="true"/>
<property name="partitions" value="2048"/>
</bean>
</property>
</bean>
</list>
</property>
如果您在中已经有1M条记录,为什么日志片段显示数据区域为空?@alamar我不确定为什么它显示为空,我可以看到visor shell上的条目数在增加。您是否建议更改配置以解决此问题?您是否也可以在帖子中显示Visor命令结果?