PowerScale: Čtení zpráv protokolu CloudPools

CloudPools protokoluje zprávy na základě prováděných aktivit nebo úloh a zjištěného problému nebo důvodu zprávy. Podrobnosti v těchto zprávách mohou být často přehlédnuty, ale poskytují důležité informace pro interpretaci. Tyto zprávy naleznete v souboru zpráv isi_cpool_d.log or in isi_cpool_io_d.log. 

Zde je několik příkladů:

2017-07-03T13:03:59-06:00 <3.3> isilon-1 isi_cpool_d[2547]: [0x800710610]: /b/mnt/src/isilon/lib/isi_cpool_d/task_processing_thread_pool.cpp:run_consumer_function:196: 
run_consumer_function complete for task ([cache-invalidation/1:054d:b5b7::HEAD]): Writing Cache Header: Read-only file system     
from write_header (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_cache.cpp:360)     
from clear_state (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_cache.cpp:907): clearing cacheheader state     
from isi_cbm_invalidate_cache_i (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_invalidate.cpp:262): 
Could not reset CACHED state flag for 1:054d:b5b7     
from isi_cbm_invalidate_cached_file_opt (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_invalidate.cpp:518)

Důležitým klíčem pro zúžení zdroje a příčiny zprávy jsou informace o úkolu:

Task ([cache-invalidation/1:054d:b5b7::HEAD])

Typ úlohy (zneplatnění mezipaměti) odkazuje zpět na cloudovou úlohu, která zprávu vygenerovala. V tomto případě úloha 2 úloha zneplatnění mezipaměti:

tf80-1# isi cloud jobs list

ID   Description                             Effective State  Type
--------------------------------------------------------------------------------------
1    Write updated data back to the cloud    running          cache-writeback

2    Expire CloudPools cache                 running          cache-invalidation

3    Clean up cache and stub file metadata   running          local-garbage-collection

4    Clean up unreferenced data in the cloud running          cloud-garbage-collection

491                                          error            archive

492                                          error            archive>

Číslo LIN lze použít k vyhledání čísla LIN v daném systému, pokud stále existuje.

Pokud je typ úlohy Ve zprávě není vyvoláno, můžete stále určit typ operace.

Zde je příklad:Pokud se zobrazily tyto zprávy:

2018-08-13T12:49:38+02:00 <3.6> Isilon-1 isi_cpool_d[4520]: [0x80f7d0610]: /b/mnt/src/isilon/lib/isi_cloud_api/cl_provider.cpp:do_with_retry_common:73:  Operation: get_object, current try: 0, total retries: 140733193388032, total failures: 1, error: clapi error: CL_OBJ_NOT_FOUND; AEC_NOT_FOUND

2018-08-13T12:49:38+02:00 <3.3> Isilon-1 isi_cpool_d[4520]: [0x80f7d0610]: /b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_error_util.cpp:send_cloudpools_event:314: isi_cpool_cbm error in isi_cph_read_md_blob: CloudPools Object not found.  provider RAN, devid 1, account X210_cloud, entitypath m0007430b5526ccc7be54980e747b9db7883ai11/007034b0250780fde1b5283187d98e49_00000000_1, filename , lin 0, offset -1, errormessage clapi error: CL_OBJ_NOT_FOUND; AEC_NOT_FOUND: [error code: CBM_CLAPI_OBJECT_NOT_FOUND]

2018-05-23T07:51:43+02:00 <3.6> Isilon-1 isi_cpool_d[4520]: [0x80f7d0610]: /b/mnt/src/isilon/lib/isi_cpool_d/task_processing_thread_pool.cpp:start_thread:506: starting normal thread for type cloud-gc

V procesu uvolňování paměti z cloudu došlo k této chybě. Zpráva "Object Not Found" neindikuje ztrátu dat. Vzhledem k tomu, že k tomu dochází během rutinního procesu uvolňování paměti a čištění, bylo odstranění objektu již naplánováno. Pokud by se jednalo o operaci odvolání, chyba by byla závažnější.

Někdy je uveden důvod problému:

Writing Cache Header: Read-only file system

Could not reset CACHED state flag for 1:054d:b5b7

Systém nemůže resetovat příznak stavu mezipaměti pro LIN, protože systém souborů je ve stavu pouze ke čtení. V tomto konkrétním případě se jednalo o normální a očekávanou zprávu v cílové cestě SyncIQ, ale mělo by se prozkoumat, jestli cesta je nebo by měla být jen pro čtení.

Jiný příklad:

2017-06-19T09:13:15-04:00 <3.7> isilon-2 isi_cpool_d[4531]: [0x80ef97c10]: /b/mnt/src/isilon/lib/isi_cpool_d/task_processing_thread_pool.cpp:run_consumer_function:196: 
run_consumer_function complete for task ([archive/1:5d01:0232::HEAD]/CloudPool-5yrs): File modified after stubbing began; lin 1:5d01:0232: [error code: CBM_STALE_STUB_ERROR]     
from write_map_core (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_mapper.cpp:1615)     
from write_map (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_mapper.cpp:1653)     
from isi_cph_create_stub (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_archive.cpp:1073)     
from isi_cbm_archive_common (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_archive.cpp:934)     
from isi_cbm_archive (/b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_archive.cpp:312)

V tomto případě se zpracovává úloha archivace:

archive/1:5d01:0232::HEAD

Určete zásady fondu souborů:

CloudPool-5yrs

Z této chyby nelze určit konkrétní úlohu archivu CloudPools.

Co se přihodilo:

File modified after stubbing began; lin 1:5d01:0232.

Zkontrolujte tento soubor a zjistěte, zda by mohl být zakázaný (měl by během další archivace pro tuto cestu).

Některé další chybové zprávy CloudPools obsahují více kryptických chyb. V těchto případech můžete obvykle určit úkol jako součást nápovědy, ale možná budete muset provést průzkum, abyste zjistili význam chyby.

Například:

varlog.tar/log/messages:

2017-04-20T18:47:52-06:00 <3.3> isilon-6 isi_cpool_d[3856]: [0x80f24f710]: /b/mnt/src/isilon/lib/isi_cpool_cbm/isi_cbm_error_util.cpp:send_cloudpools_event:314: isi_cpool_cbm error in isi_cph_read_md_blob: CloudPools Object not found. provider AWS, devid 6, account isilon archive, entitypath m000743091d8878539854870242892ceaa45di36/007034b0dea80d459f85b4a16d82cc48_00000000_0, filename , lin 0, offset -1, errormessage clapi error: CL_OBJ_NOT_FOUND; The specified key does not exist.: [error code: CBM_CLAPI_OBJECT_NOT_FOUND]

To vám něco málo napoví:

• Co je poskytovatel cloudu: Provider AWS
• U kterého uzlu došlo k chybě: Devid 6
• Jaký účet byl použit: Account isilon archive
• Jaká je cesta k objektu, která se hledá v cloudu: entitypath m000743091d8878539854870242892ceaa45di36/007034b0dea80d459f85b4a16d82cc48_00000000_0.
• V čem je problém: error message clapi error: CL_OBJ_NOT_FOUND; The specified key does not exist.: [error code: CBM_CLAPI_OBJECT_NOT_FOUND

V takovém případě zkontrolujte, zda lze daný objekt nalézt v cloudovém úložišti.

Některé další případy:

An error occurred on the Cloud Storage - Check the cloud storage logs or errors:

CL_SVR_INTERNAL_ERROR; We encountered an internal error. Please try again.: [error code: CBM_CLAPI_SERVER_ERROR]

A network error occurred - make sure that Node can connect to the cloud:

CL_COULDNT_CONNECT; Couldn't connect to server: error buf: couldn't connect to host: [error code: CBM_CLAPI_COULDNT_CONNECT]

Authentication Failed - Make sure that the account identified has access on the Cloud target:

CL_AUTHENTICATION_FAILED; 401: [error code: CBM_CLAPI_AUTHENTICATION_FAILED]