[ਚੀਨ, ਸ਼ੇਨਜ਼ੇਨ, 14 ਜੁਲਾਈ, 2023] ਅੱਜ, ਹੁਆਵੇਈ ਨੇ ਵੱਡੇ ਪੈਮਾਨੇ ਦੇ ਮਾਡਲਾਂ ਦੇ ਯੁੱਗ ਲਈ ਆਪਣੇ ਨਵੇਂ AI ਸਟੋਰੇਜ ਹੱਲ ਦਾ ਪਰਦਾਫਾਸ਼ ਕੀਤਾ, ਬੁਨਿਆਦੀ ਮਾਡਲ ਸਿਖਲਾਈ, ਉਦਯੋਗ-ਵਿਸ਼ੇਸ਼ ਮਾਡਲ ਸਿਖਲਾਈ, ਅਤੇ ਖੰਡਿਤ ਦ੍ਰਿਸ਼ਾਂ ਵਿੱਚ ਅਨੁਮਾਨ ਲਈ ਅਨੁਕੂਲ ਸਟੋਰੇਜ ਹੱਲ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ, ਇਸ ਤਰ੍ਹਾਂ ਨਵੀਂ AI ਸਮਰੱਥਾਵਾਂ ਨੂੰ ਜਾਰੀ ਕਰਨਾ।
ਵੱਡੇ ਪੈਮਾਨੇ ਦੇ ਮਾਡਲ ਐਪਲੀਕੇਸ਼ਨਾਂ ਦੇ ਵਿਕਾਸ ਅਤੇ ਲਾਗੂ ਕਰਨ ਵਿੱਚ, ਉੱਦਮਾਂ ਨੂੰ ਚਾਰ ਪ੍ਰਮੁੱਖ ਚੁਣੌਤੀਆਂ ਦਾ ਸਾਹਮਣਾ ਕਰਨਾ ਪੈਂਦਾ ਹੈ:
ਸਭ ਤੋਂ ਪਹਿਲਾਂ, ਡੇਟਾ ਦੀ ਤਿਆਰੀ ਲਈ ਲੋੜੀਂਦਾ ਸਮਾਂ ਲੰਬਾ ਹੈ, ਡੇਟਾ ਸਰੋਤ ਖਿੰਡੇ ਹੋਏ ਹਨ, ਅਤੇ ਏਕੀਕਰਣ ਹੌਲੀ ਹੈ, ਸੈਂਕੜੇ ਟੈਰਾਬਾਈਟ ਡੇਟਾ ਦੀ ਪ੍ਰੀਪ੍ਰੋਸੈਸਿੰਗ ਲਈ ਲਗਭਗ 10 ਦਿਨ ਲੱਗਦੇ ਹਨ। ਦੂਜਾ, ਵਿਸ਼ਾਲ ਟੈਕਸਟ ਅਤੇ ਚਿੱਤਰ ਡੇਟਾਸੈਟਾਂ ਵਾਲੇ ਬਹੁ-ਮੋਡਲ ਵੱਡੇ ਮਾਡਲਾਂ ਲਈ, ਵੱਡੀਆਂ ਛੋਟੀਆਂ ਫਾਈਲਾਂ ਲਈ ਮੌਜੂਦਾ ਲੋਡਿੰਗ ਸਪੀਡ 100MB/s ਤੋਂ ਘੱਟ ਹੈ, ਨਤੀਜੇ ਵਜੋਂ ਸਿਖਲਾਈ ਸੈੱਟ ਲੋਡਿੰਗ ਲਈ ਘੱਟ ਕੁਸ਼ਲਤਾ ਹੈ। ਤੀਸਰਾ, ਅਸਥਿਰ ਸਿਖਲਾਈ ਪਲੇਟਫਾਰਮਾਂ ਦੇ ਨਾਲ-ਨਾਲ ਵੱਡੇ ਮਾਡਲਾਂ ਲਈ ਅਕਸਰ ਪੈਰਾਮੀਟਰ ਐਡਜਸਟਮੈਂਟ, ਲਗਭਗ ਹਰ 2 ਦਿਨਾਂ ਵਿੱਚ ਸਿਖਲਾਈ ਰੁਕਾਵਟਾਂ ਦਾ ਕਾਰਨ ਬਣਦੇ ਹਨ, ਇੱਕ ਦਿਨ ਵਿੱਚ ਰਿਕਵਰੀ ਦੇ ਨਾਲ, ਸਿਖਲਾਈ ਨੂੰ ਮੁੜ ਸ਼ੁਰੂ ਕਰਨ ਲਈ ਚੈਕਪੁਆਇੰਟ ਵਿਧੀ ਦੀ ਲੋੜ ਹੁੰਦੀ ਹੈ। ਅੰਤ ਵਿੱਚ, ਵੱਡੇ ਮਾਡਲਾਂ, ਗੁੰਝਲਦਾਰ ਸਿਸਟਮ ਸੈੱਟਅੱਪ, ਸਰੋਤ ਸਮਾਂ-ਸਾਰਣੀ ਚੁਣੌਤੀਆਂ, ਅਤੇ GPU ਸਰੋਤ ਉਪਯੋਗਤਾ ਲਈ ਉੱਚ ਲਾਗੂਕਰਨ ਥ੍ਰੈਸ਼ਹੋਲਡ ਅਕਸਰ 40% ਤੋਂ ਘੱਟ ਹੁੰਦਾ ਹੈ।
Huawei ਵੱਡੇ ਪੈਮਾਨੇ ਦੇ ਮਾਡਲਾਂ ਦੇ ਯੁੱਗ ਵਿੱਚ AI ਵਿਕਾਸ ਦੇ ਰੁਝਾਨ ਨਾਲ ਮੇਲ ਖਾਂਦਾ ਹੈ, ਵੱਖ-ਵੱਖ ਉਦਯੋਗਾਂ ਅਤੇ ਦ੍ਰਿਸ਼ਾਂ ਲਈ ਤਿਆਰ ਕੀਤੇ ਹੱਲ ਪੇਸ਼ ਕਰਦਾ ਹੈ। ਇਹ OceanStor A310 ਡੀਪ ਲਰਨਿੰਗ ਡਾਟਾ ਲੇਕ ਸਟੋਰੇਜ ਅਤੇ FusionCube A3000 ਟਰੇਨਿੰਗ/ਇਨਫਰੈਂਸ ਸੁਪਰ-ਕਨਵਰਜਡ ਐਪਲਾਇੰਸ ਪੇਸ਼ ਕਰਦਾ ਹੈ। OceanStor A310 ਡੀਪ ਲਰਨਿੰਗ ਡੇਟਾ ਲੇਕ ਸਟੋਰੇਜ ਬੁਨਿਆਦੀ ਅਤੇ ਉਦਯੋਗ-ਪੱਧਰ ਦੇ ਵੱਡੇ ਮਾਡਲ ਡੇਟਾ ਲੇਕ ਦ੍ਰਿਸ਼ਾਂ ਨੂੰ ਨਿਸ਼ਾਨਾ ਬਣਾਉਂਦਾ ਹੈ, ਡੇਟਾ ਏਕੀਕਰਣ ਤੋਂ ਵਿਆਪਕ AI ਡੇਟਾ ਪ੍ਰਬੰਧਨ, ਮਾਡਲ ਸਿਖਲਾਈ ਲਈ ਪ੍ਰੀਪ੍ਰੋਸੈਸਿੰਗ, ਅਤੇ ਅਨੁਮਾਨ ਐਪਲੀਕੇਸ਼ਨਾਂ ਨੂੰ ਪ੍ਰਾਪਤ ਕਰਦਾ ਹੈ। OceanStor A310, ਇੱਕ ਸਿੰਗਲ 5U ਰੈਕ ਵਿੱਚ, ਉਦਯੋਗ ਦੀ ਮੋਹਰੀ 400GB/s ਬੈਂਡਵਿਡਥ ਅਤੇ 12 ਮਿਲੀਅਨ IOPS ਤੱਕ, 4096 ਨੋਡਾਂ ਤੱਕ ਲੀਨੀਅਰ ਸਕੇਲੇਬਿਲਟੀ ਦੇ ਨਾਲ, ਸਹਿਜ ਕਰਾਸ-ਪ੍ਰੋਟੋਕੋਲ ਸੰਚਾਰ ਨੂੰ ਸਮਰੱਥ ਬਣਾਉਂਦਾ ਹੈ। ਗਲੋਬਲ ਫਾਈਲ ਸਿਸਟਮ (GFS) ਸਾਰੇ ਖੇਤਰਾਂ ਵਿੱਚ ਬੁੱਧੀਮਾਨ ਡੇਟਾ ਬੁਣਨ ਦੀ ਸਹੂਲਤ ਦਿੰਦਾ ਹੈ, ਡੇਟਾ ਏਗਰੀਗੇਸ਼ਨ ਪ੍ਰਕਿਰਿਆਵਾਂ ਨੂੰ ਸੁਚਾਰੂ ਬਣਾਉਂਦਾ ਹੈ। ਨਿਅਰ-ਸਟੋਰੇਜ ਕੰਪਿਊਟਿੰਗ ਨੇੜੇ-ਡਾਟਾ ਪ੍ਰੀ-ਪ੍ਰੋਸੈਸਿੰਗ, ਡੇਟਾ ਦੀ ਗਤੀ ਨੂੰ ਘਟਾਉਣ, ਅਤੇ ਪ੍ਰੀ-ਪ੍ਰੋਸੈਸਿੰਗ ਕੁਸ਼ਲਤਾ ਨੂੰ 30% ਤੱਕ ਸੁਧਾਰਦਾ ਹੈ।
FusionCube A3000 ਟਰੇਨਿੰਗ/ਇਨਫਰੈਂਸ ਸੁਪਰ-ਕਨਵਰਜਡ ਐਪਲਾਇੰਸ, ਉਦਯੋਗ-ਪੱਧਰ ਦੇ ਵੱਡੇ ਮਾਡਲ ਸਿਖਲਾਈ/ਅੰਤਰਾਲ ਦ੍ਰਿਸ਼ਾਂ ਲਈ ਤਿਆਰ ਕੀਤਾ ਗਿਆ ਹੈ, ਅਰਬਾਂ ਪੈਰਾਮੀਟਰਾਂ ਵਾਲੇ ਮਾਡਲਾਂ ਨੂੰ ਸ਼ਾਮਲ ਕਰਨ ਵਾਲੀਆਂ ਐਪਲੀਕੇਸ਼ਨਾਂ ਨੂੰ ਪੂਰਾ ਕਰਦਾ ਹੈ। ਇਹ OceanStor A300 ਉੱਚ-ਪ੍ਰਦਰਸ਼ਨ ਸਟੋਰੇਜ ਨੋਡਸ, ਸਿਖਲਾਈ/ਅੰਦਾਜ਼ਾ ਨੋਡਸ, ਸਵਿਚਿੰਗ ਉਪਕਰਣ, AI ਪਲੇਟਫਾਰਮ ਸੌਫਟਵੇਅਰ, ਅਤੇ ਪ੍ਰਬੰਧਨ ਅਤੇ ਸੰਚਾਲਨ ਸੌਫਟਵੇਅਰ ਨੂੰ ਏਕੀਕ੍ਰਿਤ ਕਰਦਾ ਹੈ, ਇੱਕ ਵਨ-ਸਟਾਪ ਡਿਲੀਵਰੀ ਲਈ ਇੱਕ ਪਲੱਗ-ਐਂਡ-ਪਲੇ ਤੈਨਾਤੀ ਅਨੁਭਵ ਦੇ ਨਾਲ ਵੱਡੇ ਮਾਡਲ ਭਾਈਵਾਲਾਂ ਨੂੰ ਪ੍ਰਦਾਨ ਕਰਦਾ ਹੈ। ਵਰਤਣ ਲਈ ਤਿਆਰ, ਇਸ ਨੂੰ 2 ਘੰਟਿਆਂ ਦੇ ਅੰਦਰ ਤੈਨਾਤ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਸਿਖਲਾਈ/ਅੰਦਾਜ਼ਾ ਅਤੇ ਸਟੋਰੇਜ ਨੋਡਾਂ ਨੂੰ ਵੱਖ-ਵੱਖ ਮਾਡਲ ਸਕੇਲ ਲੋੜਾਂ ਨਾਲ ਮੇਲ ਕਰਨ ਲਈ ਸੁਤੰਤਰ ਤੌਰ 'ਤੇ ਅਤੇ ਖਿਤਿਜੀ ਤੌਰ 'ਤੇ ਫੈਲਾਇਆ ਜਾ ਸਕਦਾ ਹੈ। ਇਸ ਦੌਰਾਨ, FusionCube A3000 ਉੱਚ-ਪ੍ਰਦਰਸ਼ਨ ਵਾਲੇ ਕੰਟੇਨਰਾਂ ਦੀ ਵਰਤੋਂ GPU ਨੂੰ ਸਾਂਝਾ ਕਰਨ ਲਈ ਮਲਟੀਪਲ ਮਾਡਲ ਸਿਖਲਾਈ ਅਤੇ ਅਨੁਮਾਨ ਕਾਰਜਾਂ ਨੂੰ ਸਮਰੱਥ ਬਣਾਉਣ ਲਈ ਕਰਦਾ ਹੈ, ਸਰੋਤ ਉਪਯੋਗਤਾ ਨੂੰ 40% ਤੋਂ ਵਧਾ ਕੇ 70% ਤੋਂ ਵੱਧ ਕਰਦਾ ਹੈ। FusionCube A3000 ਦੋ ਲਚਕਦਾਰ ਵਪਾਰਕ ਮਾਡਲਾਂ ਦਾ ਸਮਰਥਨ ਕਰਦਾ ਹੈ: Huawei Ascend One-Stop Solution ਅਤੇ ਤੀਜੀ-ਧਿਰ ਪਾਰਟਨਰ ਵਨ-ਸਟਾਪ ਹੱਲ ਓਪਨ ਕੰਪਿਊਟਿੰਗ, ਨੈੱਟਵਰਕਿੰਗ, ਅਤੇ AI ਪਲੇਟਫਾਰਮ ਸੌਫਟਵੇਅਰ ਨਾਲ।
ਹੁਆਵੇਈ ਦੇ ਡੇਟਾ ਸਟੋਰੇਜ ਉਤਪਾਦ ਲਾਈਨ ਦੇ ਪ੍ਰਧਾਨ, ਝੌ ਯੂਫੇਂਗ ਨੇ ਕਿਹਾ, “ਵੱਡੇ ਪੈਮਾਨੇ ਦੇ ਮਾਡਲਾਂ ਦੇ ਦੌਰ ਵਿੱਚ, ਡੇਟਾ AI ਇੰਟੈਲੀਜੈਂਸ ਦੀ ਉਚਾਈ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਦਾ ਹੈ। ਡੇਟਾ ਦੇ ਕੈਰੀਅਰ ਦੇ ਰੂਪ ਵਿੱਚ, ਡੇਟਾ ਸਟੋਰੇਜ AI ਵੱਡੇ ਪੈਮਾਨੇ ਦੇ ਮਾਡਲਾਂ ਲਈ ਮੁੱਖ ਬੁਨਿਆਦੀ ਢਾਂਚਾ ਬਣ ਜਾਂਦਾ ਹੈ। Huawei ਡਾਟਾ ਸਟੋਰੇਜ਼ ਨਵੀਨਤਾ ਕਰਨਾ ਜਾਰੀ ਰੱਖੇਗਾ, ਏਆਈ ਵੱਡੇ ਮਾਡਲਾਂ ਦੇ ਯੁੱਗ ਲਈ ਵਿਭਿੰਨ ਹੱਲ ਅਤੇ ਉਤਪਾਦ ਪ੍ਰਦਾਨ ਕਰੇਗਾ, ਉਦਯੋਗਾਂ ਦੀ ਇੱਕ ਵਿਸ਼ਾਲ ਸ਼੍ਰੇਣੀ ਵਿੱਚ AI ਸਸ਼ਕਤੀਕਰਨ ਨੂੰ ਚਲਾਉਣ ਲਈ ਭਾਈਵਾਲਾਂ ਨਾਲ ਸਹਿਯੋਗ ਕਰੇਗਾ।"
ਪੋਸਟ ਟਾਈਮ: ਅਗਸਤ-01-2023
