Huawei ಬಿಗ್ ಮಾಡೆಲ್‌ಗಳ ಯುಗದಲ್ಲಿ ಹೊಸ AI ಶೇಖರಣಾ ಉತ್ಪನ್ನಗಳನ್ನು ಪ್ರಕಟಿಸಿದೆ

[ಚೀನಾ, ಶೆನ್‌ಜೆನ್, ಜುಲೈ 14, 2023] ಇಂದು, Huawei ತನ್ನ ಹೊಸ AI ಶೇಖರಣಾ ಪರಿಹಾರವನ್ನು ದೊಡ್ಡ-ಪ್ರಮಾಣದ ಮಾದರಿಗಳ ಯುಗಕ್ಕೆ ಅನಾವರಣಗೊಳಿಸಿದೆ, ಮೂಲಭೂತ ಮಾದರಿ ತರಬೇತಿ, ಉದ್ಯಮ-ನಿರ್ದಿಷ್ಟ ಮಾದರಿ ತರಬೇತಿ ಮತ್ತು ವಿಭಜಿತ ಸನ್ನಿವೇಶಗಳಲ್ಲಿ ತೀರ್ಮಾನಕ್ಕೆ ಸೂಕ್ತವಾದ ಶೇಖರಣಾ ಪರಿಹಾರಗಳನ್ನು ಒದಗಿಸುತ್ತದೆ. ಹೊಸ AI ಸಾಮರ್ಥ್ಯಗಳನ್ನು ಬಿಡುಗಡೆ ಮಾಡುವುದು.

ದೊಡ್ಡ ಪ್ರಮಾಣದ ಮಾದರಿ ಅನ್ವಯಗಳ ಅಭಿವೃದ್ಧಿ ಮತ್ತು ಅನುಷ್ಠಾನದಲ್ಲಿ, ಉದ್ಯಮಗಳು ನಾಲ್ಕು ಪ್ರಮುಖ ಸವಾಲುಗಳನ್ನು ಎದುರಿಸುತ್ತವೆ:

ಮೊದಲನೆಯದಾಗಿ, ಡೇಟಾ ತಯಾರಿಕೆಗೆ ಬೇಕಾಗುವ ಸಮಯವು ದೀರ್ಘವಾಗಿರುತ್ತದೆ, ಡೇಟಾ ಮೂಲಗಳು ಚದುರಿಹೋಗಿವೆ ಮತ್ತು ಒಟ್ಟುಗೂಡಿಸುವಿಕೆಯು ನಿಧಾನವಾಗಿರುತ್ತದೆ, ನೂರಾರು ಟೆರಾಬೈಟ್‌ಗಳ ಡೇಟಾವನ್ನು ಪೂರ್ವಭಾವಿಯಾಗಿ ಪ್ರಕ್ರಿಯೆಗೊಳಿಸಲು ಸುಮಾರು 10 ದಿನಗಳನ್ನು ತೆಗೆದುಕೊಳ್ಳುತ್ತದೆ. ಎರಡನೆಯದಾಗಿ, ಬೃಹತ್ ಪಠ್ಯ ಮತ್ತು ಇಮೇಜ್ ಡೇಟಾಸೆಟ್‌ಗಳನ್ನು ಹೊಂದಿರುವ ಬಹು-ಮಾದರಿ ದೊಡ್ಡ ಮಾದರಿಗಳಿಗೆ, ಬೃಹತ್ ಸಣ್ಣ ಫೈಲ್‌ಗಳಿಗೆ ಪ್ರಸ್ತುತ ಲೋಡಿಂಗ್ ವೇಗವು 100MB/s ಗಿಂತ ಕಡಿಮೆಯಿರುತ್ತದೆ, ಇದು ತರಬೇತಿ ಸೆಟ್ ಲೋಡಿಂಗ್‌ಗೆ ಕಡಿಮೆ ದಕ್ಷತೆಗೆ ಕಾರಣವಾಗುತ್ತದೆ. ಮೂರನೆಯದಾಗಿ, ದೊಡ್ಡ ಮಾದರಿಗಳಿಗೆ ಆಗಾಗ್ಗೆ ಪ್ಯಾರಾಮೀಟರ್ ಹೊಂದಾಣಿಕೆಗಳು, ಅಸ್ಥಿರ ತರಬೇತಿ ವೇದಿಕೆಗಳ ಜೊತೆಗೆ, ಸುಮಾರು 2 ದಿನಗಳಿಗೊಮ್ಮೆ ತರಬೇತಿ ಅಡಚಣೆಗಳನ್ನು ಉಂಟುಮಾಡುತ್ತದೆ, ತರಬೇತಿಯನ್ನು ಪುನರಾರಂಭಿಸಲು ಚೆಕ್‌ಪಾಯಿಂಟ್ ಕಾರ್ಯವಿಧಾನದ ಅಗತ್ಯವಿರುತ್ತದೆ, ಚೇತರಿಕೆ ಒಂದು ದಿನದಲ್ಲಿ ತೆಗೆದುಕೊಳ್ಳುತ್ತದೆ. ಕೊನೆಯದಾಗಿ, ದೊಡ್ಡ ಮಾದರಿಗಳಿಗೆ ಹೆಚ್ಚಿನ ಅನುಷ್ಠಾನದ ಮಿತಿಗಳು, ಸಂಕೀರ್ಣ ಸಿಸ್ಟಮ್ ಸೆಟಪ್, ಸಂಪನ್ಮೂಲ ವೇಳಾಪಟ್ಟಿ ಸವಾಲುಗಳು ಮತ್ತು GPU ಸಂಪನ್ಮೂಲ ಬಳಕೆ ಸಾಮಾನ್ಯವಾಗಿ 40% ಕ್ಕಿಂತ ಕಡಿಮೆ.

Huawei ದೊಡ್ಡ-ಪ್ರಮಾಣದ ಮಾದರಿಗಳ ಯುಗದಲ್ಲಿ AI ಅಭಿವೃದ್ಧಿಯ ಪ್ರವೃತ್ತಿಯೊಂದಿಗೆ ಹೊಂದಾಣಿಕೆ ಮಾಡುತ್ತಿದೆ, ವಿವಿಧ ಕೈಗಾರಿಕೆಗಳು ಮತ್ತು ಸನ್ನಿವೇಶಗಳಿಗೆ ಅನುಗುಣವಾಗಿ ಪರಿಹಾರಗಳನ್ನು ನೀಡುತ್ತದೆ. ಇದು OceanStor A310 ಡೀಪ್ ಲರ್ನಿಂಗ್ ಡೇಟಾ ಲೇಕ್ ಸ್ಟೋರೇಜ್ ಮತ್ತು FusionCube A3000 ಟ್ರೈನಿಂಗ್/ಇನ್ಫರೆನ್ಸ್ ಸೂಪರ್-ಕನ್ವರ್ಜ್ಡ್ ಅಪ್ಲೈಯನ್ಸ್ ಅನ್ನು ಪರಿಚಯಿಸುತ್ತದೆ. OceanStor A310 ಡೀಪ್ ಲರ್ನಿಂಗ್ ಡೇಟಾ ಲೇಕ್ ಸ್ಟೋರೇಜ್ ಮೂಲಭೂತ ಮತ್ತು ಉದ್ಯಮ-ಮಟ್ಟದ ದೊಡ್ಡ ಮಾದರಿ ಡೇಟಾ ಲೇಕ್ ಸನ್ನಿವೇಶಗಳನ್ನು ಗುರಿಯಾಗಿಸುತ್ತದೆ, ಡೇಟಾ ಒಟ್ಟುಗೂಡಿಸುವಿಕೆಯಿಂದ ಸಮಗ್ರ AI ಡೇಟಾ ನಿರ್ವಹಣೆಯನ್ನು ಸಾಧಿಸುವುದು, ಮಾದರಿ ತರಬೇತಿಗೆ ಪೂರ್ವ ಸಂಸ್ಕರಣೆ, ಮತ್ತು ತೀರ್ಮಾನ ಅಪ್ಲಿಕೇಶನ್‌ಗಳು. OceanStor A310, ಒಂದೇ 5U ರ್ಯಾಕ್‌ನಲ್ಲಿ, ಉದ್ಯಮ-ಪ್ರಮುಖ 400GB/s ಬ್ಯಾಂಡ್‌ವಿಡ್ತ್ ಮತ್ತು 12 ಮಿಲಿಯನ್ IOPS ವರೆಗೆ, 4096 ನೋಡ್‌ಗಳವರೆಗಿನ ರೇಖೀಯ ಸ್ಕೇಲೆಬಿಲಿಟಿಯೊಂದಿಗೆ, ತಡೆರಹಿತ ಕ್ರಾಸ್-ಪ್ರೋಟೋಕಾಲ್ ಸಂವಹನವನ್ನು ಸಕ್ರಿಯಗೊಳಿಸುತ್ತದೆ. ಗ್ಲೋಬಲ್ ಫೈಲ್ ಸಿಸ್ಟಮ್ (GFS) ಪ್ರದೇಶಗಳಾದ್ಯಂತ ಬುದ್ಧಿವಂತ ಡೇಟಾ ನೇಯ್ಗೆಯನ್ನು ಸುಗಮಗೊಳಿಸುತ್ತದೆ, ಡೇಟಾ ಒಟ್ಟುಗೂಡಿಸುವ ಪ್ರಕ್ರಿಯೆಗಳನ್ನು ಸುಗಮಗೊಳಿಸುತ್ತದೆ. ನಿಯರ್-ಸ್ಟೋರೇಜ್ ಕಂಪ್ಯೂಟಿಂಗ್ ಹತ್ತಿರ-ಡೇಟಾ ಪೂರ್ವ ಸಂಸ್ಕರಣೆಯನ್ನು ಅರಿತುಕೊಳ್ಳುತ್ತದೆ, ಡೇಟಾ ಚಲನೆಯನ್ನು ಕಡಿಮೆ ಮಾಡುತ್ತದೆ ಮತ್ತು 30% ರಷ್ಟು ಪ್ರಿಪ್ರೊಸೆಸಿಂಗ್ ದಕ್ಷತೆಯನ್ನು ಸುಧಾರಿಸುತ್ತದೆ.

FusionCube A3000 ಟ್ರೈನಿಂಗ್/ಇನ್ಫರೆನ್ಸ್ ಸೂಪರ್-ಕನ್ವರ್ಜ್ಡ್ ಅಪ್ಲೈಯನ್ಸ್, ಉದ್ಯಮ-ಮಟ್ಟದ ದೊಡ್ಡ ಮಾದರಿ ತರಬೇತಿ/ಅನುಮಾನ ಸನ್ನಿವೇಶಗಳಿಗಾಗಿ ವಿನ್ಯಾಸಗೊಳಿಸಲಾಗಿದೆ, ಶತಕೋಟಿ ಪ್ಯಾರಾಮೀಟರ್‌ಗಳೊಂದಿಗೆ ಮಾದರಿಗಳನ್ನು ಒಳಗೊಂಡಿರುವ ಅಪ್ಲಿಕೇಶನ್‌ಗಳನ್ನು ಪೂರೈಸುತ್ತದೆ. ಇದು OceanStor A300 ಹೈ-ಪರ್ಫಾರ್ಮೆನ್ಸ್ ಸ್ಟೋರೇಜ್ ನೋಡ್‌ಗಳು, ಟ್ರೈನಿಂಗ್/ಇನ್‌ಫರೆನ್ಸ್ ನೋಡ್‌ಗಳು, ಸ್ವಿಚಿಂಗ್ ಉಪಕರಣಗಳು, AI ಪ್ಲಾಟ್‌ಫಾರ್ಮ್ ಸಾಫ್ಟ್‌ವೇರ್ ಮತ್ತು ಮ್ಯಾನೇಜ್‌ಮೆಂಟ್ ಮತ್ತು ಆಪರೇಷನ್ ಸಾಫ್ಟ್‌ವೇರ್ ಅನ್ನು ಸಂಯೋಜಿಸುತ್ತದೆ, ಇದು ಒಂದು-ನಿಲುಗಡೆ ವಿತರಣೆಗಾಗಿ ಪ್ಲಗ್-ಅಂಡ್-ಪ್ಲೇ ನಿಯೋಜನೆಯ ಅನುಭವದೊಂದಿಗೆ ದೊಡ್ಡ ಮಾದರಿ ಪಾಲುದಾರರನ್ನು ಒದಗಿಸುತ್ತದೆ. ಬಳಸಲು ಸಿದ್ಧವಾಗಿದೆ, ಇದನ್ನು 2 ಗಂಟೆಗಳ ಒಳಗೆ ನಿಯೋಜಿಸಬಹುದು. ತರಬೇತಿ/ಊಹೆ ಮತ್ತು ಶೇಖರಣಾ ನೋಡ್‌ಗಳೆರಡನ್ನೂ ಸ್ವತಂತ್ರವಾಗಿ ಮತ್ತು ಅಡ್ಡಡ್ಡಲಾಗಿ ವಿವಿಧ ಮಾದರಿ ಪ್ರಮಾಣದ ಅವಶ್ಯಕತೆಗಳನ್ನು ಹೊಂದಿಸಲು ವಿಸ್ತರಿಸಬಹುದು. ಏತನ್ಮಧ್ಯೆ, FusionCube A3000 GPU ಗಳನ್ನು ಹಂಚಿಕೊಳ್ಳಲು ಬಹು ಮಾದರಿ ತರಬೇತಿ ಮತ್ತು ನಿರ್ಣಯ ಕಾರ್ಯಗಳನ್ನು ಸಕ್ರಿಯಗೊಳಿಸಲು ಉನ್ನತ-ಕಾರ್ಯಕ್ಷಮತೆಯ ಕಂಟೈನರ್‌ಗಳನ್ನು ಬಳಸುತ್ತದೆ, ಸಂಪನ್ಮೂಲ ಬಳಕೆಯನ್ನು 40% ರಿಂದ 70% ಕ್ಕಿಂತ ಹೆಚ್ಚು ಹೆಚ್ಚಿಸುತ್ತದೆ. FusionCube A3000 ಎರಡು ಹೊಂದಿಕೊಳ್ಳುವ ವ್ಯಾಪಾರ ಮಾದರಿಗಳನ್ನು ಬೆಂಬಲಿಸುತ್ತದೆ: Huawei Ascend One-Stop Solution ಮತ್ತು ಥರ್ಡ್-ಪಾರ್ಟಿ ಪಾರ್ಟ್ನರ್ ಒನ್-ಸ್ಟಾಪ್ ಪರಿಹಾರದೊಂದಿಗೆ ಓಪನ್ ಕಂಪ್ಯೂಟಿಂಗ್, ನೆಟ್‌ವರ್ಕಿಂಗ್ ಮತ್ತು AI ಪ್ಲಾಟ್‌ಫಾರ್ಮ್ ಸಾಫ್ಟ್‌ವೇರ್.

Huawei ನ ಡೇಟಾ ಸ್ಟೋರೇಜ್ ಪ್ರಾಡಕ್ಟ್ ಲೈನ್‌ನ ಅಧ್ಯಕ್ಷ ಝೌ ಯುಫೆಂಗ್, "ದೊಡ್ಡ ಪ್ರಮಾಣದ ಮಾದರಿಗಳ ಯುಗದಲ್ಲಿ, ಡೇಟಾವು AI ಬುದ್ಧಿವಂತಿಕೆಯ ಎತ್ತರವನ್ನು ನಿರ್ಧರಿಸುತ್ತದೆ. ಡೇಟಾದ ವಾಹಕವಾಗಿ, ಡೇಟಾ ಸಂಗ್ರಹಣೆಯು AI ದೊಡ್ಡ-ಪ್ರಮಾಣದ ಮಾದರಿಗಳಿಗೆ ಪ್ರಮುಖ ಮೂಲಭೂತ ಮೂಲಸೌಕರ್ಯವಾಗುತ್ತದೆ. Huawei ಡೇಟಾ ಸಂಗ್ರಹಣೆಯು ಹೊಸತನವನ್ನು ಮುಂದುವರೆಸುತ್ತದೆ, AI ದೊಡ್ಡ ಮಾದರಿಗಳ ಯುಗಕ್ಕೆ ವೈವಿಧ್ಯಮಯ ಪರಿಹಾರಗಳು ಮತ್ತು ಉತ್ಪನ್ನಗಳನ್ನು ಒದಗಿಸುತ್ತದೆ, ವ್ಯಾಪಕ ಶ್ರೇಣಿಯ ಕೈಗಾರಿಕೆಗಳಲ್ಲಿ AI ಸಬಲೀಕರಣವನ್ನು ಹೆಚ್ಚಿಸಲು ಪಾಲುದಾರರೊಂದಿಗೆ ಸಹಕರಿಸುತ್ತದೆ.