《算法平台架构与应用onmaxcompute》由会员分享，可在线阅读，更多相关《算法平台架构与应用onmaxcompute（27页珍藏版）》请在金锄头文库上搜索。
1、? On MaxCompute ? ? ? ? ? 1? 2? 3? MaxCompute-? ? MaxCompute ? ? ? ? ? ? ? ? ? ? ? ? Ali ba ba. co m 16 88 .c o m Ali ex pr es s ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? UC ? ?99.9%? ? ? ? ? ? ? ? EB ? ? ? ?|?| ? BI ? ? ? ? MaxCompute-All in One Box SQL RESTful API/SDK/Web IDE/PAI MRMPIPluto Te
2、nsor- Flow BI ? MaxCompute-Data Store & Task Plugin Engine AliCloud OS? Cluster -1 10000 X86 Servers Cluster -2 10000 X86 Servers Cluster -N 10000 X86 Servers ? ? ? ? ? ? ? ? ? 1? 2? 3? ? ? Project-? Project2 Project3 Project4 Project 1 ? ? ? ? ? Project? ?project? Project?Oracle?schema? MySQL?datab
3、ase ? project ?Project? ? ?Quota?project? ? ? MaxCompute ? ? ? KV? Map? SQL select? ? OSS? Cfile ? ? ? ? ? ? ? ? ? ? MPI ? ? MPI ? MPI ? ? ? Pluto-Caffe ? Why OpenMPI? ?IB?GPU? TensorFlow On MaxCompute Python SDK MaxCompute Service TF Task ? ? ? ? ? ? ? ? ? ? ? ? ? ? TF Task TF Task import odpsutil
4、import tensorflow as tf with tf.device(“/jobs:ps/task:0/cpu:0”): a=tf.constant() b=tf.constant() with tf.device(“job:worker/task:0/gpu:0”): c=tf.matul(a,b) config=tf.ConfigProto() with tf.train.odpsClusterManager() as trainer: print “running” ?CPU/GPU? BEGINSQL(C)MR(C)ENDCNN(G)RNN(G) Job DAG ?Action? ?Job XML? tag ? ?-PAI 开发流程 数据预处理 数据 特征工程 机器学习模型训练 模型评估 离线/在线服务学习 ? ? 1? 2? 3? ?MPI? OCR-? ? ? ? ? ? ? ? ? ?-? ? ?A834M1(?) ?AF7945(?) ?A0928?(?) ?AN2197(?) ?A967W0(?) ?AJ9075(?) ? ? ? ? PK ?50? ? ?5? 94% ? 6% ? ? ?96.2% ?105? ?
