1.scala中模式匹配 2.spark源码中的模式匹配思考 spark中master会收到worker发过来的akka的消息, 此消息是case class即(Master.class中): case class RegisterWorker(id:String,host:String,port:Int,cores:Int,memory:Int,webUiPort:int
val定义常量 var定义变量 def定义方法/函数 _在方法中表示参数占位符,功能类似于java方法的重载 =>是参数列表和返回值的分隔符 不定参数在参数后加* 特质(Traits)特质是一些字段和行为的集合,可以扩展或混入(mixin)你的类中。 trait Car {val brand: String} class BMW extends Car with Sh
在Spark中,目前包括的神经网络方面的算法仅有MLPC,即MultilayerPerceptronClassifier(多层感知分类器)。它在MLlib的Classification and regression(分类与回归)中。MLPC是基于前馈人工神经网络(ANN)的分类器,属于全连接神经网络,其中隐藏层的激活函数是sigmoid函数,输出层是softmax函数。关于MLPC的原理,网络上有