廣播變量是一種分布式共享變量,用于在集群中的所有節點上保持一份只讀的變量副本。這樣可以在所有節點上使用同一個變量,避免在每個任務中都復制一份變量的開銷,提高性能并減少內存占用。廣播變量在Spark中是只讀的,一旦廣播變量被創建后,它的值就不能被修改。廣播變量通常用于將較大的數據集或模型參數廣播到所有節點上,以便在計算過程中使用。
億速云公眾號
手機網站二維碼
Copyright ? Yisu Cloud Ltd. All Rights Reserved. 2018 版權所有
廣州億速云計算有限公司粵ICP備17096448號-1 粵公網安備 44010402001142號增值電信業務經營許可證編號:B1-20181529