Scala est un langage de programmation à usage général ciblant principalement la machine virtuelle Java. Conçu pour exprimer des modèles de programmation courants d'une manière concise, élégante et sécurisée, il fusionne les styles de programmation impératifs et fonctionnels. Ses principales caractéristiques sont: un système avancé de type statique avec inférence de type; types de fonction; correspondance de motifs; paramètres implicites et conversions; surcharge de l'opérateur; interopérabilité totale avec Java; concurrence
J'utilise spark avec Scala pour transformer un Dataframe, où je voudrais calculer une nouvelle variable qui calcule le rang d'une variable par ligne dans de nombreuses variables. Exempl ...
J'essaie de me connecter depuis Spark (fonctionnant sur mon PC) à mon compartiment S3: sc.hadoopConfiguration.set("fs.s3a.endpoint", "s3.eu-central-1.amazonaws.com")
Mais j'o ...
J'ai trois colonnes dans mon bloc de données. Dans ce deuxième et troisième sont des champs booléens. Je veux filtrer les valeurs qui sont vraies. J'ai essayé ce ...
J'ai 2 grands ensembles de données.
Le premier ensemble de données contient environ 130 millions d'entrées.
Le deuxième ensemble de données contient environ ...
