Databricks (SPARK) : réparer toutes les tables partitionnées d’un seul coup

Si vous avez des tables partitionnées dans votre metastore HIVE-Spark et que vos données sont écrites sur le stockage dans des sous-répertoires partitionnées (/<pathToTable>/<partitionName>=<value>/) par un autre traitement que Spark ou Hive (Azure Stream Analytics, Event Hub, Azure Function ….), par exemple : /logs/day=2019-08-10/ /logs/day=2019-08-11/ … Les tables partitionnées ne verront pas les données des […]

Read more Databricks (SPARK) : réparer toutes les tables partitionnées d’un seul coup

Power BI + Elasticsearch !!

Elasticsearch est un moteur open source NoSQL proposé par l’entreprise Elastic basé sur la technologie Apache Lucene : https://www.elastic.co/fr/products/elasticsearch Il est très simple à installer et à utiliser. Si vous ne connaissez pas du tout Elastisearch, n’hésitez pas à suivre ce rapide tuto avant de continuer cet article : http://joelabrahamsson.com/elasticsearch-101/ Pour résumer, Elasticsearch permet de […]

Read more Power BI + Elasticsearch !!

Afficher un message d’erreur personnalisé dans la visualisation R de Power BI

Par défaut dans Power BI, lorsqu’un élément visuel de script R plante, un message d’erreur apparaît dans la zone du graphique avec la possibilité d’afficher les détails techniques de l’erreur : Cela peut être pratique pour débugger son code R lors du développement du rapport. Mais dans certains cas, les graphiques R peuvent fonctionner sur […]

Read more Afficher un message d’erreur personnalisé dans la visualisation R de Power BI

Afficher une simple table dans la visualisation R de Power BI

Pour afficher une table avec notre jeu de données, il est possible d’utiliser le package R gridExtra et sa fonction grid.table(). C’est très simple à utiliser, il suffit de créer un élément visuel de script R, faire glisser les champs du modèle dans l’élément, puis de copier les lignes de code suivantes dans la partie […]

Read more Afficher une simple table dans la visualisation R de Power BI

Utiliser un model ML entrainé en R avec PowerBI

Cet article fait suite au précédent article dans lequel j’explique comment envoyer un model entrainé dans Azure ML. Le principe sera plus ou moins le même ici sauf qu’il s’applique cette fois-ci à Power BI . Nous allons donc tout d’abord créer un modèle entrainé en R et l’enregistrer sur le disque. Reprenons par exemple […]

Read more Utiliser un model ML entrainé en R avec PowerBI

Lancer un Batch Azure ML en PowerShell

Dans Azure ML, lorsque l’on veut scorer un important jeu de données de façon automatisé, il est recommandé d’utiliser le web service en mode “Batch”, plutôt que le mode “Request” (qui engendre beaucoup trop d’appel). La documentation des web services propose des exemples de codes en C#, R et Python… ce qui est très bien. […]

Read more Lancer un Batch Azure ML en PowerShell

Petit test d’incrustation d’un rapport Power BI

Depuis quelques jours, il est possible de partager ses rapports Power BI sur le web, cf. le lien suivant qui vous explique comment faire exactement : https://powerbi.microsoft.com/fr-fr/documentation/powerbi-service-publish-to-web/ Cette fonctionnalité est en preview et ne semble pas être activée pour les comptes trial. Voila ce que ca donne :

Read more Petit test d’incrustation d’un rapport Power BI

Correspondances entre SQL et R

Je ne sais pas si vous avez remarqué, mais le langage R commence à apparaître vraiment partout dans l’écosystème Microsoft depuis le rachat de Revolution Analytics : Power BI Desktop, SQL Server 2016, Azure ML… Si vous êtes consultant BI, Data Analyste… plutôt à l’aise avec le SQL, et que vous vous intéressez au R, […]

Read more Correspondances entre SQL et R

Comment envoyer un modèle déjà entrainé dans Azure ML et l’utiliser via Web Service

Le contexte de cet article est le suivant : Vous voulez utiliser un modèle entrainé (de type classification, régression…) via un web service d’Azure ML Vous avez des données sensibles TOP SECRET et vous ne voulez pas les envoyer dans le cloud Azure Il existe alors une solution pour vous si vous vous s’y connaissez […]

Read more Comment envoyer un modèle déjà entrainé dans Azure ML et l’utiliser via Web Service

Liaison directe entre Power Query et Power Pivot avec Excel 2010

Pour info, cet article est un repost de l’article que j’ai écrit il y a quelques mois sur le blog de Jean-Pierre Riehl : http://blog.djeepy1.net/2015/03/18/liaison-directe-entre-power-query-et-power-pivot-avec-excel-2010/ Power BI étant un des meilleurs outils de self-service BI, il est assez rare de travailler chez des clients possédant déjà des licences Excel 2013 voir Office 365 + Power […]

Read more Liaison directe entre Power Query et Power Pivot avec Excel 2010

Newer posts