Microsoft Spark 3.0-connector voor SQL Server is algemeen beschikbaar
Microsoft kondigt de beschikbaarheid aan van de Apache Spark 3.0-compatibele Apache Spark Connector voor SQL Server en Azure SQL, die toegankelijk is via Maven.De Spark 3.0-compatibele connector ging begin dit jaar in preview.
De Apache Spark Connector voor SQL Server is een connector waarmee gebruikers transactiegegevens kunnen gebruiken in big data-analyses en resultaten kunnen behouden voor ad-hocquery's of rapportage. Hiermee kunt de beheerder SQL Server of Azure SQL gebruiken als invoergegevensbronnen of uitvoergegevenssinks voor Spark-taken. Het biedt bulksgewijs invoegen van gegevens in de database en kan rij-voor-rij invoeging overtreffen met 10 tot 20 keer snellere prestaties, in vergelijking met alleen Java Database Connectivity (JDBC).
Bovendien kunnen klanten deze connector gebruiken om machine learning-modellen van SQL Server Machine Learning Services te scoren, of resultaten in SQL te scoren nadat ze machine learning in Spark hebben gedaan.