SQL 2014 CTP1. Hekaton & CSI Version 2 unter der Lupe. Sascha Götz Karlsruhe, 03. Dezember 2013

Transcription

1 Hekaton & CSI Version 2 unter der Lupe Sascha Götz Karlsruhe, 03. Dezember 2013

2 Most of today s database managers are built on the assumption that data lives on a disk, with little bits of data at a time loaded into memory for manipulation. There s a whole lot of infrastructure involved in paging those subsets of data in and out[ ] - Kevin Farlee, SQL Server program manager, Microsoft - 2

3 Hekaton 3

4 Query SQL Server Cache Disk-Based File group Memory-Optimized Memory Index Synchronisation Disk Disk (Memory Dump) Index Paging Locking 4

5 Filegroup hinzufügen ALTER DATABASE [AdventureWorksDW2012] ADD FILEGROUP [Hekaton_FG] CONTAINS MEMORY_OPTIMIZED_DATA GO Datafile hinzufügen ALTER DATABASE [AdventureWorksDW2012] ADD FILE ( NAME = N'Hekaton', FILENAME = N'C:\Hekaton.ndf') TO FILEGROUP [Hekaton_FG] GO 5

6 CREATE TABLE [dbo].[factinternetsales_hekaton] ( [ProductKey] [int] NOT NULL, [OrderDateKey] [int] NOT NULL, [...], ) WITH (MEMORY_OPTIMIZED = ON, DURABILITY = SCHEMA_AND_DATA) DURABILITY: SCHEMA_AND_DATA Schema und Daten werden mit Disk synchronisiert Speicherplatz wird im RAM und auf Disk benötigt SCHEMA_ONLY Nur Schema wird mit Disk synchronisiert 6

7 Natively Compiled Stored Procedure CREATE PROCEDURE <Schema_Name, sysname, dbo>.<procedure_name, sysname, Procedure_Name> -- Add the parameters for the stored procedure here [ ] WITH NATIVE_COMPILATION, SCHEMABINDING, EXECUTE AS OWNER AS BEGIN ATOMIC WITH --Insert statements for the stored procedure here [ ] END Nur Abfrage auf In-Memory Tabellen 7

8 Index Memory Optimized tables müssen mindestens einen Index haben (auf PK) Keine Clustered Indizes Indexe werden nur im Speicher gehalten Kein Index Drop, Rebuild Max. 8 Index pro Tabelle CI Date Date Non-CI I1 I2 I8 Date Order#

9 Limitations Keine Trigger Keine Foreign Key & Constraints Keine Identity columns Keine Schema changes (ALTER TABLE ) 9

10 Demo

11 Dauer in Sekunden SQL 2014 CTP Aggregierung (SUM & Group BY) über 2 Mio Datensätze Ohne Index On-Disk In-Memory 4 1 Non-Clustered Index 11

12 Dauer in Sekunden SQL 2014 CTP1 70 Update 2 Mio Datensätze On-Disk In-Memory In-Mermory + Natively Compiled 12

13 Dauer in Sekunden SQL 2014 CTP Mio. Datensätze Load On-Disk 1 In-Memory 13

14 Vorteile Performance Performance Performance Kritik Stabilität Speichermanagement Auslagerungs-Falle Fehlende Features (FKs, Identity Columns, Constraints) Bestehende Tabellen können nicht in die Hekaton Filegroup verschoben werden 14

15 Einsatzzweck DURABILITY: SCHEMA_ONLY ETL Load Tabelle Temp Tabellen DURABILITY: SCHEMA_AND_DATA Log-Tabellen 15

16 Columnstore Index Columnstore Index 2 16

17 Columnstore Index Non-Clustered Columnstore Index (SQL Server 2012) (+) Performance (+) Easy-To-Use (-) Read-Only Clustered Columnstore Index (SQL Server 2014 CTP 1) (+) Performance (+) Easy-To-Use (+) Updateable (-) Keine PK & FK (-) Keine Constraints 17

18 Dauer in Sekunden SQL 2014 CTP1 Columnstore Index 120 Aggregierung (SUM & Group BY) über 25 Mio Datensätze Ohne Index Non-Clustered Index Non-Clustered Columnstore Index Clustered Columnstore Index 18

19 Nicht möglich Dauer in Sekunden SQL 2014 CTP1 Columnstore Index 30 1 Mio. Datensätze Load Ohne Index Non-Clustered Index Non-Clustered Columnstore Index Clustered Columnstore Index 19

20 Columnstore Index Daten doch Laden bei Non-Clustered Columnstore Index? Drop, Load and Rebuild Drop Load Build Partition Swap Split Load Build Swap Szenario: 25 Mio Datensätze, Non-Clustered CSI, 1 Mio Datensätze Load 20

21 Columnstore Index HowTo: Partition Swapping Tabelle partitionieren Leere Partitionen Load in Temp laden Partition Split CSI Index erstellen Switch CSI Facts < > >

22 Dauer in Sekunden Drop & Rebuild SQL 2014 CTP1 Columnstore Index Mio. Datensätze Load Partition Swap 0 Ohne Index Non-Clustered Index Non-Clustered CSI Non-Clustered CSI2 Clustered Columnstore Index 22

23 Columnstore Index Fazit Query-Performance: Gigantisch Load-Performance: Mäßig bis Schlecht Nachteile: Vorhanden Einsatzzweck: Non-Clustered CSI BI Fact tables mit daily/nightly Loads Partition Swap oder Index Rebuild Clustered CSI Log Tabellen Solo -Tabellen (ohne PK /FK) 23

24 Fragen? 24

25 Ressources SQL Server Hekaton CTP1 White Paper A6D097A64805/SQL_Server_Hekaton_CTP1_White_Paper.pdf