innodb_file_format बाराकुडा


25

मेरे पास उन कुछ परिचितों के लिए कुछ प्रश्न हैं। मेरे अधिकांश उदाहरण बर्रेकुडा के समर्थन के बावजूद एंटेलोप चला रहे हैं।

मैं कुछ सेकेंड इनसोड टेबल के साथ खेलना चाह रहा था। मेरी समझ यह केवल बाराकुडा प्रारूप के तहत उपलब्ध है।

  1. मुझे लगता है कि innodb_file_format गतिशील है इसलिए मैं बस एक उछाल के साथ स्विच कर सकता हूं। क्या ऐसा करने के कोई निहितार्थ हैं जिनसे मुझे अवगत होना चाहिए। मैं केवल इतना बता सकता हूं कि उस प्रारूप के साथ नई तालिकाएँ या बाद में बदल दी जाएंगी। क्या यह सब सही है?
  2. मैं उम्मीद कर रहा था कि मैं अपने सभी तालिकाओं को नहीं बदलूंगा। क्या कोषेर के पास मृग और बराकुडे तालिकाओं का तालमेल एक ही तालिकाओं में है? यहां तक ​​कि अगर यह काम करता है वहाँ किसी भी gotcha के लिए बाहर देखने के लिए है?

मैंने अपने परीक्षणों से जो कुछ पढ़ा और इकट्ठा किया, उसके उत्तर हैं: हाँ। हाँ। मुझे यकीन नहीं है।

अद्यतन करें

मैं w / कुछ गतिशील और कुछ संपीड़ित तालिका विभिन्न उदाहरणों में इस मुद्दे के साथ पोस्ट के बाद से चला रहा हूं। इसके अलावा मैंने उस समय http://dev.mysql.com/doc/refman/5.5/en/innodb-file-format-identifying.html पढ़ने की उपेक्षा की ।

किसी दिए गए innodb_file_format को सक्षम करने के बाद, यह परिवर्तन मौजूदा वाले के बजाय केवल नए बनाए गए तालिकाओं पर लागू होता है। यदि आप एक नई तालिका बनाते हैं, तो तालिका वाले टेबलस्पेस को "सबसे पहले" या "सरलतम" फ़ाइल स्वरूप के साथ टैग किया जाता है जो तालिका की सुविधाओं के लिए आवश्यक है। उदाहरण के लिए, यदि आप फ़ाइल स्वरूप बर्राकुडा को सक्षम करते हैं, और एक नई तालिका बनाते हैं जो संपीड़ित नहीं होती है और ROW_FORMAT = डायनामिक का उपयोग नहीं करती है, तो तालिका में फ़ाइल तालमेल एंटीलोप का उपयोग करते हुए तालिका के रूप में चिह्नित किया गया नया टेबलस्पेस।

तो टेबल को एंटेलोप के रूप में बनाया जाएगा भले ही आप बाराकुडा की अनुमति दें। मिश्रण अपरिहार्य है जब तक कि आप प्रत्येक तालिका को row_format गतिशील या संपीड़ित तालिका के रूप में निर्दिष्ट न करें।

ऐसा कोई संकेत नहीं है कि आपको अपना पहला बाराकुडा टेबल पेश करते समय एक पूर्ण डंप और पुनः लोड करना चाहिए (जैसे कि mysql के प्रमुख संस्करणों को अपग्रेड करते समय अनुशंसित किया गया है )

जवाबों:


18

इसलिए मैं लगभग 4 साल देर से इस सवाल का जवाब दे रहा हूं:

  • InnoDB फ़ाइल स्वरूपों की कल्पना ऐसे समय में की गई जब InnoDB MySQL सर्वर से स्वतंत्र था (उदाहरण के लिए: MySQL 5.1 InnoDB के दो अलग-अलग संस्करण चला सकता था)।

  • कारण यह है कि आप बाराकुडा (2012 में) क्यों नहीं चलाना चाहेंगे कि यह MySQL के उन्नयन में लचीलापन कम कर सकता है (यानी एक असफल उन्नयन के बाद, आप एक ऐसे संस्करण में वापस जाना चाहते हैं जो एक नया प्रारूप नहीं पढ़ सकता है)। यानी कोई तकनीकी कारण नहीं होना चाहिए कि एंटीलोप बेहतर क्यों है।

  • MySQL 5.7 में innodb_file_formatविकल्प को हटा दिया गया था। चूंकि MySQL और InnoDB अब स्वतंत्र नहीं हैं, और इस प्रकार InnoDB उन्नयन के MySQL नियमों का उपयोग कर सकता है और पीछे की संगतता की आवश्यकता है। कोई भ्रामक सेटिंग की आवश्यकता नहीं है!

  • MySQL 5.7 में, डिफ़ॉल्ट पर स्विच किया गया Barracuda/DYNAMIC। चूंकि MySQL के सभी वर्तमान में समर्थित रिलीज़ इस प्रारूप को पढ़ सकते हैं, इसलिए एंटीलोप से दूर जाना और अभी भी डाउनग्रेड की पेशकश करना सुरक्षित है।

  • MySQL 5.7 सर्वर पर, एंटेलोप टेबल को Barracuda/DYNAMICअगले टेबल पुनर्निर्माण (ऑप्टिमाइज़ टेबल आदि) पर अपग्रेड किया जाएगा । जब तक कि उन्हें विशेष रूप से बनाया नहीं गया था ROW_FORMAT=oldrowformat

  • MySQL 8.0 में, विकल्प innodb_file_formatको हटा दिया जाता है।


MySQL 5.7 भी विकल्प काinnodb_default_row_format परिचय देता है , जो डायनामिक को चूकता है। यह आपके अपडेट में बिंदु को संबोधित करता है।


11
Just give a try!!!

mysql> select version();
+------------+
| version()  |
+------------+
| 5.5.21-log |
+------------+
1 row in set (0.00 sec)

mysql> show variables like "%innodb_file%";
+--------------------------+----------+
| Variable_name            | Value    |
+--------------------------+----------+
| innodb_file_format       | Antelope |
| innodb_file_format_check | ON       |
| innodb_file_format_max   | Antelope |
| innodb_file_per_table    | ON       |
+--------------------------+----------+
4 rows in set (0.00 sec)

mysql> SET GLOBAL innodb_file_format = barracuda;
Query OK, 0 rows affected (0.00 sec)

mysql> show variables like "%innodb_file%";
+--------------------------+-----------+
| Variable_name            | Value     |
+--------------------------+-----------+
| innodb_file_format       | Barracuda |
| innodb_file_format_check | ON        |
| innodb_file_format_max   | Antelope  |
| innodb_file_per_table    | ON        |
+--------------------------+-----------+
4 rows in set (0.00 sec)

mysql> SET GLOBAL innodb_file_format_max = barracuda;
Query OK, 0 rows affected (0.00 sec)

mysql> show variables like "%innodb_file%";
+--------------------------+-----------+
| Variable_name            | Value     |
+--------------------------+-----------+
| innodb_file_format       | Barracuda |
| innodb_file_format_check | ON        |
| innodb_file_format_max   | Barracuda |
| innodb_file_per_table    | ON        |
+--------------------------+-----------+
4 rows in set (0.00 sec)

I had observed a single line logged in Error Log file :

[root@dhcppc0 Desktop]# tail -1 /usr/local/mysql/data/dhcppc0.err
120402 11:26:52 [Info] InnoDB: the file format in the system tablespace is
now set to Barracuda.

After switching to barracuda file format, I could also access my Database
and tables without any error :

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| opentaps1          |
| performance_schema |
| test               |
+--------------------+
5 rows in set (0.00 sec)

mysql> use opentaps1;
Database changed
mysql> select count(*) from product;
+----------+
| count(*) |
+----------+
|     3244 |
+----------+
1 row in set (0.42 sec)

mysql> show engines;
+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+
| Engine             | Support | Comment                                                        | Transactions | XA   | Savepoints |
+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+
| MRG_MYISAM         | YES     | Collection of identical MyISAM tables                          | NO           | NO   | NO         |
| CSV                | YES     | CSV storage engine                                             | NO           | NO   | NO         |
| MyISAM             | YES     | MyISAM storage engine                                          | NO           | NO   | NO         |
| BLACKHOLE          | YES     | /dev/null storage engine (anything you write to it disappears) | NO           | NO   | NO         |
| MEMORY             | YES     | Hash based, stored in memory, useful for temporary tables      | NO           | NO   | NO         |
| InnoDB             | DEFAULT | Supports transactions, row-level locking, and foreign keys     | YES          | YES  | YES        |
| ARCHIVE            | YES     | Archive storage engine                                         | NO           | NO   | NO         |
| PERFORMANCE_SCHEMA | YES     | Performance Schema                                             | NO           | NO   | NO         |
| FEDERATED          | NO      | Federated MySQL storage engine                                 | NULL         | NULL | NULL       |
+--------------------+---------+----------------------------------------------------------------+--------------+------+------------+
9 rows in set (0.00 sec)

mysql> show engine innodb status\G
*************************** 1. row ***************************
Type: InnoDB
Name:
Status: 
=====================================
120402 11:36:29 INNODB MONITOR OUTPUT
=====================================
Per second averages calculated from the last 18446744073709534037 seconds
-----------------
BACKGROUND THREAD
-----------------
srv_master_thread loops: 12 1_second, 12 sleeps, 1 10_second, 2 background,
2 flush
srv_master_thread log flush and writes: 12
----------
SEMAPHORES
----------
OS WAIT ARRAY INFO: reservation count 5, signal count 5
Mutex spin waits 2, rounds 60, OS waits 2
RW-shared spins 3, rounds 90, OS waits 3
RW-excl spins 0, rounds 0, OS waits 0
Spin rounds per wait: 30.00 mutex, 30.00 RW-shared, 0.00 RW-excl
------------
TRANSACTIONS
------------
Trx id counter F01
Purge done for trx's n:o < 0 undo n:o < 0
History list length 0
LIST OF TRANSACTIONS FOR EACH SESSION:
---TRANSACTION F00, not started
MySQL thread id 1, OS thread handle 0x7f38309f9710, query id 28 localhost
root
show engine innodb status
--------
FILE I/O
--------
I/O thread 0 state: waiting for completed aio requests (insert buffer
thread)
I/O thread 1 state: waiting for completed aio requests (log thread)
I/O thread 2 state: waiting for completed aio requests (read thread)
I/O thread 3 state: waiting for completed aio requests (read thread)
I/O thread 4 state: waiting for completed aio requests (read thread)
I/O thread 5 state: waiting for completed aio requests (read thread)
I/O thread 6 state: waiting for completed aio requests (write thread)
I/O thread 7 state: waiting for completed aio requests (write thread)
I/O thread 8 state: waiting for completed aio requests (write thread)
I/O thread 9 state: waiting for completed aio requests (write thread)
Pending normal aio reads: 0 [0, 0, 0, 0] , aio writes: 0 [0, 0, 0, 0] ,
ibuf aio reads: 0, log i/o's: 0, sync i/o's: 0
Pending flushes (fsync) log: 0; buffer pool: 0
554 OS file reads, 7 OS file writes, 7 OS fsyncs
-0.01 reads/s, 16384 avg bytes/read, -0.00 writes/s, -0.00 fsyncs/s
-------------------------------------
INSERT BUFFER AND ADAPTIVE HASH INDEX
-------------------------------------
Ibuf: size 1, free list len 0, seg size 2, 0 merges
merged operations:
insert 0, delete mark 0, delete 0
discarded operations:
insert 0, delete mark 0, delete 0
Hash table size 276707, node heap has 15 buffer(s)
-0.15 hash searches/s, -0.12 non-hash searches/s
---
LOG
---
Log sequence number 221536390
Log flushed up to   221536390
Last checkpoint at  221536390
0 pending log writes, 0 pending chkp writes
10 log i/o's done, -0.00 log i/o's/second
----------------------
BUFFER POOL AND MEMORY
----------------------
Total memory allocated 137363456; in additional pool allocated 0
Dictionary memory allocated 3476070
Buffer pool size   8192
Free buffers       7635
Database pages     542
Old database pages 220
Modified db pages  0
Pending reads 0
Pending writes: LRU 0, flush list 0, single page 0
Pages made young 0, not young 0
-0.00 youngs/s, -0.00 non-youngs/s
Pages read 542, created 0, written 1
-0.01 reads/s, -0.00 creates/s, -0.00 writes/s
Buffer pool hit rate 980 / 1000, young-making rate 0 / 1000 not 0 / 1000
Pages read ahead -0.00/s, evicted without access -0.00/s, Random read ahead
-0.00/s
LRU len: 542, unzip_LRU len: 0
I/O sum[0]:cur[238], unzip sum[0]:cur[0]
--------------
ROW OPERATIONS
--------------
0 queries inside InnoDB, 0 queries in queue
1 read views open inside InnoDB
Main thread process no. 2937, id 139879303665424, state: waiting for server
activity
Number of rows inserted 0, updated 0, deleted 0, read 3244
-0.00 inserts/s, -0.00 updates/s, -0.00 deletes/s, -0.18 reads/s
----------------------------
END OF INNODB MONITOR OUTPUT
============================
1 row in set (0.00 sec)

9

यदि आप वास्तव में बाराकुडा प्रारूप का उपयोग करके InnoDB के साथ खेलना चाहते हैं, तो आपको /root/MySQLData.sql जैसी किसी चीज़ के लिए सब कुछ mysqldump करना चाहिए। यह डेटा फ़ाइल प्रारूप को स्वतंत्र बनाता है।

नए ibdata1 और innodb_file_per_table (वैकल्पिक, मेरी व्यक्तिगत प्राथमिकता) के साथ एक और MySQL उदाहरण का उपयोग करें। फ़ाइल प्रारूप को ibdata1 खाली के साथ बदलें। फिर, /root/MySQLData.sql को पुनः लोड करें और डेटा के साथ खेलें।

मैंने PostgreSQL के बारे में हल्की डरावनी कहानियां सुनी हैं। 9.0.1 बायनेरिज़ के साथ काम करने के लिए 8.2.4 डेटाबेस प्राप्त करने के लिए ट्विट सेटिंग्स की आवश्यकता है। यदि हम दोनों फाइल फॉर्मेट को एक ही सिस्टम टेबलस्पेस (ibdata1) और / या .ibdफाइल में रहते हैं, अगर हम ऐसी सेटिंग्स के बारे में जानते हैं तो वही कहानी लागू हो सकती है ।

जहां तक ​​कोषेर होने का ...

  • किसी को भी एक ही रेफ्रिजरेटर में मांस और डेयरी का भंडारण नहीं करना चाहिए
  • किसी को भी एक ही जुए के नीचे एक बैल और एक गधा नहीं रखना चाहिए (व्यवस्थाविवरण 22:10)
  • कोई भी संग्रहीत करना चाहिए Antelopeऔर Barracudaएक ही ibdata1 अंदर

UPDATE 2013-07-05 14:26 EDT

मैंने सर्वरफ़ॉल्ट में इस प्रश्न का उत्तर दिया: MySQL INNODB संपीड़न KEY_BLOCK_SIZE सेट करना । इसने मुझे DBA StackExchange में दिए गए किसी भी प्रश्न के लिए वापस देखा, Barracudaप्रारूप पर चर्चा की थी और मुझे यह पुरानी पोस्ट मिली। मैं वही जानकारी यहाँ रखूँगा ...

बाराकुडा के लिए InnoDB संपीड़न पर MySQL प्रलेखन के अनुसार

संपीड़न और InnoDB बफर पूल

एक संकुचित InnoDB तालिका में, प्रत्येक संपीड़ित पृष्ठ (चाहे 1K, 2K, 4K या 8K) 16K बाइट के असम्पीडित पृष्ठ से मेल खाता हो। किसी पृष्ठ में डेटा तक पहुंचने के लिए, InnoDB डिस्क से संपीड़ित पृष्ठ को पढ़ता है यदि यह पहले से ही बफर पूल में नहीं है, तो पृष्ठ को उसके मूल 16K बाइट फॉर्म में अनलॉक्ड कर देता है। इस खंड में वर्णन किया गया है कि इनोबीडी कैसे बफर पूल को संकुचित तालिकाओं के पृष्ठों के संबंध में प्रबंधित करता है।

I / O को कम करने के लिए और किसी पेज को अनकैप करने की आवश्यकता को कम करने के लिए, कई बार बफर पूल में एक डेटाबेस पेज के संकुचित और असम्पीडित दोनों रूप होते हैं। अन्य आवश्यक डेटाबेस पृष्ठों के लिए जगह बनाने के लिए, इनोबीडी मेमोरी में संपीड़ित पृष्ठ को छोड़ते हुए बफर पूल से "एक बेदखल" पृष्ठ को "बेदखल" कर सकता है। या, यदि किसी पृष्ठ पर थोड़ी देर में प्रवेश नहीं किया गया है, तो पृष्ठ के संकुचित रूप को अन्य डेटा के लिए खाली स्थान पर डिस्क पर लिखा जा सकता है। इस प्रकार, किसी भी समय, बफर पूल में पृष्ठ के संपीड़ित और असम्पीडित दोनों रूप हो सकते हैं, या केवल पृष्ठ का संकुचित रूप हो सकता है, या न ही।

InnoDB स्मृति को रखने के लिए किन पृष्ठों पर नज़र रखता है और कम से कम हाल ही में उपयोग की जाने वाली (LRU) सूची का उपयोग करके बेदखल करने के लिए, ताकि "हॉट" या अक्सर एक्सेस किए गए डेटा स्मृति में बने रहें। जब संकुचित तालिकाओं तक पहुँचा जाता है, तो InnoDB मेमोरी में संपीड़ित और असम्पीडित पृष्ठों का एक उचित संतुलन प्राप्त करने के लिए एक अनुकूली LRU एल्गोरिदम का उपयोग करता है। यह अनुकूली एल्गोरिथ्म संवेदनशील है कि क्या सिस्टम I / O- बाउंड या CPU-बाउंड तरीके से चल रहा है। लक्ष्य यह है कि CPU व्यस्त होने पर बहुत अधिक प्रोसेसिंग टाइम अनकम्प्रेस्ड पेज खर्च करने से बचें, और जब सीपीयू में अतिरिक्त चक्र होते हैं, जो कि कंप्रेस्ड पेज (जो पहले से मेमोरी में हो सकते हैं) को अनकैप करने के लिए इस्तेमाल किया जा सकता है। जब सिस्टम I / O- बाउंड होता है, तो एल्गोरिथ्म दोनों प्रतियों के बजाय किसी पृष्ठ की असम्पीडित प्रतिलिपि को बाहर निकालना पसंद करता है: स्मृति निवासी बनने के लिए अन्य डिस्क पृष्ठों के लिए अधिक जगह बनाने के लिए। जब सिस्टम सीपीयू-बाउंड होता है, तो InnoDB संपीड़ित और असम्पीडित दोनों पेजों को बेदखल करना पसंद करता है, ताकि "हॉट" पेजों के लिए अधिक मेमोरी का उपयोग किया जा सके और केवल संपीड़ित रूप में डेटा को अनकम्प्रेस्ड करने की आवश्यकता को कम किया जा सके।

ध्यान दें कि InnoDB बफर पूल को प्रश्नों को पूरा करने के लिए पढ़े गए डेटा पेज और इंडेक्स पेज को लोड करना है। पहली बार एक तालिका और उसके अनुक्रमित को पढ़ते समय, संपीड़ित पृष्ठ को 16K से असम्पीडित होना चाहिए। इसका मतलब है कि आपके पास बफ़र पूल में दुगुनी डेटा सामग्री होगी, संकुचित और असम्पीडित डेटा पृष्ठ।

यदि बफ़र पूल में डेटा सामग्री का यह दोहराव चल रहा है, तो आपको नए संपीड़न दर के एक छोटे रैखिक कारक द्वारा innodb_buffer_pool_size को बढ़ाने की आवश्यकता है । यहां कैसे:

SCENARIO

  • आपके पास 8G बफर पूल वाला DB सर्वर है
  • आप के साथ संपीड़न चला key_block_size=8
    • 8का 50.00%है16
    • 50.00%का 8Gहै4G
    • बढ़ाने innodb_buffer_pool_sizeके लिए 12G( 8G+ 4G)
  • आप के साथ संपीड़न चला key_block_size=4
    • 4का 25.00%है16
    • 25.00%का 8Gहै2G
    • बढ़ाने innodb_buffer_pool_sizeके लिए 10G( 8G+ 2G)
  • आप के साथ संपीड़न चला key_block_size=2
    • 2का 12.50%है16
    • 12.50%का 8Gहै1G
    • बढ़ाने innodb_buffer_pool_sizeके लिए 9G( 8G+ 1G)
  • आप के साथ संपीड़न चला key_block_size=1
    • 1का 06.25%है16
    • 06.25%का 8Gहै 0.5G( 512M)
    • बढ़ाने innodb_buffer_pool_sizeके लिए 8704M( 8G( 8192M) + 512M)

कहानी का इतिहास : इनोबीडी बफर पूल को संपीड़ित डेटा और इंडेक्स पेजों को संभालने के दौरान अतिरिक्त श्वास कक्ष की आवश्यकता होती है।

हमारी साइट का प्रयोग करके, आप स्वीकार करते हैं कि आपने हमारी Cookie Policy और निजता नीति को पढ़ और समझा लिया है।
Licensed under cc by-sa 3.0 with attribution required.