แคตตาล็อก Mirrored Dremio

แค็ตตาล็อก Dremio ที่มิเรอร์ใน Fabric จะรวมข้อมูลของคุณที่จัดการโดย Dremio กับข้อมูลที่เหลือของคุณใน Fabric คุณสามารถทําซ้ําแค็ตตาล็อก Dremio ของคุณไปยัง OneLake ของ Fabric ได้โดยตรง

สําหรับบทช่วยสอนเกี่ยวกับการกําหนดค่าสภาพแวดล้อม Dremio ของคุณสําหรับการมิเรอร์แค็ตตาล็อก Dremio ลงใน Fabric โปรดดู บทช่วยสอน: กําหนดค่าแค็ตตาล็อก Dremio ที่มิเรอร์

Important

คุณลักษณะนี้อยู่ในตัวอย่าง

เมื่อคุณมิเรอร์แค็ตตาล็อก Dremio ไม่มีการเคลื่อนย้ายข้อมูลหรือการจําลองแบบข้อมูล เฉพาะโครงสร้างแค็ตตาล็อก Dremio เท่านั้นที่สะท้อนไปยัง Fabric และข้อมูลแค็ตตาล็อกพื้นฐานจะเข้าถึงได้ผ่านทางลัด การเปลี่ยนแปลงข้อมูลพื้นฐานอาจไม่ปรากฏใน Fabric ทันที การเผยแพร่อาจใช้เวลาตั้งแต่ไม่กี่วินาทีถึงหลายนาที ตามที่อธิบายไว้ในเอกสารประสิทธิภาพปลายทางการวิเคราะห์ SQL

ประสบการณ์การวิเคราะห์ที่สร้างขึ้นมา

แค็ตตาล็อกมิเรอร์คือรายการใน Fabric ที่แตกต่างจากรายการอื่นๆ เช่น Lakehouses และปลายทางการวิเคราะห์ SQL

เมื่อคุณสะท้อนแค็ตตาล็อก Dremio Fabric จะสร้างรายการเหล่านี้:

คุณสามารถเข้าถึงข้อมูลแค็ตตาล็อก Dremio ที่มิเรอร์ได้หลายวิธี:

  • ใช้คําสั่ง T-SQL เพื่อกําหนดและสืบค้นวัตถุข้อมูลจากจุดสิ้นสุดการวิเคราะห์ SQL แบบอ่านอย่างเดียว รายการแค็ตตาล็อก Dremio ที่มิเรอร์แต่ละรายการมีจุดสิ้นสุดการวิเคราะห์ SQL ที่สร้างขึ้นโดยอัตโนมัติซึ่งให้ประสบการณ์การวิเคราะห์ที่หลากหลายที่สร้างขึ้นโดยกระบวนการมิเรอร์
  • ใช้ Power BI กับโหมด Direct Lake เพื่อสร้างรายงานกับรายการแค็ตตาล็อก Dremio ที่มิเรอร์
  • ใช้ปริมาณงาน Fabric อื่นๆ เพื่อคิวรีตารางในรายการแค็ตตาล็อก Dremio ที่มิเรอร์

ตารางมิเรอร์จะพร้อมใช้งานสําหรับการสืบค้นภายในไม่กี่วินาทีหลังจากการเลือก โดยโดยทั่วไปแล้วการเผยแพร่ข้อมูลเมตาแบบ end-to-end จะเสร็จสมบูรณ์ในไม่กี่วินาทีถึงสองสามนาที

เชื่อมต่อและรับรองความถูกต้อง

การมิเรอร์เชื่อมต่อกับปลายทางแค็ตตาล็อก Dremio Iceberg REST รองรับวิธีการรับรองความถูกต้องต่อไปนี้:

  • การจําหน่ายข้อมูลประจํา ตัว – Dremio ให้ข้อมูลประจําตัวที่มีอายุสั้นสําหรับการเข้าถึงข้อมูลตาราง Iceberg พื้นฐาน
  • โทเค็นการเข้าถึงส่วนบุคคล (PAT) – รับรองความถูกต้องด้วยโทเค็นการเข้าถึงส่วนบุคคลที่ออกโดย Dremio

สําหรับขั้นตอนโดยละเอียดเกี่ยวกับการกําหนดค่าการเชื่อมต่อและการรับรองความถูกต้อง โปรดดู บทช่วยสอน: กําหนดค่าแค็ตตาล็อก Dremio ที่มิเรอร์

การซิงค์ข้อมูลเมตา

เมื่อคุณสร้างแค็ตตาล็อก Dremio มิเรอร์ใหม่ใน Fabric ตัวเลือก ซิงค์ตารางในอนาคตโดยอัตโนมัติ ถูกเปิดใช้งานโดยค่าเริ่มต้น การเปลี่ยนแปลงเมตาดาต้าต่อไปนี้จะสะท้อนให้เห็นจากสภาพแวดล้อม Dremio ของคุณไปยัง Fabric หากเปิดใช้งานการซิงค์อัตโนมัติ:

  • การเพิ่มเนมสเปซลงในแค็ตตาล็อก
  • การลบเนมสเปซออกจากแค็ตตาล็อก
  • การเพิ่มตารางลงในเนมสเปซ
  • การลบตารางออกจากเนมสเปซ
  • เมื่อเปิดใช้งาน ซิงค์ตารางในอนาคตโดยอัตโนมัติ ตาราง Iceberg ที่สร้างขึ้นใหม่ใน namespace ที่เลือกจะรวมอยู่ใน Fabric โดยอัตโนมัติโดยไม่ต้องรีเฟรชด้วยตนเอง
  • การเปลี่ยนแปลง Schema และข้อมูลในตารางที่มีอยู่เป็นไปตามช่วงเวลาการเผยแพร่ปกติ

การเลือกสคีมา/ตาราง:

  • ผู้ใช้สามารถเลือกเนมสเปซที่ควรรวมเป็น Schema และสามารถแยกบางตารางได้
  • การยกเลิกการเลือกเนมสเปซจะยกเลิกการเลือกตารางทั้งหมดภายในเนมสเปซ
  • ถ้าผู้ใช้ย้อนกลับและเลือกเนมสเปซ ตารางทั้งหมดภายในเนมสเปซจะถูกเลือกอีกครั้ง