SQL クエリ
このトピックでは、SQL に関するよくある質問への回答を提供します。
マテリアライズドビューを作成する際に "fail to allocate memory." というエラーが発生する
この問題を解決するには、be.conf ファイル内の memory_limitation_per_thread_for_schema_change パラメータの値を増やします。このパラメータは、スキームを変更するために単一のタスクに割り当てられる最大ストレージを指します。デフォルトの最大ストレージ値は 2 GB です。
StarRocks はクエリ結果のキャッシュをサポートしていますか？
StarRocks は最終的なクエリ結果を直接キャッシュしません。v2.5 以降、StarRocks は Query Cache 機能を使用して、キャッシュ内の最初の集約段階の中間結果を保存します。以前のクエリと意味的に同等の新しいクエリは、キャッシュされた計算結果を再利用して計算を高速化できます。Query Cache は BE メモリを使用します。詳細については、 Query cache を参照してください。
計算に Null が含まれる場合、ISNULL() 関数を除いて、関数の計算結果は false になります
標準 SQL では、NULL 値を持つオペランドを含むすべての計算は NULL を返します。
StarRocks は DECODE 関数をサポートしていますか？
StarRocks は Oracle データベースの DECODE 関数をサポートしていません。StarRocks は MySQL と互換性があるため、CASE WHEN ステートメントを使用できます。
StarRocks の主キーテーブルにデータをロードした後、最新のデータをすぐにクエリできますか？
はい。StarRocks は Google Mesa を参照してデータをマージします。StarRocks では、BE がデータマージをトリガーし、データをマージするための 2 種類の Compaction を持っています。データマージが完了していない場合、クエリ中に完了します。したがって、データロード後に最新のデータを読み取ることができます。
StarRocks に保存された utf8mb4 文字が切り捨てられたり、文字化けしたりしますか？
いいえ。
alter table コマンドを実行すると "table's state is not normal" というエラーが発生する
このエラーは、前回の変更が完了していないために発生します。前回の変更のステータスを確認するには、次のコードを実行します。
show tablet from lineitem where State="ALTER";
変更操作にかかる時間はデータ量に関連しています。一般的に、変更は数分で完了します。テーブルを変更している間は、StarRocks にデータをロードするのを停止することをお勧めします。データロードは変更の完了速度を低下させるためです。
Apache Hive の外部テーブルをクエリすると "get partition detail failed: org.apache.doris.common.DdlException: get hive partition meta data failed: java.net.UnknownHostException:hadooptest" というエラーが発生する
このエラーは、Apache Hive パーティションのメタデータを取得できない場合に発生します。この問題を解決するには、core-sit.xml と hdfs-site.xml を fe.conf ファイルと be.conf ファイルにコピーします。
データをクエリすると "planner use long time 3000 remaining task num 1" というエラーが発生する
このエラーは通常、完全なガーベジコレクション (full GC) によって発生します。バックエンドのモニタリングと fe.gc ログを使用して確認できます。この問題を解決するには、次の操作のいずれかを実行します。
- SQL のクライアントが複数のフロントエンド (FEs) に同時にアクセスして負荷を分散できるようにします。
- Java Virtual Machine (JVM) のヒープサイズを fe.conf ファイルで 8 GB から 16 GB に変更して、メモリを増やし、full GC の影響を軽減します。
列 A のカーディナリティが小さい場合、select B from tbl order by A limit 10 のクエリ結果が毎回異なる
SQL は列 A が順序付けられていることのみを保証でき、列 B の順序が各クエリで同じであることは保証できません。MySQL はスタンドアロンデータベースであるため、列 A と列 B の順序を保証できます。
StarRocks は分散データベースであり、基礎となるテーブルに保存されたデータはシャーディングパターンになっています。列 A のデータは複数のマシンに分散されているため、複数のマシンから返される列 B の順序は各クエリで異なる場合があり、その結果、B の順序が毎回一致しないことになります。この問題を解決するには、select B from tbl order by A limit 10 を select B from tbl order by A,B limit 10 に変更します。
SELECT * と SELECT の間に列効率の大きなギャッ プがあるのはなぜですか？
この問題を解決するには、プロファイルを確認し、MERGE の詳細を確認します。
-
ストレージ層での集約に時間がかかりすぎていないか確認します。
-
インジケータ列が多すぎるかどうかを確認します。もしそうなら、数百万行の数百列を集約します。
MERGE:
- aggr: 26s270ms
- sort: 15s551ms
DELETE はネストされた関数をサポートしていますか？
ネストされた関数はサポートされていません。例えば、DELETE from test_new WHERE to_days(now())-to_days(publish_time) >7; の to_days(now()) などです。
データベースに数百のテーブルがある場合、データベースの使用効率を向上させるにはどうすればよいですか？
効率を向上させるには、MySQL のクライアントサーバーに接続する際に -A パラメータを追加します：mysql -uroot -h127.0.0.1 -P8867 -A。MySQL のクライアントサーバーはデータベース情報を事前に読み込みません。
BE ログと FE ログが占有するディスクスペースを削減するにはどうすればよいですか？
ログレベルと対応するパラメータを調整します。詳細については、 Parameter Configuration を参照してください。
レプリケーション数を変更しようとすると "table *** is colocate table, cannot change replicationNum" というエラーが発生する
コロケートテーブルを作成する際には、group プロパティを設定する必要があります。そのため、単一のテーブルのレプリケーション数を変更することはできません。グループ内のすべてのテーブルのレプリケーション数を変更するには、次の手順を実行します。
- グループ内のすべてのテーブルに対して
group_withをemptyに設定します。 - グループ内のすべてのテーブルに対して適切な
replication_numを設定します。 group_withを元の値に戻します。
VARCHAR を最大値に設定するとストレージに影響がありますか？
VARCHAR は可変長データ型であり、実際のデータ長に基づいて変更可能な指定された長さを持ちます。テーブルを作成する際に異なる varchar 長を指定しても、同じデータに対するクエリパフォーマンスにはほとんど影響がありません。
テーブルを切り捨てる際に "create partititon timeout" というエラーが発生する
テーブルを切り捨てるには、対応するパーティションを作成し、それらをスワップする必要があります。作成する必要のあるパーティ ションの数が多い場合、このエラーが発生します。さらに、多くのデータロードタスクがある場合、Compaction プロセス中にロックが長時間保持されます。そのため、テーブルを作成する際にロックを取得できません。データロードタスクが多すぎる場合、be.conf ファイルで tablet_map_shard_size を 512 に設定してロック競合を減らします。
Apache Hive の外部テーブルにアクセスする際に "Failed to specify server's Kerberos principal name" というエラーが発生する
fe.conf ファイルと be.conf ファイルの hdfs-site.xml に次の情報を追加します。
<property>
<name>dfs.namenode.kerberos.principal.pattern</name>
<value>*</value>
</property>
"2021-10" は StarRocks の日付形式ですか？
いいえ。
"2021-10" をパーティションフィールドとして使用できますか？
いいえ。"2021-10" を "2021-10-01" に変換する関数を使用し、"2021-10-01" をパーティションフィールドとして使用してください。
StarRocks データベースまたはテーブルのサイズをどこでクエリできますか？
SHOW DATA コマンドを使用できます。
SHOW DATA; は、現在のデータベース内のすべてのテーブルのデータサイズとレプリカを表示します。
SHOW DATA FROM <db_name>.<table_name>; は、指定されたデータベースの指定されたテーブルのデータサイズ、レプリカの数、および行数を表示します。
