Denodo

{Denodo}エクスポートインポート(Data Catalog)

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/data_catalog/appendix/scripts/export_metadata_scripthttps://community.denodo.com/docs/html/browse/8.0/en/vdp/data_catalog/appendix/rest_api/rest_api [1]スクリプトによる方法 cd C:\Den…

{Denodo}クエリタイムアウト

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/queries_select_statement/context_clause/context_clause QUERYTIMEOUT: Virtual DataPort サーバーがクエリの完了を待機する最長時間 (ミリ秒)。この時間が経過すると、Virtual DataPort サ…

{Denodo}キャッシュテーブルの管理カラム

https://community.denodo.com/kb/en/view/document/Cache%20database%20size%20estimate ビュー名とキャッシュテーブル名の対応確認 select * from vdb_cache_names; +--------------+----------+-------------+------------------------------------------…

{Denodo}名前空間

データソース→ データベース毎、タイプ毎 ビュー→ データベース毎※BV、IFV、DVに関わらず共通 スケジューラジョブ→ プロジェクト毎

{Denodo}Javaで接続

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/developer/access_through_jdbc/access_through_jdbchttps://www.ibm.com/docs/ja/db2-for-zos/11?topic=applications-retrieving-data-from-tables-using-statementexecutequery-method 前提: Ja…

{Denodo}パフォチュー関連

https://community.denodo.com/kb/en/view/document/Best%20Practices%20to%20Maximize%20Performance%20IV%3A%20Detecting%20Bottlenecks%20in%20a%20Queryhttps://community.denodo.com/docs/html/browse/8.0/jp/vdp/administration/optimizing_queries/op…

{Denodo}IFV作成

https://community.denodo.com/docs/html/browse/8.0/en/vdp/vql/defining_a_derived_view/defining_an_interface_view/defining_an_interface_view -- 1. ソースDBでテストテーブル作成 drop table if exists tab1; create table tab1( col1 BIGINT not nul…

{Denodo}Data Catalog REST API

https://community.denodo.com/docs/html/browse/latest/en/vdp/data_catalog/appendix/rest_api/rest_api http://localhost:9090/denodo-data-catalog/swagger-ui/index.html -- 1. カテゴリ一覧 curl -X GET "http://localhost:9090/denodo-data-catalog/p…

{Denodo}ビューの変更

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/creating_a_base_view/modifying_a_base_view/modifying_a_base_viewhttps://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/defining_a_derived_view/modifying_a_derived_view/modi…

{Denodo}DESC ステートメント

https://community.denodo.com/docs/html/browse/8.0/en/vdp/vql/describing_catalog_elements/describing_catalog_elementshttps://community.denodo.com/docs/html/browse/8.0/en/vdp/developer/appendix/output_schema_of_the_desc_commands/output_schem…

{Denodo}LIST コマンド

https://community.denodo.com/docs/html/browse/8.0/en/vdp/vql/listing_elements_in_the_catalog/listing_elements_in_the_catalog HELP LIST サーバー内のエレメント LIST DATABASESLIST FUNCTIONSLIST FUNCTIONS CUSTOMLIST I18NSLIST JARS LIST MAPS I1…

{Denodo}IFVとBVの対応調査

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/stored_procedures/predefined_stored_procedures/view_dependencies ストアドプロシージャ VIEW_DEPENDENCIES は、ビューの系統、つまり、1 つのビューを構築するときに元となった別のビュー…

{Denodo}カラム一覧

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/stored_procedures/predefined_stored_procedures/get_view_columns select database_name, view_name, column_name, ordinal_position, column_vdp_type, column_sql_type, column_sql_type_…

{Denodo}ビュー名、カラム名の最大長

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/language_for_defining_and_processing_data_vql/unicode_identifiers/unicode_identifiers 識別子は最長で 100 文字です。 -- 1. 基本ビューの名前変更 100文字 ALTER TABLE b_tab1 RENAME b…

{Denodo}ビューのエクスポート

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/administration/cluster_architectures_server_backup/using_the_import_export_scripts_for_backup_and_or_replication/export_script cd C:\Denodo\DenodoPlatform8.0\bin .\export.bat ^--logi…

{Denodo}DENODO ADMIN AND DEVELOPMENT BEST PRACTICES

https://community.denodo.com/kb/en/view/document/Denodo%20Admin%20and%20Development%20Best%20Practiceshttps://community.denodo.com/kb/en/view/document/Denodo%20Best%20Practices%20and%20Guidelines -- 1. JVM Configuration it is not recommend…

{Denodo}ビュー一覧

https://community.denodo.com/docs/html/browse/8.0/en/vdp/vql/stored_procedures/predefined_stored_procedures/get_views select database_name, folder, name, create_date, last_modification_date, view_type, cache_status, view_statusfrom GET_VIE…

{Denodo}Pythonで接続

https://community.denodo.com/kb/en/view/document/How%20to%20connect%20to%20Denodo%20from%20Python%20-%20a%20starter%20for%20Data%20Scientists pip install sqlalchemypip install psycopg2pip install --upgrade denodo-sqlalchemy ## Script name:…

{Denodo}VQLストアドプロシージャ

※ Denodo 8.0 2023 年 3 月アップデートで追加 https://community.denodo.com/docs/html/browse/8.0/en/vdp/developer/developing_extensions/developing_stored_procedures/developing_vql_stored_procedures SELECT *FROM GET_ELEMENTS()where type = 'sto…

{Denodo}JMeter

クライアントOS: CentOS7メモリサイズ: 4GB -- 1. Installing JMeter yum remove java* yum -y install java-1.8.0-openjdkyum -y install java-1.8.0-openjdk-develjava -version vim ~/.bash_profile export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdkexp…

{Denodo}シングルユーザーモード

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/administration/appendix/single_user_mode/single_user_mode 大容量の VQL ファイルのインポート、サーバーの設定の変更などのメンテナンス操作を実行する場合は、サーバーを「シングルユーザー…

{Denodo}月の初日

調査パターン: ソースDB: MySQL,Oracle,PostgreSQL,SQL Server,RedshiftキャシュDB: MySQL,Oracle,PostgreSQL,SQL Server,Redshift 結論: DBにRedshiftを使用すると月の初日を条件とするクエリがエラーになる場合がある -- テストテーブル準備 -- 1. MySQL d…

{Denodo}VQLシェルのダウンロード時挙動

前提: カラム数20の下記テーブルをOracleに作成 TAB2: 件数=10000000 (1000万)、データサイズ= 5G (1) ブラウザの場合 Display rowsの上限 = 1000 (1千)ダウンロード件数の上限 = 10000 (1万) Download時Display rowsやRetrieve all rowsの設定と無関係にDow…

{Denodo}CONTEXT句

https://community.denodo.com/docs/html/browse/8.0/jp/vdp/vql/queries_select_statement/context_clause/context_clause <context information> ::= 'cache' = { 'on' | 'off' } // 'on' by default | 'cache_invalidate' = { 'matching_rows' | 'matching_pk' | 'all_rows' } </context>…

{Denodo}クエリ一括置換シェル

和名で記載されたクエリをDenodo用の物理名に置換する X+和名+Y↓X+物理名+Y Xはスペース、ピリオドYはスペース、カンマ、行末 -- 1. 変換定義ファイルの作成タブ区切りで作成 vim a.txt カラム1 "COL1"カラム2 "COL2"カラム3 "COL3"カラム4 "COL4"カラム5 "…

{Denodo}Denodo Monitor ログ削除

前提: Denodo Express(Windows版) インストール済み https://community.denodo.com/kb/en/view/document/How%20to%20configure%20the%20Denodo%20Monitor%20to%20delete%20old%20log%20files -- 1. Denodo Monitor起動 cd C:\Denodo\DenodoPlatform8.0\tools…

{Denodo}Denodo Monitor ログをデータベースに保存する

https://community.denodo.com/docs/html/browse/latest/jp/vdp/administration/monitoring_the_virtual_dataport_server/denodo_monitor/configuring_the_denodo_monitor#jdbc-logging-configuration 前提: Denodo Express(Windows版) インストール済みMySQ…

{Denodo}データソース・ラッパー・基本ビュー・インターフェイスビューの作成(ORACLE AUTONOMOUS DATABASE)

https://community.denodo.com/kb/en/view/document/Accessing%20Oracle%20Autonomous%20Database%20from%20Denodo?category=Data%20Sources 前提: Denodo Express インストール、起動済みOCI Autonomous Database Always Free 作成済みOracle Autonomous Da…

{Denodo}データソース・ラッパー・基本ビュー・インターフェイスビューの作成(Snowflake)

https://community.denodo.com/kb/en/view/document/How%20to%20connect%20to%20Snowflake%20from%20Denodo?category=Data%20Sources https://note.com/bunsekiya_tech/n/nd1b8c2e31a1f 前提: Denodo Express インストール、起動済み -- 1. Snowflakeのセッ…

{Denodo}データソース・ラッパー・基本ビュー・インターフェイスビューの作成(Redshift)

https://community.denodo.com/kb/en/view/document/How%20to%20connect%20to%20Amazon%20Redshift%20from%20Denodo 前提: Denodo Express インストール、起動済み -- 1. コマンド等のインストール -- 1.1 aws cli version 2 インストール curl "https://aws…