Webサービスで起業を目指すプログラマーblog

仕事で使ったプログラミング、サーバー周りで役に立つこと、Webサービス開発に必要な技術情報、モバイル情報を書いてます。わかりやすく見やすくをモットーにしています。

PostgreSQLでDB間でデータをコピーする

PostgreSQLでDB間またはスキーマー間でpd_dumpを使ってコピーを試みたものの、うまくいきませんでした。

調べているとやり方はあるらしいですが、結局手間がかかり\copyの方が早いらしいのでこれで試してみました。

環境

PostgreSQL 9.4
CentOS 6
Mac 11

コピーの流れ

「コピー元DB:A、コピー先DB:B」とします。

1.AでCSVエクスポート
2.Bでデータ削除
3.BでCSVインポート
4.Bでシーケンス初期化

各項番の説明をしていきます。

1.AでCSVエクスポート

ターミナルで次を実行します。

# 通常接続
psql -h Aのホスト -U Aのユーザー名 -d AのDB名 -c "\copy テーブル名 to '/出力先フルパス/テーブル名.csv'  (format csv, delimiter ',', header true);"

# SSL接続
psql "sslmode=require host=Aのホスト user=Aのユーザー名 dbname=AのDB名" -c "\copy テーブル名 to '/出力先フルパス/テーブル名.csv'  (format csv, delimiter ',', header true);"

2.Bでデータ削除

ターミナルでpsqlコマンドでDBに接続し、次のSQLを流してデータを削除します。
psql -c "コマンド"で接続しなくてもできます)

TRUNCATE TABLE テーブル名;

3.BでCSVインポート

エクスポートの「to」を「from」に変えるだけです。
ターミナルで次を実行します。

# 通常接続
psql -h Bのホスト -U Bのユーザー名 -d BのDB名 -c "\copy テーブル名 from '/出力先フルパス/テーブル名.csv'  (format csv, delimiter ',', header true);"

# SSL接続
psql "sslmode=require host=Bのホスト user=Bのユーザー名 dbname=BのDB名" -c "\copy テーブル名 from '/出力先フルパス/テーブル名.csv'  (format csv, delimiter ',', header true);"

4.Bでシーケンス初期化

ターミナルでpsqlコマンドでDBに接続し、次のSQLを流してシーケンスを設定します。
「\copy」でデータをインポートしても、シーケンスは設定されません。
「テーブルの件数+1」とすることで、次のシーケンス値になります。

SELECT SETVAL('シーケンス名',(SELECT COUNT(*)+1 FROM テーブル名),FALSE);

補足

パスワードの省略

psqlを流すとパスワードを聞かれるので毎回入力するのは面倒です。
それを省くため、ターミナル毎に次の環境変数を設定しておく便利です。

export PGPASSWORD=接続先DBのパスワード
各一覧の取得

テーブル一覧やシーケンス一覧を取得するには、ターミナルでDB接続後次のコマンドを入力します。

-- テーブル一覧
\dt

-- シーケンス一覧
\ds

ターミナルだと出力された結果で、Altキーを押しながらマウスで選択すると矩形選択になるります。
テキストエディタ等に貼り付け、置換を駆使してコマンド・SQLを作成すれば作業が捗ります。

超絶おすすめするPostgreSQL書籍!!

[改訂新版]内部構造から学ぶPostgreSQL 設計・運用計画の鉄則 (Software Design plus)

[改訂新版]内部構造から学ぶPostgreSQL 設計・運用計画の鉄則 (Software Design plus)

PostgreSQL全機能バイブル

PostgreSQL全機能バイブル

Gradle 4.x で「Could not resolve all artifacts for configuration」のエラーが出たときの対処方法

個人的にGradleはよく分かってないので突っ込まれると回答できません。ご了承下さい。

※ 一概に「Could not resolve all artifacts for configuration」のエラーが出たら、ここの対処をすれば良いと言うわけではない点にご注意下さい。

環境

Mac
Spring Boot 1.3.6
Gradle 4.9 (Homebrew)

エラー内容

gradle eclipse等を実行すると以下のエラーが発生する。

* What went wrong:
A problem occurred configuring root project 'Test'.
> Could not resolve all artifacts for configuration ':classpath'.
   > Could not find org.springframework.boot:spring-boot-gradle-plugin:${springBootVersion}.
     Required by:
         project :

build.gradle(一部抜粋)

buildscript {
    ext {
        springBootVersion = '1.3.6.RELEASE'
    }
    repositories {
        mavenCentral()
    }
    dependencies {
        classpath 'org.springframework.boot:spring-boot-gradle-plugin:${springBootVersion}'
        // Gradle4対応
        classpath 'io.spring.gradle:dependency-management-plugin:0.6.0.RELEASE'
    }
}

対処方法

build.gradle(一部抜粋)

buildscript {
    ext {
        springBootVersion = '1.3.6.RELEASE'
    }
    repositories {
        mavenCentral()
    }
    dependencies {
        // 変数ではなく固定値にする
        classpath 'org.springframework.boot:spring-boot-gradle-plugin:1.3.6.RELEASE'
        // Gradle4対応
        classpath 'io.spring.gradle:dependency-management-plugin:0.6.0.RELEASE'
    }
}

Gradle徹底入門 次世代ビルドツールによる自動化基盤の構築

Gradle徹底入門 次世代ビルドツールによる自動化基盤の構築

Spring Boot 1.3.x で Gradle 4.x に更新してビルドするとエラーが出る場合の対処法

Gradleのバーションを久々に更新したら、一部のプロジェクトでエラーが出てました。
その時の対処を紹介します。

環境

Mac
Eclipse 4.5
Gradle 4.9(Homebrew)
Spring Boot 1.3.6

エラー内容

gradle eclipseを実行するとbuild.gradleの15行目でエラーが発生と表示されます。

$ gradle eclipse
FAILURE: Build failed with an exception.

* Where:
Build file '/Users/Applications/eclipse/workspace/Test/build.gradle' line: 15

* What went wrong:
A problem occurred evaluating root project 'Test'.
> Failed to apply plugin [class 'io.spring.gradle.dependencymanagement.DependencyManagementPlugin']
   > Could not create task of type 'DependencyManagementReportTask'.

* Try:
Run with --stacktrace option to get the stack trace. Run with --info or --debug option to get more log output. Run with --scan to get full insights.

* Get more help at https://help.gradle.org

BUILD FAILED in 0s

build.gradle

問題の15行目は、apply 'spring-boot'の宣言です。

buildscript {
	ext {
		springBootVersion = '1.3.6.RELEASE'
	}
	repositories {
		mavenCentral()
	}
	dependencies {
		classpath 'org.springframework.boot:spring-boot-gradle-plugin:${springBootVersion}'
		// Gradle4対応
		classpath 'io.spring.gradle:dependency-management-plugin:0.6.0.RELEASE'
	}
}

apply plugin: 'java'
apply plugin: 'eclipse-wtp'
apply plugin: 'spring-boot'  // line: 15

以下略

対処法

buildscript {
	ext {
		springBootVersion = '1.3.6.RELEASE'
	}
	repositories {
		mavenCentral()
	}
	dependencies {
		classpath 'org.springframework.boot:spring-boot-gradle-plugin:${springBootVersion}'
		//  追加
		classpath 'io.spring.gradle:dependency-management-plugin:0.6.0.RELEASE'
	}
}

apply plugin: 'java'
apply plugin: 'eclipse-wtp'
apply plugin: 'spring-boot' 
// 追加
apply plugin: 'io.spring.dependency-management'

WildFlyにJerseyアプリをデプロイするとエラーが発生するときの対処方法

WildFlyにSpring Bootで作成したJerseyを含むWebアプリをデプロイしようとすると、エラーが発生しデプロイができない現象に遭遇しました。
その時の対処方法をまとめました。

環境

CentOS 6
WildFly 11
Spring Boot 2.0.4
Jersey 2.26

原因

デプロイできない原因は、WildFly側にJAX-RSのライブラリがあり競合するためです。

対処方法

Webアプリ側にjboss-deployment-structure.xmlを用意し以下のように定義する。

jboss-deployment-structure.xml

<?xml version="1.0"?>
<jboss-deployment-structure xmlns="urn:jboss:deployment-structure:1.2" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
    <deployment>
        <exclude-subsystems>
            <subsystem name="jaxrs" /> <!-- 追記する -->
        </exclude-subsystems>
    </deployment>
</jboss-deployment-structure>

jboss-deployment-structure.xmlをwarに含める場合、WEB-INF配下に置くようにします。

Gradleで以下のように定義しwarビルドすると、自動的にWEB-INF配下にコピーされます。

war {
    from('src') {
        include 'jboss-deployment-structure.xml'
        into 'WEB-INF'
    }
}

開発環境では、xmlファイルをsrcディレクトリ直下に置いておきます。

注意事項

すでにデプロイできない事象に遭遇している場合、上記対応を行ってもデプロイ時にエラーが発生します。
エラーなのにデプロイ時のゴミは残ったままなので、それらを削除する必要があります。

standalone.xmlを修正する

ファイルの場所:wildfly-root/standalone/configuration/standalone.xml

タグがある所を探し(ファイルの最後あたり)、デプロイに失敗したアプリ名の箇所を削除します。

<deployments>
    <deployment name="postgresql-9.4.1212.jar" runtime-name="postgresql-9.4.1212.jar">
        <content sha1="38931d70811d9bfcecf9c06f7222973c038a12de"/>
    </deployment>

    <!-- 対象のアプリ名部分を削除する -->
    <deployment name="Test.war" runtime-name="Test.war">
        <content sha1="fcb6ff1bf0777ce6b276f5067903db03c1addc3d"/>
    </deployment>
    <!-- ここまで -->
</deployments>

関連ファイルを削除する

WildFlyインストールディレクトリからfindコマンドで対象のアプリ名で検索をかけます。
それでヒットしたファイル、ディレクトリを削除します。
忘れましたが、warファイルとそれらを展開したクラスファイル等があるディレクトリを削除すれば良いです。

MacでAndroid Studioを初回起動、新規プロジェクトを作成するまで

初めてAndroid Studioをインストールしてみました。
同じような方向けにどんな画面なのか、画像メインで記事を作成してみました。

アプリ自体開発したことないので、突っ込まれても回答できないのでご了承下さい。

セットアップ・ウィザード

1.ようこそ
f:id:shinsuke789:20180827131900p:plain

2.インストールタイプの選択。分からなければ標準を選択しておけばOK。
f:id:shinsuke789:20180827131907p:plain

3.表示色の設定
f:id:shinsuke789:20180827131920p:plain

4.設定の確認。SDKのダウンロードなど必要なファイル群をさらにダウンロードされます。
f:id:shinsuke789:20180827132504p:plain

5.各種ダウンロード中
f:id:shinsuke789:20180827132518p:plain

6.ダウンロード完了
f:id:shinsuke789:20180827132533p:plain

新規プロジェクト作成

1.やりたいことを選択。ここでは新規プロジェクト作成を選択。
f:id:shinsuke789:20180827122210p:plain

2.必要事項を編集。kotlinを選択してみた。
f:id:shinsuke789:20180827132603p:plain

3.開発する対象デバイスを設定する
f:id:shinsuke789:20180827132614p:plain

4.アクティビティーの追加
f:id:shinsuke789:20180827132626p:plain

5.アクティビティーの設定
f:id:shinsuke789:20180827132637p:plain

6.コンポーネントインストーラ
f:id:shinsuke789:20180827132650p:plain

7.ビルド中
f:id:shinsuke789:20180827132702p:plain

8.コーディング画面表示
f:id:shinsuke789:20180827132714p:plain

※ プロジェクトは「~/AndroidStudioProjects」に作成されます。

MacでAndroid Studioを日本語化する

MacAndroid Studioを日本語化する手順を紹介します。

環境

Mac OS 10.11.6
Android Studio 3.1.4

事前準備

Android Studioをダウンロードする

公式サイトよりAndroid Studioをダウンロードします。(約810MB)
developer.android.com

日本語化するためのpleiadesプラグインをダウンロードします。(約160MB)

pleiadesより「Pleiades プラグイン・ダウンロード」からダウンロードします。
Eclipse 日本語化 | MergeDoc Project

トップページから少しスクロールしたところにダウンロードリンクがあります。
f:id:shinsuke789:20180827121657p:plain

日本語化手順

1.ダウンロードした日本語化ファイル「pleiades-mac.zip」を解凍し「setup.app」をダブルクリックします。
f:id:shinsuke789:20180827121803p:plain

2.日本語化する「Android Studio.app」を選択します。
f:id:shinsuke789:20180827121857p:plain

3.選択するとパス等が表示されるので「日本語化する」をクリックします。
f:id:shinsuke789:20180827121956p:plain

4.日本語化が完了するとメッセージが表示されるので「OK」をクリックします。
f:id:shinsuke789:20180827122056p:plain

5.「終了」をクリックします。
f:id:shinsuke789:20180827122134p:plain

6.Android Studioを起動し、日本語化されたか確認します。
f:id:shinsuke789:20180827122210p:plain
f:id:shinsuke789:20180827130631p:plain

Android関連書籍

はじめてのAndroidプログラミング 第3版

はじめてのAndroidプログラミング 第3版

Kotlinスタートブック -新しいAndroidプログラミング

Kotlinスタートブック -新しいAndroidプログラミング

カラーミーショップで独自ドメインを使い、他サーバーでサブドメインを運用する方法

カラーミーショップを開設し、独自ドメインを使いつつ、他のサーバーでサブドメインを運用する案件がありました。
その時に少し手間取ったので、今後このようなことをされる方の参考になればと思いまとめてみました。

前提条件

カラーミーショップでの設定手順

1.カラーミーショップの管理ページにログインします
https://admin.shop-pro.jp/


2.上部メニューにある「アカウント・設定」→「ドメイン」をクリックします
f:id:shinsuke789:20180425104859p:plain


3.左メニューにある「ドメイン」→「独自ドメイン」をクリックします
f:id:shinsuke789:20180425104907p:plain


4.「独自ドメインを設定する」ボタンをクリックします
f:id:shinsuke789:20180425111042p:plain


5.「取得されているドメイン」に独自ドメインを入力し、「DNS(ネームサーバー)」に「カラーミーショップのDNS(ネームサーバー)」が選択されていることを確認し、「確認」をクリックします
f:id:shinsuke789:20180425104952p:plain


6.設定内容が合っているか確認し、「送信」をクリックします
f:id:shinsuke789:20180425105005p:plain

ドメインのネームサーバーを「dns1.shop-pro.jp」「dns2.shop-pro.jp」に設定して下さいと言われますが、設定してはいけません。


参考:ドメインをカラーミーショップのみでご利用の方 | ネットショップ開業マニュアル

お名前.com等のドメインでの設定手順

ここではお名前.comを例とします。

DNSレコードの設定手順

1.ドメインの管理ページにログインします
https://navi.onamae.com/login


2.上部メニューの「ドメイン」をクリックします
f:id:shinsuke789:20180425105018p:plain


3.「ドメイン設定」をクリックして展開し、「DNS関連機能の設定」をクリックします
f:id:shinsuke789:20180425105029p:plain


4.カラーミーショップで使用する独自ドメインを選択し、「次へ進む」をクリックします
f:id:shinsuke789:20180425105039p:plain


5.ページを下の方にスクロールし「DNSレコード設定を利用する」の「設定する」をクリックします
f:id:shinsuke789:20180425105049p:plain


6.登録済みの欄が以下のようになるようにDNSレコードを追加、「確認画面に進む」をクリックし、DNSレコードの設定を完了します。

取得した独自ドメインを「shop-test.com」、サブドメインを「admin.shop-test.com」とした場合の設定例です。

ホスト名 TYPE TTL VALUE
shop-test.com A 3600 shop-test.shop-pro.comのIPアドレス
admin.shop-test.com A 3600 サブドメインを使うサーバーのIPアドレス
www.shop-test.com CNAME 3600 shop-test.shop-pro.com

TTLは初期値のままです


7.ネームサーバーが独自ドメインの初期値になっているか確認します
すでに「dns1.shop-pro.jp」「dns2.shop-pro.jp」に変えている場合、独自ドメインの初期値に戻して下さい。
お名前.comだと「01.dnsv.jp」「02.dnsv.jp」になります。


8.数分後、設定したドメインにアクセスできるか確認します。

「xxxxx.shop-pro.com」のIPアドレスを調べる

カラーミーショップで独自ドメインを使わない場合、「任意の値.shop-pro.com」というサブドメインが割り当てられます。
独自ドメインを決める煩わしさを解消するために設けられているようです。


さて「xxxxx.shop-pro.com」のIPアドレスを調べるには、2種類あります。


1.「ping」コマンドで調べる
Windowsは「コマンドプロンプト」、Macは「ターミナル」を起動し、次を入力するとIPアドレスが取得できます。

ping xxxx.shop-pro.com

ネットワークの環境によってはpingを実行しても思った答えた返って来なかったり、応答なしだったりします。
その時は、次のWebサービスを利用してみて下さい。


2.Webサービスで調べる
次のようなWebサービスドメインを入力するとIPアドレスが返ってきます。
www.cman.jp

おすすめの書籍

売れるネットショップ開業・運営 eコマース担当者・店長が身につけておくべき新・100の法則。

売れるネットショップ開業・運営 eコマース担当者・店長が身につけておくべき新・100の法則。

【小さな会社】 ネット通販 億超えのルール

【小さな会社】 ネット通販 億超えのルール