波括弧（{と}）で囲まれた「カンマ区切りのJSONデータ」をJSONデータの配列として取得する

python ランダムデータ分析

インプットとなるデータの形式は次。 JSONデータ1,JSONデータ2,JSONデータ3,・・・・,JSONデータN それぞれのJSONデータは次の形式。 {"key1":"value1","key2":"value2"} つまり具体的には次のような形式のデータがインプットとなる（今回これは文字列でtarg…

2017-03-29

DBへのコネクションが２つ張られてしまう（未解決）

python sqlalchemy

適当に作っていたコードを流石にこれだとマズすぎると思って、修正中。そんな中、コネクションの数を調べていたら、1つだと想定していたコネクションが2つだったことのメモ。コネクションの数は次のSQLで調べる。 SELECT * FROM information_schema.PROCES…

2017-03-27

Python+MySQLでストアドプロシージャの実行（最後）〜SQLAlchemyでプロシージャを実行した結果はtupleのリストになってしまう

python mysql ストアドプロシージャ

ここまで続いてきた失敗だらけの履歴。 pythonのフレームワークはbottle、ORマッパーはSQLAlchemyを使用。・「Python+MySQLでストアドプロシージャの実行」・「Python+MySQLでストアドプロシージャの実行（続き）〜複数結果の取得はcursor.nextset()で順次…

2017-03-27

FOMCの予想通りの利上げ後からのドル売り継続

相場 FX

前回「FRBは予想通り利上げでSell USD by the fact、オランダ選挙は極右第1党ならずの見通しでBuy EUR」で記載した流れが継続。米国利上げ完了からは分かりやすい動きとなっている。それまでは「１ヶ月経過して逆の動きｗｗｗ」で書いたとおりハズレだったｗ…

2017-03-24

Python+MySQLでストアドプロシージャの実行（続き）〜複数結果の取得はcursor.nextset()で順次取得

python mysql ストアドプロシージャ

前回「Python+MySQLでストアドプロシージャの実行」で期待通りの結果にならなかった原因が判明。前回のコード。 #raw_connectionの取得 engine = dbMapper.create_engine(url, echo=False) connection = engine.raw_connection() # Query実行 cursor = conne…

2017-03-23

Pandasのto_csvでCSV出力時に「UnicodeEncodeError: 'ascii' codec can't encode characters」エラー

Pandas python 文字コード UnicodeEncodeError

次のように書いていてエラー。 inputDf = pd.read_csv("./result/test.csv", encoding="SJIS") 処理 inputDf.to_csv('./result/output.csv') 出力時にもencoding指定しないと駄目ですね。次のようにして回避。 inputDf = pd.read_csv("./result/test.csv", …

2017-03-23

Python+MySQLでストアドプロシージャの実行

python mysql ストアドプロシージャ

ストアドプロシージャを作成。下記はサンプル。 CREATE DEFINER=`DBユーザ名`@`%` PROCEDURE `ストアドプロシージャ名`(IN _dateStr VARCHAR(12)) BEGIN # Variables DECLARE done INT; DECLARE _stockCode INT; DECLARE selectCount INT; # Cursor DECLARE …

2017-03-16

JavaでOpenCSVを使用してCSVを作成した際の日本語文字化けについて

Java OpenCSV CSV 文字化け

次のように書いていて、日本語が文字化け。 csvWriter = new CSVWriter(new FileWriter(csvFileName), ',', CSVWriter.NO_QUOTE_CHARACTER);でも、FileWriterは文字コード指定できないから文字化けに対応できない。そのため、OutputStreamWriterを経由して…

2017-03-16

FRBは予想通り利上げでSell USD by the fact、オランダ選挙は極右第1党ならずの見通しでBuy EUR

FX 相場為替

KUメモは「１ヶ月経過して逆の動きｗｗｗ」に載せた通り。ここは声明文などのコピペやtweetを載せる。 ※）ニュースサイトは後でリンク消えになったりするのでコピペしておく。まずは「ＦＯＭＣ声明全文」をロイターから転記。ＦＯＭＣ声明全文 https://t.co/…

2017-03-16

１ヶ月経過して逆の動きｗｗｗ

為替 FX 相場

およそ１ヶ月前「2017年（前半）の為替」で考えたことと真逆ｗ。2017年2月22日からの5分足ベースだと、ユーロの一人勝ち。ショートカバーかぁ〜。直近1ヶ月だと大ハズレ。 FRB利上げによるSell the factの分を差し引くとドルもプラス。ドル高は簡単。だいぶ…

2017-03-10

Python+Ajaxで文字化け

python ajax 文字化け

原因究明していないが、解決したのでとりあえずメモ。後に追記するかも。画面からjQueryのライブラリ使ってAjaxでPOSTした変数をbottleのコントローラで受け取った際に日本語が文字化け。◎文字化け時のコントローラ stock_code = request.params['stock_cod…