proshunsuke / colmsg

A CLI tool for 櫻坂46メッセージ, 日向坂46メッセージ, 乃木坂46メッセージ and 齋藤飛鳥メッセージ app.

⚠️UNDER CONSTRUCtION⚠️

colmsg's Issues

メッセージ保存処理の並列化

動作確認

• windows
• macos

バイナリファイル用意

アップリの最新バージョン2.1.02リリースした、ツールは使い出来なくなりました。

今使いツールバージョンは2.0.2です。
エラーログはリンクで
https://drive.google.com/file/d/1LVCHSQyJURKpz6TcsJjIQXKEs6B2Tzoy/view?usp=sharing

Main thread panicked at 'called `Option::unwrap()` on a `None` value' using macOS

I got the following error and I used the debugger to find the problem.
I found that the problem is related to the .DS_Store file generated by macOS for storing attributes.
https://en.wikipedia.org/wiki/.DS_Store

When the .DS_Store file is generated in member's folder, the function id_by_filename_format cannot capture the id and it will panic.

Can I make a pull request NRngnl/colmsg@ff89f70?
I am not sure if I should change the functions.

thread 'main' panicked at 'called `Option::unwrap()` on a `None` value', src/message/saver.rs:219:17
stack backtrace:
   0: _rust_begin_unwind
   1: core::panicking::panic_fmt
   2: core::panicking::panic
   3: colmsg::message::saver::id_by_filename_format
   4: colmsg::message::saver::Saver<C>::id_dates::{{closure}}
   5: walkdir::IntoIter::push
   6: walkdir::IntoIter::handle_entry
   7: <walkdir::IntoIter as core::iter::traits::iterator::Iterator>::next
   8: <core::iter::adapters::map::Map<I,F> as core::iter::traits::iterator::Iterator>::next
   9: <alloc::vec::Vec<T> as alloc::vec::spec_from_iter::SpecFromIter<T,I>>::from_iter
  10: colmsg::message::saver::Saver<C>::save
  11: colmsg::run_hinatazaka
  12: colmsg::main

レターを送っている場合にレスポンスを解析出来ずに失敗する

(400 Bad Request) for update_token

APP's UA and App-ID have been updated, please follow up, otherwise there will be 400 Bad Request.Thanks

Support nogizaka46 message app

Support for the recently released "乃木坂46メッセージ".
https://www.nogizaka46.com/s/n46/news/detail/65279?ima=3103

README.mdを修正する

• 特定の日時以降のメッセージを保存したい場合
  • 2020/01/01/ 00:00:00 → 2020/01/01 00:00:00
• TODO
  • swagger specの配置
• 特徴
  • root化の必要無し
  • android, iphone両方に対応
• アイコン拝借する

など

想定外のエラーの時にエラーメッセージが分かりにくい

APIのマイナーバージョンが異なっていた際のエラー

[colmsg error]: HTTP status client error (400 Bad Request) for url (https://api.kh.glastonr.net/v2/groups?)

これはこちらの error_for_status を使っており、エラーになった時にレスポンスをエラーにしてしまうので、reqwestのエラーメッセージがそのまま出ている
https://docs.rs/reqwest/0.8.0/reqwest/struct.Response.html#method.error_for_status

colmsgのコードで言うとこの辺

colmsg/src/http/client.rs

Line 60 in c64f94f

self.handle_response(response, &request_url)

本当はその後のこの部分でエラーを込めて欲しかったが、現状あまり意味を成していない

colmsg/src/http/client.rs

Lines 67 to 75 in c64f94f

	match result {
	Ok(t) => Ok(t),
	Err(e) => {
	let error_message = format!(
	"error: {}, request url: {}, response body: {}", e.to_string(), request_url, &body
	);
	Err(error_message.into())
	}
	}

HTTP status client error (400 Bad Request) for url

An error occurred after Sakurazaka's 3rd generation message started.

[colmsg error]: HTTP status client error (400 Bad Request) for url (https://api.s46.glastonr.net/v2/update_token)

support OpenSSL3

Command, build fails when using openssl3.

File exists (os error 17)

I can't create down directory and the command is
colmsg --h_refresh_ token "h_refresh_ token"
what is problem? Thanks you

thread 'main' panicked

I have problem when download 宮田愛萌

saving messages of 宮田愛萌...
thread 'main' panicked at 'called Option::unwrap() on a None value', src/message/saver.rs:220:17
note: run with RUST_BACKTRACE=1 environment variable to display a backtrace

無限ループしている気がする

100件以上保存出来ない
コマンド実行が終わらないので、無限ループしてずっと同じメッセを取得し続けているような気がする

日向坂しか購読していないとき

日向坂しか購読していないと-g hinatazakaつけないと以下のエラーが出るのはバグな気がします。
[colmsg error]: HTTP status client error (400 Bad Request) for url (https://api.s46.glastonr.net/v2/update_token)

usernameとtokenの取得方法

テストと自動テスト

新参者櫻坂46三期生 bug

There's some sort of bug when running colmsg --s_refresh_token <refresh_token>; it gets stuck downloading to the 新参者櫻坂46三期生 folder and never gets to the other members.

As far as I know, the same bug does not occur when downloading to 新参者日向坂46四期生:

error : make release/x86_64-darwin

  = note: /home/pro_shunsuke/Documents/osxcross/target/bin/x86_64-apple-darwin14-ld: error while loading shared libraries: libicui18n.so.65: cannot open shared object file: No such file or directory
          clang-10: ¥033[1;31merror: unable to execute command: No such file or directory¥033[0;30m
          clang-10: ¥033[1;31merror: linker command failed due to signal (use -v to see invocation)¥033[0;30m

日向坂のメッセージが保存出来なくなっている

refs: #41 (comment)

download folder

Can I change the download folder location?

Can't download messages from previous refresh token

first, i used my refresh token like"7fac6109-....." on my computer
and then i used friend's refresh token "40ef2f64-......".
But when i come back to use my refresh token. program was download data from friend's refresh token.
i tried to restart computer , it wasn't solve my problem

can't download message

C:\Users...\colmsg.exe -n 関有美子 --dir G:\colmsg --h_refresh_token <h_refresh_token> --s_refresh_token <s_refresh_token>

saving messages of 関有美子...
←31m[colmsg error]←[0: error: missing field member_id at line 1 column 1538, request url:

unwrap時のエラー

遅れたけど、あけおめ！
わたしは日本語があまりよくないので、理解されないかもしれない。

そのエラーは2.0verときからもあっている。
一部分のメンバーのidとかdateとか中のparameter違いがある、splitかunwrapときに例外處理のことがしなくて、エラーがあった...(?)
全員購読入していないから、全員のDEBUGログができない。ごめんなさい。
ログ写真を付き

About adding a function to detect past message and retry downloads

For example, I got a refresh from a friend of mine, and his subscription was earlier than mine. But if you use it directly, you may not be able to get the previous message.
So I was wondering if I could add a detection command that, if used, would compare the local files from the server to see if they exist, and download if they don't, this will also help us to download those who have failed to download due to network problems
In the event of a failed download, add the retry download feature.

Error during maintenance

response during maintenance

% colmsg
[colmsg error]: error: invalid type: map, expected a sequence at line 1 column 10, response body: {"result":{},"status":"FAIL","statuscd":"E700"}

response body json

{
    "result": {},
    "status": "FAIL",
    "statuscd": "E700"
}

can't know the error details when decoding response body

an error occured

[colmsg error] error decoding response body: invalid type: null, expected u32 at line 1 column 999

to be able to know error details

詳細なログ出力モードを追加する

ツールが突然死することがありエラーも吐かないので、どこで失敗しているのかが分かりにくい
オプションを渡すと詳細にログを出力するモードを追加する

I can't find the colmsg

what I miss something else?

Version2.0.00 support

The colmsg does not work now with version 2.0.00

api clientのcrate化

crates.ioに登録してそれを使うようにする

deleteの実装

mac向けのクロスコンパイルについて

概要

mac向けにクロスコンパイルをした
メモを残す

環境

OS: Manjaro Linux

参考URL

• https://wapl.es/rust/2019/02/17/rust-cross-compile-linux-to-macos.html

手順

基本は上記の手順通り

異なる点

上記の手順はDebian系なので、 Install build dependencies の部分でarch用のパッケージが分からないが、基本的にgccが入っていれば大丈夫そうだった

躓いたところ

Building the project のところで PATH="$(pwd)/osxcross/target/bin:$PATH" としているが、これは Building osxcross でビルドしたものについてパスを通そうとしているので、colmsgをビルドする場合は以下のような感じになる

PATH="/home/pro_shunsuke/Documents/osxcross/target/bin:$PATH" \
cargo build --release --target x86_64-apple-darwin

つまりは pwd をそのまま使うとダメで、 osxcross のパスを通すようにコマンド実行する必要がある
あとリリース用にビルドするのであれば --release が必要

こんな感じになる

pro_shunsuke:[~/Documents/colmsg][2:32:11]-[master]
% ls target/
debug/  release/  x86_64-apple-darwin/
pro_shunsuke:[~/Documents/colmsg][3:13:34]-[master]
% ls target/x86_64-apple-darwin/release/
build/  colmsg*  colmsg.d  deps/  examples/  incremental/  libcolmsg.d  libcolmsg.rlib

examples用意

レターを送れたメンバーはエーラー出る

エーラーログは下のリンクです。
https://drive.google.com/file/d/1FmcN8dQ-mR7J3liLnQGlWnqzZXrKKMiI/view?usp=sharing

"櫻坂46メッセージ"&"日向坂46メッセージ"support

"欅坂46/日向坂46メッセージ" will be divided into "櫻坂46メッセージ" & "日向坂46メッセージ" on 10/14.
Please note that the colmsg may not work after 10/14.

エラーメッセージを出ました

使用の際にこのメッセージを出ました
僕は普通に使用したけど
�[31m[colmsg error]�[0m: HTTP status client error (400 Bad Request) for url (https://api.kh.glastonr.net/v2/update_token)

Cargo.tomlを修正する

licenseとか適当なので

Bad Request update_token

An error occurs when executing a command(.\colmsg.exe).

[Details]

• colmsg:v2.0.4
• config:--h_refresh_token {refresh_token} -g hinatazaka -d {downlod_dir}

HTTP status client error (400 Bad Request) for url (https://api.kh.glastonr.net/v2/update_token)

can't download message

C:\Users...\colmsg.exe -n 大園玲 --dir G:\colmsg --h_refresh_token <h_refresh_token> --s_refresh_token <s_refresh_token>

←31m[colmsg error]←[0: error: missing field member_id at line 1 column 1551, request url:

Can't Download Hinatazaka 1st gen's message

Description

Hi, I can't download Hinatazaka 1st gen's message.

Reproduction steps

PS C:\Users< username >\colmsg-0.1.2> C:\Users< username >\colmsg.exe -n 影山優佳 --username < my Username > --token < my Token >

Log output

https://pastebin.com/raw/whRcGYAK

can't download 渡邉美穂

Only when use colmsg.exe -n 渡邉美穂 will nothing happened