pythonでプログラミング始めるわ

1 ：デフォルトの名無しさん：2022/02/03(木) 03:10:09.81 ID:9Bu5b3Fo.net

目標：エロ画像収集を半自動化して楽にする

2 ：デフォルトの名無しさん：2022/02/03(木) 03:15:08.06 ID:9Bu5b3Fo.net

1　ブラウザの拡張機能を作って、画像を数回の操作でダウンロードできるようにする
javascriptわかんないからこれは多分むり

2　pythonでwebスクレイピングしてその画像に付けられたタグや、作者、アップロード日などの情報を取得する

3　ファイル管理ソフトに画像を取り込んで2で得た情報を自動で登録する

3 ：デフォルトの名無しさん：2022/02/03(木) 03:23:31.96 ID:9Bu5b3Fo.net

管理ソフトにはeagleを使う
画像1枚ずつにjsonが用意されてタグとかを記述する方式

おおまかな計画は出来たし勉強すればいけるやろ
がんばるわ励ましてくれ

4 ：デフォルトの名無しさん：2022/02/03(木) 03:24:46.26 ID:9Bu5b3Fo.net

まずはpythonをインストールするわよオホホホホ

5 ：デフォルトの名無しさん：2022/02/03(木) 03:35:47.06 ID:9Bu5b3Fo.net

・懸念事項
画像を管理ソフトに自動取り込みしてメタデータを保存する辺りがムズそう

jsonに記述されるメタデータには画像ごとのidが含まれてるけどその生成方法とか色々わからん
だから自前のプログラムをこさえて自動登録することは難しそう
指定したフォルダ内の画像を随時自動で取り込む機能が管理ソフトにあるからそれを使うことを今の所想定している

6 ：デフォルトの名無しさん：2022/02/03(木) 03:43:27.27 ID:9Bu5b3Fo.net

しかもソフトは取り込み元の画像の現物ではなく、複製したものを参照してる
スクレイピングで取得したメタデータを書き込む相手をどうやって見つけるのかわからん

7 ：デフォルトの名無しさん：2022/02/03(木) 03:46:34.92 ID:9Bu5b3Fo.net

画像を取り込んで複製するときはファイル名を引き継がずによーわからん文字列にされるから簡単に特定できる方法がない
元ファイルの作成日時もメタデータに書かれてたような気がするがそれでいけるか？

8 ：デフォルトの名無しさん：2022/02/03(木) 20:39:51.02 ID:0ush6C9t.net

収集してる時が一番楽しい

9 ：デフォルトの名無しさん：2022/02/04(金) 22:36:41.05 ID:MwWgLKiA.net

>>1乙Python
以下クソスレ立てるな禁止

10 ：デフォルトの名無しさん：2022/02/05(土) 01:49:38.80 ID:HZdxa+ji.net

コマンドプロンプトのフォント変えようとしたら途中でフォントを消せなくなったりしてめっちゃ苦労した

11 ：デフォルトの名無しさん：2022/02/05(土) 02:10:37.05 ID:YRaOYkmO.net

進展
eagleが扱ってるjsonのメタデータを外から勝手に書き換えられるか実験した

1つ目はライブラリ全体のタグリストのデータに付け足してみてどうなるか。ソフトを起動してリストを表示しても増えてなかったけど、画像にタグ付けをするときの入力予想のとこきは表示されてた。今まで使ったことが無いタグを登録するときだけは手動で操作が必要かも？
2つ目に各画像のタグを増やしてみた。これはちゃんと反映してくれた。これで外部から操作できるとわかった。よかった
ただ不安なのが、ソフトを起動してからjsonファイルを見直してみるとタグの順番が入れ替わってたりすること。調べたら配列の要素の順番は保証されないとか書いてあるから杞憂かもしれんがよくわからんから保留

12 ：デフォルトの名無しさん：2022/02/05(土) 02:20:40.44 ID:YRaOYkmO.net

eagleに画像を取り込んだときファイル名が勝手に書き換えられると思い込んでたけど昨日確認してみたらそんなことなかった
ソースの画像と複製された画像2つをtxtにしてexcelで文字列の比較をしたが完全に一致てたわ。画像自体には一切手を加えずメタデータだけに書き込む可能性が高い

13 ：デフォルトの名無しさん：2022/02/05(土) 02:29:35.89 ID:YRaOYkmO.net

スクレイピングのこととか機械学習のこととかちょこっとだけ載ってる入門書勝手にパラパラめくってみたけど後半何が書いてあるのかさっぱりわからんな
なんか単語がドット.で繋がってる文がexcelのvbaみたいでムズそう
関数なのか変数なのかよくわからんやつ〜〜

14 ：デフォルトの名無しさん：2022/02/05(土) 23:23:00.34 ID:LZaEgHFB.net

入門書は読み終わっても入門できるだけだぞ?ｗ

15 ：デフォルトの名無しさん：2022/02/06(日) 02:19:09.22 ID:Lln9rsbc.net

門をくぐらせてくれるなら十分よ
まだ「たのもー！！」って言ったばかりなんだから

16 ：デフォルトの名無しさん：2022/02/11(金) 20:13:55.20 ID:ICBOazix.net

本の応用編以外はとりま一周終わったからtkinterいじってみてる
テトリス作ろうとしてる
たのち

17 ：デフォルトの名無しさん：2022/02/11(金) 22:50:44.46 ID:Lg8I1vzk.net

tkinter触り終わったら次はpyqtであそぼ
面白いよこれ

18 ：デフォルトの名無しさん：2022/02/13(日) 13:27:39.73 ID:SIXnP5qn.net

ちゃんとrobots.txt確認しろよ

19 ：デフォルトの名無しさん：2022/02/16(水) 21:13:49.58 ID:k+9M0Nsk.net

テトリス制作中々進まん
いきなり自力で作るのはさすがに身の程知らずだったわ
ブロックが埋まった行を消去するはずなのにその上側全部も消されてまうから笑うわ

20 ：デフォルトの名無しさん：2022/02/16(水) 21:59:54.20 ID:k+9M0Nsk.net

eagle(ファイル管理ソフト)に画像を自動で登録するのも自前でプログラム作らないと行けないと思いこんでたが今調べたら公式APIがあるっぽいわ
無いものと勝手に思い込んでたこのばかちんめ
これならだいぶ楽になるわありがてー

21 ：デフォルトの名無しさん：2022/02/16(水) 22:15:22.30 ID:k+9M0Nsk.net

python内でjsを直接実行するライブラリも調べたけど色々ムズそう
pythonとの間にjsonをかませて、apiの実行はhtml内にスクリプト書くことにするわ
jsonの読み書きくらいなら流石にできるだろ

pythonでwebスクレイピングして、画像のurl・タイトル・タグ等を取得
↓書き込み
自前のjsonファイル(eagleが扱うメタデータとは別物)
↓読み込み
index.htmlでapi実行

これでいけるんちゃうか？

22 ：デフォルトの名無しさん：2022/02/16(水) 22:30:18.30 ID:k+9M0Nsk.net

最初に書くはずなのに忘れてたわ。apiはjavascriptで実行するっぽい
httpリクエストが送れればどんな方法でもいいのかもしれないけど、サンプルコードをパクんないと自分には無理だ

https://api.eagle.cool/item/add-from-urls

23 ：デフォルトの名無しさん：2022/02/17(木) 00:09:13.25 ID:U/Ab4M74.net

>>22
Javascriptはfetchのためだけなので、pythonだけでもurllibとjsonで実現できるんじゃない？

24 ：デフォルトの名無しさん：2022/02/17(木) 01:59:24.96 ID:7YiBd8T+.net

>>23　できました！！
言語間でデータ型をどうすり合わせるのかとか全くわからなくて不安だったけど、ライブラリが強力だから楽ちんだ……
助かったm(_ _)m感謝

https://i.imgur.com/qf6YFsJ.jpg

25 ：デフォルトの名無しさん：2022/02/17(木) 07:40:44.24 ID:CXnnYl5F.net

ランサーズでパイソンを納品する方法についてです
私はターミナルを使って実行しているのですが、納品する場合はどのようにしたらいいですか

26 ：デフォルトの名無しさん：2022/02/17(木) 16:53:53.10 ID:wmWnke54.net

それって取引先に聞いたほうがいいんじゃね
わしゃニートだからわからんが、.pyのままソースコードを提出したりpyinstallerで実行ファイルにまとめたりとかを指定されるもんじゃないの？

27 ：デフォルトの名無しさん：2022/02/20(日) 00:46:02.93 ID:fpsjVmPD.net

requestsとBeautifulSoupでデータをゲットして管理ソフトに登録するまでの自動化に成功した
まだ1つのサイトでしかできないが他に応用するのはそこまで苦労しないっしょ
イエイ

28 ：デフォルトの名無しさん：2022/02/20(日) 01:00:06.85 ID:fpsjVmPD.net

本当にムズイのはここからだぁ
javascruptで拡張機能作りたいし
あとはタグのリストを作ってサイト間で同音異義語になってるものをまとめたり、要らないものを捨てたりしたい
アカウントのログイン、フォロー新着チェックとかも
うわあ

29 ：デフォルトの名無しさん：2022/03/05(土) 03:15:29.01 ID:H8E+9Ud2.net

chromeの拡張機能の作り方わけわからん
ヒーヒー言いながら日本語で解説してくれてるサイトと公式リファレンスをメモしてやっと概要が掴めてきた
明日から少しずつ作ってく

30 ：デフォルトの名無しさん：2022/03/05(土) 03:51:36.05 ID:H8E+9Ud2.net

表示中のサイトにDOM操作をするスクリプトと、ストレージに書き込んだりとか高度な処理をするスクリプトを分離してやり取りせなあかんらしい。そのイベント処理がまだイマイチわからぬ

A(イベント発生)→B(コールバック)とC→Bみたいに複数の種類の通信をしたいとき、指定した送り主と受け取り側を一対一に繫げる記述とか無いの「かも」しれん
addListenerメソッドが沢山あったらイベントが起きるたびに全部動くってこと？？？ひぃぃ
各コールバック関数の中で最初にイベントの内容を確認して、人違いなら即returnすりゃいいの？sendMessageメソッド側が受け取るレスポンスはどうなんの？nullを沢山受け取るの？ひぃぃ

31 ：デフォルトの名無しさん：2022/03/05(土) 04:36:06.19 ID:WF/cHs1f.net

addListener1個置いて中で場合分けすりゃええんじゃね

32 ：デフォルトの名無しさん：2022/03/05(土) 17:02:39.61 ID:5r5ZrDak.net

なるへそ、出来るかどうか調べてみるわ
サンキュ

33 ：デフォルトの名無しさん：2022/03/05(土) 17:31:07.50 ID:H8E+9Ud2.net

connectっていうメソッド名で長期的にやり取りできるやつがあるっぽいがこれ良さそうポート名を設定して、送受信が一対一に結ばれるっぽい

34 ：デフォルトの名無しさん：2022/03/08(火) 00:12:11.64 ID:rJoBOrbq.net

イベントリスナーが複数のjsファイルにあって1つにまとめられないときは全てが発火して最初に帰ってきたリスポンスだけ受け取るらしい
……わからん　ヘ（。□°）ヘ

https://developer.chrome.com/docs/extensions/mv3/messaging/#simple

35 ：デフォルトの名無しさん：2022/03/08(火) 00:35:47.67 ID:rJoBOrbq.net

2つのファイルに1つずつイベントリスナーを設置して実験

アクセス中のページに適応するdom操作向けのスクリプト(content script)でボタンを配置

ブラウザ右上の拡張機能アイコンを押したときのポップアップページ(action)と、API全盛りの処理任せ役スクリプト(background)にそれぞれイベントリスナー

結果 : ポップアップを開いてるときしかactionのスクリプトは動作しないっぽい
開いてるときはactionとbackgroudの両方ともちゃんとイベントを受け取ってるけど、何故かレスポンスは必ずactionから帰ってくる
actionに無駄なfor分加えて処理遅らせようとしても変わらない

……？？？更に謎が深まった……

36 ：デフォルトの名無しさん：2022/05/01(日) 00:52:47.91 ID:y/JjfE+d.net

おひさ
この二ヶ月間ろくに進まなかった

37 ：デフォルトの名無しさん：2022/05/01(日) 01:02:20.67 ID:y/JjfE+d.net

chrome拡張機能ムズいわ。特にファイル周り
デフォルトのダウンロード先の設定を無視して特定の場所に保存したり、その日集めた分のデータを単一のファイルにまとめたりしたいができましぇん

のでDjangoでローカルサーバーこさえて仕事を任せられないか試して見る
こっちはこっちでムズいが日本語の解説が豊富だからありがてぇ

38 ：デフォルトの名無しさん：2022/05/10(火) 10:12:54.32 ID:59eDANbA.net

そりゃブラウザで好き勝手に出来たらヤバいやんｗ

39 ：デフォルトの名無しさん：2023/01/26(木) 22:01:53.78 ID:/vTJfn8SP

(入れてはならない政党５大税金泥棒政策)
観光促進‥温室効果ガスに騷音にコロナにとまき散らして気侯変動させて災害連発させて国土破壊して人を殺す強盜殺人推進腐敗テ□国家な
軍備拡張‥ウクライナは軍事費GDP比４％超て゛脅威視されて攻撃されたわけが．白々しく挑発して軍事利権を獲得したい岸田異次元増税文雄
金融緩和…資本家階級資産倍増、もはやひとりで資産１兆圓超，末代まで揺らく゛ことのない圧倒的格差社会優越的地位濫用促進政策な
孑供給付…全國航空騒音まみれで勉強まで妨害しなか゛ら．貧乏人に不幸な孑を産み落とさせて遺棄を推進する國家犯罪地球破壊人殺し政策な
　　　　　正しい子供政策とは．ひとり産むこ゛とに５千萬課税．払える見込みか゛なけれは゛日当５千圓で塀の中から孑に送金させることだろ
原発稼働…クソ航空機バンバン飛ばしまくって莫大な石油をひたすら無駄に燃やしまくって航空騷音威カ業務妨害による知的産業壊滅によって
　　　　　システム障害まみれのポンコツ腐敗後進国が笑わせよる。テ□リスト自民公明か゛第ニのフクシマ利権確保したいだけなのがバレバレ

創価学会員は．何百万人も殺傷して損害を与えて私腹を肥やし続けて逮捕者まて゛出てる世界最惡の殺人腐敗組織公明党を
池田センセ一か゛口をきけて容認するとか本気て゛思ってるとしたら侮辱にもほどがあるぞ！
ｈＴＴрｓ：／／ｉ．ｉｍｇｕｒ．сοｍ／hnli1ga.jpeg

40 ：デフォルトの名無しさん：2023/08/07(月) 17:34:57.31 ID:mt89RKQB6

ｋｓｋ

41 ：デフォルトの名無しさん：2023/09/01(金) 19:09:09.58 ID:oVgCtGp1.net

最近、友達との会話が楽しすぎる！